3D VTuber-модель в формате VRM: с чего начать

3D-витубер выступает с объёмной моделью, которую можно повернуть в любую сторону, показать в полный рост и подвигать руками. Почти все такие модели для стримов хранятся в формате VRM. Разберём, что это за формат, где взять 3D-модель, в каких программах с ней стримить и как пройти путь от файла .vrm до первой трансляции.

Что такое VRM

VRM — открытый формат для 3D-аватаров людей и человекоподобных персонажей. Он основан на glTF, распространённом формате 3D-моделей, и создан в Японии специально под виртуальных персонажей.

В одном файле с расширением .vrm лежит всё, что нужно программе для витубинга:

• сама модель и текстуры;
• скелет со стандартными костями, поэтому любая программа знает, где у персонажа голова, руки и пальцы;
• выражения лица: моргание, формы рта под гласные звуки, базовые эмоции;
• настройки физики волос и одежды;
• сведения об авторе и условия использования: можно ли стримить с моделью, можно ли использовать её коммерчески.

Условия использования вшиты прямо в файл, но ориентироваться всё равно стоит на страницу продавца или автора — там они описаны полнее.

У формата есть две версии: VRM 0.x и VRM 1.0. Не все программы понимают обе. Если модель не открывается, первым делом проверьте версию файла и поддерживает ли её ваша программа.

Чем 3D отличается от Live2D

Live2D-модель — это плоский рисунок, который двигается в ограниченных пределах: голова поворачивается и наклоняется, но затылком к зрителю персонаж не развернётся, а ниже пояса его обычно нет. 3D-модель можно развернуть спиной, показать целиком, посадить на стул или поставить в 3D-сцену.

Взамен 3D сильнее нагружает компьютер, а по стилю отличается от привычной «аниме-картинки». Подробное сравнение — в статье «Выбор между 2D и 3D аватарами для VTuber».

Где взять 3D-модель

Сделать в VRoid Studio

VRoid Studio — бесплатная программа от pixiv для создания аниме-персонажей в 3D. Это конструктор: форма лица, глаза и тело настраиваются ползунками, волосы рисуются прядями прямо по голове, одежду можно перекрасить или нарисовать свою текстуру. Готовый персонаж экспортируется в VRM.

Плюсы — бесплатно и без навыков 3D-моделирования. Минусы — у моделей узнаваемый «вроидовский» вид, а сложные причёски и одежду внутри программы не сделать. Для серьёзной доработки модель потом открывают в Blender или Unity.

Купить готовую

Готовые VRM-модели продаются на японских и международных площадках. Часто в комплекте сразу несколько форматов: VRM для витубинга и исходники для Unity или Blender. Перед покупкой проверьте:

• есть ли в комплекте именно файл .vrm, а не только пакет для VRChat;
• разрешены ли стримы и монетизация;
• какие выражения лица и эмоции настроены;
• поддерживает ли модель Perfect Sync (об этом ниже).

Готовые 3D-модели с оплатой в рублях собраны в каталоге 3D-моделей.

Заказать

Модель на заказ у 3D-художника — самый дорогой и долгий путь, зато персонаж будет уникальным. О ценах на модели — в статье «Сколько стоит модель витубера».

Программы для 3D-витубинга

VTube Studio работает только с Live2D, VRM-модель в нём не открыть. Для 3D используют другие программы.

VSeeFace. Бесплатная программа для Windows. Отслеживает лицо по веб-камере, может принимать трекинг с iPhone через сторонние приложения и не слишком нагружает компьютер. Фон можно сделать прозрачным, чтобы показать модель поверх игры в OBS. Хороший выбор для первого знакомства с 3D.

Warudo. Бесплатная программа в Steam с более широкими возможностями: 3D-сцены и окружение, предметы, взаимодействие со зрителями, визуальные сценарии без программирования, трекинг по веб-камере или iPhone. Тяжелее VSeeFace и требует больше времени на освоение.

Есть и другие программы, например VNyan и 3tene. Принцип у всех похож: загрузили VRM, выбрали камеру, захватили окно в OBS.

Пошагово: от файла до стрима

1. Получите модель в формате VRM: экспортируйте из VRoid Studio или скачайте купленную.
2. Установите программу — для начала проще всего VSeeFace или Warudo.
3. Загрузите модель и выберите камеру. Сядьте прямо и откалибруйте трекинг с нейтральным лицом.
4. Проверьте выражения. Моргните, скажите «а-и-у-э-о», улыбнитесь. Если рот не двигается под речь, проверьте настройки синхронизации губ и выбранный микрофон.
5. Назначьте горячие клавиши на эмоции — радость, злость, удивление, — чтобы переключать их во время стрима.
6. Добавьте модель в OBS. Включите прозрачный фон в программе и захватите её окно, либо используйте зелёный фон и хромакей.
7. Сделайте тестовую запись с игрой и проверьте, хватает ли производительности.

Perfect Sync: подробная мимика

Стандартных выражений VRM хватает для моргания, речи и пары эмоций. Для подробной мимики существует Perfect Sync — набор из 52 форм лица под трекинг Apple ARKit. С iPhone или iPad с Face ID такая модель повторяет движение щёк, прищур, мелкие движения губ и бровей.

Модели из VRoid Studio по умолчанию Perfect Sync не поддерживают — эти формы добавляют отдельно, обычно в Blender. Если для вас важна живая мимика, ищите в описании готовой модели упоминание Perfect Sync или ARKit.

Что с железом

3D-модель рисует видеокарта, а трекинг по веб-камере нагружает процессор. Если вы стримите тяжёлые игры на среднем ПК, начните с лёгкой программы, снизьте качество рендера модели или перенесите трекинг на телефон.

Отслеживание рук по веб-камере в некоторых программах уже есть, но работает заметно грубее, чем трекинг лица. Для точных движений рук используют отдельные датчики, а для полного тела — VR-трекеры. Начинать с этого не обязательно: большинство 3D-витуберов стримит с трекингом лица и головы.

Коротко

• VRM — стандартный формат 3D-моделей для витубинга, в одном файле лежат модель, скелет, эмоции и условия использования.
• Бесплатно сделать модель можно в VRoid Studio, для уникального персонажа — купить готовую или заказать.
• Стримить с VRM можно в VSeeFace или Warudo, VTube Studio для 3D не подходит.
• Для подробной мимики нужны модель с Perfect Sync и iPhone или iPad с Face ID.