Mocap Fusion [ VR ]

Создайте полное захватывающее движение с помощью пользовательских аватаров и VR-оборудования. Включите захват лиц, синхронизацию губ, отслеживание глаз и многое другое.

Экспортируйте целые сцены захвата движения прямо в Blender с помощью встроенной автоматизации — от записи до рендеринга всего за несколько минут!

: Requires a 64-bit processor and operating system
OS: Windows 10
Processor: Intel Core i7
Memory: 4 GB RAM
Graphics: Nvidia GTX 1070
Storage: 5 GB available space
VR Support: SteamVR
Additional Notes: Use low performance settings in app for best results.

: Requires a 64-bit processor and operating system
OS: Windows 10
Processor: Intel Core i7
Memory: 4 GB RAM
Graphics: Nvidia GTX 1070
Storage: 5 GB available space
VR Support: SteamVR
Additional Notes: Use low performance settings in app for best results.

Motion Capture Fusion [VR] — это уникальная песочница для захвата движений в виртуальной реальности, предназначенная для художников и аниматоров, которые хотят создавать и экспортировать анимации с использованием технологий захвата движений. Для работы требуется всего лишь VR-гарнитура и два контроллера, что позволяет пользователям создавать захват движений на своих аватарах. Более опытные пользователи могут создавать более детализированный захват движений, включая полный захват тела, комбинируя данные с другими сенсорами, такими как Apple iPhone Truedepth и Oculus Quest 2 для отслеживания пальцев. Эта комбинация сенсоров позволяет объединять множество слоев захвата движений в одном дубле, включая: полный захват тела, захват лица, синхронизацию губ, отслеживание взгляда и оптическое отслеживание пальцев.

Основные возможности включают запись захвата движений с использованием пользовательских аватаров, сцен и реквизита, добавление пользовательских шейдеров, текстур, эмоций и динамической физики. Поддерживается Vive Pro Eye, отслеживание губ Vive и Iphone ARKit для захвата лица. Программа совместима с HTC Vive, Valve Index, Oculus Rift, Oculus Quest 2 и некоторыми WMR-гарнитурами. Также возможно использование без VR, с трекерами или только с отслеживанием головы iPhone. Пользователи могут добавлять несколько аватаров в сцену и создавать раскадровки. Имеется камера для захвата движений и масштабирования, где игрок выступает в роли оператора в VR, а также платформы для симуляции полетов VTOL и фиксированного крыла для аэрофотосъемки.

Поддерживаемые форматы экспорта включают экспорт в SFM (.dmx), Blender (.blend) и Unity (.anim). Доступны плагины Live Link для Unreal Engine, Blender и Unity, которые обеспечивают синхронизацию аватара в реальном времени и запись в реальном времени.

Одной из уникальных особенностей Mocap Fusion является возможность экспорта данных захвата движений и реконструирования сцены в Blender, что позволяет быстро готовить финальную визуализацию. Пользователи могут интегрировать свои аватары на протяжении всего рабочего процесса, что исключает необходимость перенастройки и гарантирует, что данные захвата движений всегда соответствуют 1:1.

Совместимые гарнитуры (VR HMDs) включают Valve Index, HTC Vive (и Vive Pro Eye) и Oculus Quest (1 и 2). Дополнительное оборудование для отслеживания включает трекеры SteamVR Vive, сенсор TrueDepth iPhone для захвата лица и отслеживания глаз, а также Oculus Quest 2 для полного оптического отслеживания пальцев.

Возможности программы позволяют экспортировать захват движений и создавать сцены в Blender™ мгновенно, осуществлять полный захват тела с помощью трекеров HTC™ Vive (до 11 дополнительных точек), записывать, воспроизводить и редактировать захваченные движения в VR, а также настраивать профили IK и параметры аватаров. Поддерживается SteamVR Knuckles для детальной артикуляции пальцев.

Опыт использования зависит от ПК пользователя и используемого оборудования для отслеживания. Рекомендуемые гарнитуры SteamVR — это Valve Index или HTC Vive, хотя Quest HMD также может показать хорошие результаты. Полный захват тела доступен только при использовании трекеров для ног и бедер. Более реалистичные результаты можно добиться с помощью трекеров тела и дополнительных возможностей захвата лица.

Изначально проект был разработан как интуитивный способ создания виртуальных обучающих видео и презентаций в иммерсивной среде VR. После бета-тестирования сообществом проект получил множество отзывов и запросов на функции, что позволило улучшить его функциональность для различных создателей контента.