Исследователи представили LUNA — универсальную модель для создания фотореалистичных 3D-аватаров, которая отказывается от традиционного метода Linear Blend Skinning (LBS). Система напрямую преобразует 2D-данные, включая изображения, ключевые точки и наброски, в качественную 3D-анимацию. Это позволяет обходить ограничения параметрических моделей тела и избегать артефактов, возникающих при неточном наложении текстур на скелетную структуру.
Традиционные подходы к созданию аватаров часто зависят от жестких шаблонов, которые ограничивают выразительность персонажей. LUNA использует нейросетевой подход для моделирования деформаций, что обеспечивает более естественную динамику движений и высокую детализацию даже при работе с монокулярными входными данными. Модель демонстрирует способность к генерации анимации для персонажей, которые ранее не встречались в обучающей выборке.
Технология открывает новые возможности для индустрии компьютерной графики и создания контента, позволяя автоматизировать процесс переноса движений на 3D-модели без сложной ручной настройки весов скининга. Использование различных типов 2D-контроллеров делает инструмент гибким для применения в задачах дополненной реальности и интерактивных медиа.
Ключевые факты
- LUNA исключает использование Linear Blend Skinning (LBS), устраняя типичные артефакты деформации.
- Модель поддерживает мультимодальное управление, включая изображения, ключевые точки и эскизы.
- Система способна анимировать персонажей, отсутствовавших в обучающем наборе данных.
- Метод позволяет создавать фотореалистичные аватары на основе монокулярных входных данных.