Omniverse Audio2face-это справочное приложение, которое упрощает анимацию 3D-символа в соответствии с любым голосовым треком. Он предварительно загружен с 3D-моделью символов, которую можно оживить с помощью голосовой дорожки, а аудио вход подается в предварительно обученную глубокую нейронную сеть, а выход приводит к 3D-вершинам сетки символа для создания анимации лица в в режиме реального времени. Он также имеет функцию переноса персонажа, которая позволяет пользователям ретаргироваться на любое 3D-лицевое лицо человека или человека, и позволяет им масштабировать вывод с несколькими символами в сцене и контролировать эмоции персонажа с помощью сети ИИ. Он также имеет функции преобразования данных, которые позволяют для преобразования BlendShape и вариантов экспорта смеси и опционов в масштабе смеси, а также поддерживает экспортный импорт с помощью Blendshapes для Blender и Epic Games Unreal Engine, чтобы генерировать движение для персонажей.
Добавить комментарий