Omniverse Audio2Face - это приложение-справочник, которое упрощает анимацию 3D-персонажа, подходящего к любому дорожному комментарию. Он предварительно загружен с 3D-моделью персонажа, которую можно анимировать с помощью голосового комментария, а входное аудио подается на предварительно обученную глубокую нейронную сеть, и выходные данные управляют 3D-вершинами сетки персонажа, создавая мимику в реальном времени. Он также имеет функцию передачи персонажа, которая позволяет пользователям перенаправлять на любое 3D-лицо человека или похожего на человека, и позволяет им масштабировать выходные данные с несколькими персонажами на сцене и контролировать эмоцию персонажа с помощью сети искусственного интеллекта. Он также имеет функции преобразования данных, которые позволяют для преобразований blendshape и экспорта опций blendweight, а также поддерживает экспорт-импорт с Blendshapes для Blender и Unreal Engine Epic Games для генерации движения персонажей.
