Новая программа Audio2Face от Nvidia на основе нейросети анимирует 3D-модель лица только на основе г

Программа работает на открытой платформе Nvidia Omniverse. Там можно сделать модель в режиме реального времени. На сайте компании для скачивания доступна открытая бета-версия программы. Чтобы воспользоваться программой, нужно загрузить в нее готовую звуковую дорожку или использовать микрофон для записи аудио напрямую.

Стандартная анимация использует модель персонажа Digital Mark, но ее можно поменять на лицо с любыми другими чертами или даже на животное. Сейчас программа доступна на английском, французском, итальянском и русском языках. В компании заявили, что Audio2Face позже сможет обрабатывать любые языки.