Omniverse Audio2Face

Omniverse Audio2Face adalah aplikasi referensi yang menyederhanakan animasi karakter 3D agar sesuai dengan trek sulih suara apa pun. Aplikasi ini dilengkapi model karakter 3D yang dapat dianimasikan menggunakan trek sulih suara. Input audio dimasukkan ke jaringan saraf dalam yang telah dilatih sebelumnya, lalu output-nya menggerakkan verteks 3D pada mesh karakter untuk membuat animasi wajah secara real time.

Aplikasi ini juga memiliki fitur transfer karakter yang memungkinkan pengguna mengarahkan ulang animasi ke wajah manusia atau wajah 3D yang menyerupai manusia, menskalakan output dengan beberapa karakter dalam satu adegan, dan mengontrol emosi karakter menggunakan jaringan AI. Selain itu, tersedia fitur konversi data, termasuk konversi blendshape dan opsi ekspor blendweight, serta dukungan ekspor-impor blendshape untuk Blender dan Epic Games Unreal Engine guna menghasilkan gerakan karakter.