Omniverse Audio2Face
Omniverse Audio2Face ist eine Referenzanwendung, die die Animation eines 3D-Charakters vereinfacht, um jede Voice-Over-Spur anzupassen. Es ist mit einem 3D-Charaktermodell vorbeladen, das mit einer Voice-Over-Spur animiert werden kann, und die Audio-Eingabe wird in ein vortrainiertes Deep Neural Network eingespeist und die Ausgabe steuert die 3D-Vertizes des Charakter-Meshs, um die Gesichtsanimation in Echtzeit zu erstellen. Es verfügt auch über eine Charakter-Transfer-Funktion, die es Benutzern ermöglicht, auf jedes 3D-Menschengesicht oder menschenähnliches Gesicht umzulenken, und ermöglicht es ihnen, die Ausgabe mit mehreren Charakteren in der Szene zu skalieren und die Emotion des Charakters mit einem AI-Netzwerk zu steuern. Es verfügt auch über Datenkonvertierungsfunktionen, die Blendshape-Konvertierung und Blendweight-Exportoptionen ermöglichen, und unterstützt den Export-Import mit Blendshapes für Blender und Epic Games Unreal Engine, um Bewegungen für Charaktere zu generieren.
Preismodell: