NICHT-LINEARE KI-ANIMATION MIT AUDIO2FACE
Lippensynchrone Animation und Mimik direkt aus Ihrem Audiomaterial
NVIDIA Audio2Face ist eine KI-basierte Anwendung, die ausdrucksstarke Gesichtsanimationen allein mittels Audioeingabe generiert. Neben der Erzeugung natürlicher lippensynchroner Animationen für mehrsprachige Dialoge unterstützt die neueste Standalone-Version von Audio2Face auch Gesichtsausdrücke und verfügt über Schieberegler und einen Keyframe-Editor.
MULTILINGUALE LIPPENSYNCHRONISATION UND GESANGS-ANIMATION
Im Gegensatz zu den meisten Lösungen, die sich auf die englische Sprache konzentrieren, zeichnet sich Audio2Face durch seine einzigartige Fähigkeit aus, aus jeder Sprache, sogar aus Liedern und Kauderwelsch, Animationen zu generieren. Zusätzlich zum Standard-KI-Modell Mark haben Sie Zugriff auf Clarie, ein neues Deep-Learning-Modell, das auf weibliche, asiatisch sprechende Charaktere zugeschnitten ist. Der freundliche Tonfall von Clarie ist ideal für die Interaktion mit Kunden.
NAHTLOSE ZUSAMMENARBEIT ZWISCHEN CC, A2F UND ICLONE
Zwei komplementäre Plugins ermöglichen einen automatisierten Workflow. Mit nur einem Klick können Sie einen CC Charakter in NVIDIA Audio2Face konfigurieren, ihn in Echtzeit zu einer importierten Audiospur animieren und die Sprachanimationen nahtlos zurück in iClone übertragen, um sie vor dem Export in 3D Tools und Game Engines weiter zu optimieren.
CC-Charaktere in Audio2Face mit einem Klick einrichten
Das CC Character Auto Setup Plugin für Audio2Face ist das Ergebnis der Zusammenarbeit zwischen NVIDIA und Reallusion. Das Plugin fasst den 18-stufigen manuellen Prozess in einem einzigen Schritt zusammen. Durch Importieren eines CC-Charakters und Auswählen eines Trainingsmodells - Mark oder Claire - können Benutzer sofort lebensechte Sprachanimationen erstellen, die mit den Audiodateien synchronisiert sind. Experimentieren Sie mit Bewegungssteuerungen, automatischen Gesichtsausdrücken und sogar Keyframes. Die fertigen Animationen können dann zur weiteren Bearbeitung an iClone gesendet werden.
KOMPLEXE ANIMATIONSBEARBEITUNG
Das kostenlose NVIDIA Audio2Face Plugin für iClone wurde entwickelt, um Animationsdaten von Audio2Face zu empfangen. Es importiert nicht nur die Animationen, sondern sorgt auch für lebendige Gesichtszüge. Das Ergebnis ist ein hervorragender Film, der für die Endproduktion verwendet werden kann.
Individuelle Gesichtsanpassung
Die Animationen können über eine dynamische Schnittstelle optimiert werden. Passen Sie verschiedene Parameter wie Mimik, Kopfbewegungen oder Augenbewegungen an, um die Präsentation lebendiger zu gestalten. Vergrößern Sie den Kieferöffnungsbereich, um die Emotionen zu verstärken, und optimieren Sie die Zungenposition, um eine präzise Aussprache zu imitieren.
Gleichmäßige Bewegungen
Die Erzeugung von KI-Animationen ist anfällig für unerwünschte Effekte, insbesondere wenn Audiodateien mit Geräten von schlechter Qualität oder in ungünstigen Umgebungen aufgenommen wurden. Die Audio2Face-Integration von Reallusion umgeht diese Einschränkungen, indem sie einen hochwertigen Rauschfilter verwendet, um Ruckeln zu eliminieren und auch bei schlechter Audioqualität optimale Ergebnisse zu erzielen.
NEUE MASSSTÄBE SETZEN
Sobald eine geeignete Animation von Audio2Face vorliegt, ist eine weitere Feinabstimmung erforderlich, insbesondere bei emotionalen Veränderungen oder der Betonung bestimmter Mundformen in verschiedenen Dialogen. iClone ermöglicht die Bearbeitung von Gesichtern, die Verfeinerung der Lippensynchronisation, das Hinzufügen natürlicher Mimik und die Integration von Kopfbewegungen, die von Mocap-Geräten (AccuFACE, iPhone Live Face) stammen.
Die Integration von Character Creator, iClone und Audio2Face ist ein bedeutender Meilenstein in der KI-gesteuerten Animationstechnologie. Sie bietet Produzenten eine bisher unerreichte Flexibilität und Effizienz in ihren Produktionsabläufen. Das Character Creator Auto Setup Plugin und das iClone Plugin stehen ab sofort zum kostenlosen Download bei Reallusion zur Verfügung. Das Character Creator Auto Setup Plugin und das iClone Plugin sind ab sofort als kostenlose Downloads bei Reallusion erhältlich. Sie ermöglichen es den Entwicklern von Animationen, ihre Arbeitsabläufe zu optimieren und ihr kreatives Potenzial voll auszuschöpfen.
Weitere Informationen über das iClone Audio2Face Plugin finden Sie unter:
- Erstellen Sie natürliche Sprech-Animationen aus Audiomaterial mit dem iClone Audio2Face Plugin
- Kostenloser Download der iClone und Audio2Face Plugins vom Reallusion Marketplace
- Audio2Face Installationsanleitung
- Audio2Face Einsteiger-Tutorial
- Testen Sie iClone zur Animation von Charakteren für 30 Tage kostenlos