Contact
QR code for the current URL

Story Box-ID: 1200247

Reallusion 2033 Gateway Place 95110 San Jose, United States http://www.reallusion.com
Contact Ms Cosa Lu
Company logo of Reallusion

Vom Audio zur Animation - Integration der KI-basierten Audio2Face Funktion in iClone

(PresseBox) (San Jose, )
Reallusion freut sich, die nahtlose Zusammenarbeit zwischen Character Creator, iClone und Audio2Face zu präsentieren. Diese leistungsstarke Verbindung wird durch NVIDIAs KI-Animationstechnologie unterstützt und revolutioniert die Produktion mehrsprachiger lippensynchroner Gesichtsanimationen. Die neue Lösung erweitert nicht nur NVIDIAs Audio2Face um ein vielseitiges, anwendungsübergreifendes Charaktersystem, sie verbessert auch die Möglichkeiten der Gesichtsbearbeitung und ermöglicht den Export von Charakter-Animationen in führende 3D-Engines wie Blender, Unreal Engine, Unity und Omniverse.

NICHT-LINEARE KI-ANIMATION MIT AUDIO2FACE

Lippensynchrone Animation und Mimik direkt aus Ihrem Audiomaterial

NVIDIA Audio2Face ist eine KI-basierte Anwendung, die ausdrucksstarke Gesichtsanimationen allein mittels Audioeingabe generiert. Neben der Erzeugung natürlicher lippensynchroner Animationen für mehrsprachige Dialoge unterstützt die neueste Standalone-Version von Audio2Face auch Gesichtsausdrücke und verfügt über Schieberegler und einen Keyframe-Editor.

MULTILINGUALE LIPPENSYNCHRONISATION UND GESANGS-ANIMATION

Im Gegensatz zu den meisten Lösungen, die sich auf die englische Sprache konzentrieren, zeichnet sich Audio2Face durch seine einzigartige Fähigkeit aus, aus jeder Sprache, sogar aus Liedern und Kauderwelsch, Animationen zu generieren. Zusätzlich zum Standard-KI-Modell Mark haben Sie Zugriff auf Clarie, ein neues Deep-Learning-Modell, das auf weibliche, asiatisch sprechende Charaktere zugeschnitten ist. Der freundliche Tonfall von Clarie ist ideal für die Interaktion mit Kunden.

NAHTLOSE ZUSAMMENARBEIT ZWISCHEN CC, A2F UND ICLONE

Zwei komplementäre Plugins ermöglichen einen automatisierten Workflow. Mit nur einem Klick können Sie einen CC Charakter in NVIDIA Audio2Face konfigurieren, ihn in Echtzeit zu einer importierten Audiospur animieren und die Sprachanimationen nahtlos zurück in iClone übertragen, um sie vor dem Export in 3D Tools und Game Engines weiter zu optimieren.

CC-Charaktere in Audio2Face mit einem Klick einrichten

Das CC Character Auto Setup Plugin für Audio2Face ist das Ergebnis der Zusammenarbeit zwischen NVIDIA und Reallusion. Das Plugin fasst den 18-stufigen manuellen Prozess in einem einzigen Schritt zusammen. Durch Importieren eines CC-Charakters und Auswählen eines Trainingsmodells - Mark oder Claire - können Benutzer sofort lebensechte Sprachanimationen erstellen, die mit den Audiodateien synchronisiert sind. Experimentieren Sie mit Bewegungssteuerungen, automatischen Gesichtsausdrücken und sogar Keyframes. Die fertigen Animationen können dann zur weiteren Bearbeitung an iClone gesendet werden.

KOMPLEXE ANIMATIONSBEARBEITUNG

Das kostenlose NVIDIA Audio2Face Plugin für iClone wurde entwickelt, um Animationsdaten von Audio2Face zu empfangen. Es importiert nicht nur die Animationen, sondern sorgt auch für lebendige Gesichtszüge. Das Ergebnis ist ein hervorragender Film, der für die Endproduktion verwendet werden kann.

Individuelle Gesichtsanpassung

Die Animationen können über eine dynamische Schnittstelle optimiert werden. Passen Sie verschiedene Parameter wie Mimik, Kopfbewegungen oder Augenbewegungen an, um die Präsentation lebendiger zu gestalten. Vergrößern Sie den Kieferöffnungsbereich, um die Emotionen zu verstärken, und optimieren Sie die Zungenposition, um eine präzise Aussprache zu imitieren.

Gleichmäßige Bewegungen

Die Erzeugung von KI-Animationen ist anfällig für unerwünschte Effekte, insbesondere wenn Audiodateien mit Geräten von schlechter Qualität oder in ungünstigen Umgebungen aufgenommen wurden. Die Audio2Face-Integration von Reallusion umgeht diese Einschränkungen, indem sie einen hochwertigen Rauschfilter verwendet, um Ruckeln zu eliminieren und auch bei schlechter Audioqualität optimale Ergebnisse zu erzielen.

NEUE MASSSTÄBE SETZEN

Sobald eine geeignete Animation von Audio2Face vorliegt, ist eine weitere Feinabstimmung erforderlich, insbesondere bei emotionalen Veränderungen oder der Betonung bestimmter Mundformen in verschiedenen Dialogen. iClone ermöglicht die Bearbeitung von Gesichtern, die Verfeinerung der Lippensynchronisation, das Hinzufügen natürlicher Mimik und die Integration von Kopfbewegungen, die von Mocap-Geräten (AccuFACE, iPhone Live Face) stammen.

Die Integration von Character Creator, iClone und Audio2Face ist ein bedeutender Meilenstein in der KI-gesteuerten Animationstechnologie. Sie bietet Produzenten eine bisher unerreichte Flexibilität und Effizienz in ihren Produktionsabläufen. Das Character Creator Auto Setup Plugin und das iClone Plugin stehen ab sofort zum kostenlosen Download bei Reallusion zur Verfügung. Das Character Creator Auto Setup Plugin und das iClone Plugin sind ab sofort als kostenlose Downloads bei Reallusion erhältlich. Sie ermöglichen es den Entwicklern von Animationen, ihre Arbeitsabläufe zu optimieren und ihr kreatives Potenzial voll auszuschöpfen.

Weitere Informationen über das iClone Audio2Face Plugin finden Sie unter:

Website Promotion

Website Promotion
The publisher indicated in each case (see company info by clicking on image/title or company info in the right-hand column) is solely responsible for the stories above, the event or job offer shown and for the image and audio material displayed. As a rule, the publisher is also the author of the texts and the attached image, audio and information material. The use of information published here is generally free of charge for personal information and editorial processing. Please clarify any copyright issues with the stated publisher before further use. In case of publication, please send a specimen copy to service@pressebox.de.
Important note:

Systematic data storage as well as the use of even parts of this database are only permitted with the written consent of unn | UNITED NEWS NETWORK GmbH.

unn | UNITED NEWS NETWORK GmbH 2002–2024, All rights reserved

The publisher indicated in each case (see company info by clicking on image/title or company info in the right-hand column) is solely responsible for the stories above, the event or job offer shown and for the image and audio material displayed. As a rule, the publisher is also the author of the texts and the attached image, audio and information material. The use of information published here is generally free of charge for personal information and editorial processing. Please clarify any copyright issues with the stated publisher before further use. In case of publication, please send a specimen copy to service@pressebox.de.