Der chinesische AI-Videoerstellungsplattform KlingsAI hat kürzlich eine neue Funktion für digitale Personen vorgestellt, die einen großen Durchbruch bei der Umwandlung von statischen Bildern in dynamische Videos darstellt. Mit nur einem Bild des Charakters und einer Text- oder Audioeingabe kann der Nutzer schnell ein hochwertiges Video mit Auflösung 1080p, 48 FPS und maximal einer Minute Länge erstellen.
Laut offizieller Information basiert diese Funktion auf tiefen Integrationstechnologien von multimodaler Verständnis- und Videoerstellungsmodellen und zeigt sich besonders gut in der Lippenbewegungssynchronisation und emotionalen Ausdrucksfähigkeit. Das System kann die Gesichtsausdrücke und Körpersprache der digitalen Person präzise steuern, um sicherzustellen, dass die Lippenbewegungen perfekt zum Audioinhalt passen, und gleichzeitig die emotionale Stimmung und Bewegungsintensität der Figur automatisch an die emotionale Farbe des Textes oder der Sprache anpassen.
Diese Funktion unterstützt die Erstellung verschiedener Arten von Charakteren, einschließlich unterschiedlicher Altersgruppen, Geschlechter und Stile, und verfügt über die Fähigkeit, mehrere Sprachen wie Chinesisch, Englisch, Japanisch und Koreanisch zu verarbeiten, wodurch globale Benutzern lokale Erfahrungen bieten.
Diese Funktion wird neue Möglichkeiten für verschiedene Branchen eröffnen. In der Inhaltsproduktion können unabhängige Content-Creator und Kurzvideo-Produzenten schnell personalisierte digitale Moderatoren erstellen; im Bildungsbereich können Institutionen virtuelle Dozenten für Kurslektionen erstellen; im Unternehmensmarketing können Marken digitale Botschafter mit einheitlichem Erscheinungsbild für Produktwerbung erstellen.
Im Vergleich zu traditionellen Aufnahmen von echten Menschen oder komplexen 3D-Modellierungsprozessen senkt die digitale Personenfunktion von KlingsAI deutlich den technischen Schwierigkeitsgrad und die Kosten für die Videoerstellung, sodass auch gewöhnliche Nutzer professionelle digitale Personenvideos erstellen können.
Momentan befindet sich die digitale Personenfunktion von KlingsAI in der öffentlichen Testphase und wird schrittweise für Benutzer freigeschaltet. Die Einführung dieser Funktion markiert einen weiteren Fortschritt in der technischen Stärke von KlingsAI im Bereich der AI-Videoerstellung und fügt auch neuen differenzierten Vorteilen für chinesische AI-Video-Tools im intensiven Wettbewerb hinzu.
Adresse: https://klingavatar.github.io/
