Das Unternehmen Xiyu hat in der Videosynthesebranche neue Fortschritte erzielt und die neue Videosynthesemodelle Hailuo02 vorgestellt.
Laut Angaben ist Hailuo02 in der Verarbeitung hochkomplexer Szenarien wie Gymnastikaktionen herausragend und stellt derzeit das einzige Modell weltweit dar, das solche Effekte erreichen kann. Seit dem Release des Demo-Websites für die Videosynthese im August letzten Jahres hat das von Xiyu entwickelte Produkt Sea Snail über 370 Millionen Videos für Kreative generiert. Der Einführung von Hailuo02 folgt eine weitere Verringerung der Schwelle für die Videoschaffung sowie eine Verbesserung der Qualität der Schaffung.
Hinter Hailuo02 steht das Kernarchitekturmodell Noise-aware Compute Redistribution (NCR), das die Trainings- und Inferenzleistung bei gleicher Parametergröße um 2,5-mal erhöht. Dadurch können größere Parametergrößen verwendet werden, ohne dass die Kosten für die Nutzer steigen, was das Darstellungsvermögen des Modells verbessert. Gleichzeitig wurde die Gesamtparameteranzahl gegenüber der vorherigen Version auf ein Dreifaches ausgeweitet, um Platz für Optimierung beim Inferenzprozess zu schaffen.
Mit den größeren Gesamtparametermengen und der höheren Trainingsleistung ist Hailuo02 in der Lage, mehr Daten zu modellieren. In Zusammenarbeit mit den Rückmeldungen der Nutzer von Hailuo01 wurden die Datenmenge auf viermal die Größe der Vorgängerversion ausgedehnt, wobei sowohl die Datenqualität als auch die Vielfalt signifikant gesteigert wurden. Dies führt zu einer bemerkenswerten Verbesserung in der Erfüllung komplexer Anweisungen und der Darstellung komplexer physikalischer Phänomene. Das neue Modell kann komplexe Anweisungen vollständig befolgen und sorgfältig formulierten Hinweisen besser gerecht werden. Außerdem können Kreative originelle 1080p-Videos zu relativ günstigen Preisen generieren.
In Tests der Arena für künstliche Analysevideos erreichte eine frühere Version von Hailuo02 den zweiten Platz weltweit. Derzeit ist das Modell in der Web-Version, der App und der offenen API-Plattform von Sea Snail vollständig aktualisiert worden und bietet drei Versionen: 768p-6s, 768p-10s und 1080p-6s. Xiyu Technology bietet weiterhin die besten Preise der Branche an und plant schnellere Updates in Bezug auf Geschwindigkeitssteigerungen, Präferenzausrichtung, fortgeschrittene Funktionen und die Erkundung der Grenzen der technischen und künstlerischen Kombination.