ChinaZ.com (站长之家) Meldung vom 17. Juni: Der 65-jährige KI-Künstler, IT-Redakteur und Musiker Koya Matsuo (松尾公也) hat seine vor 11 Jahren verstorbene Frau Tori-chan (小鸟酱) mithilfe von Technologie wieder zum Leben erweckt. Mit Lumas KI-Video-Tool Dream Machine erstellte er ein Video, das unzählige Menschen zu Tränen rührte.

Video von Koya Matsuo (松尾公也)

Tori-chan verstarb 2013 an Brustkrebs. Um ihrer zu gedenken, begann Matsuo ein Projekt: Er arrangierte und nahm ihre alten Lieder neu auf und veröffentlichte sie im iTunes Store. Da ihr Gesundheitszustand jedoch bereits sehr schlecht war, war ihr Gesang unstet. Daher erstellte Matsuo mit ihrer Stimme eine UTAU-Soundquelle, um neue Songs zu synthetisieren und diese mit den Originalaufnahmen zu kombinieren, um ein vollständiges Ergebnis zu erzielen.

image.png

UTAU ist eine Open-Source-Software zur Sprachsynthese, die oft von Bilibili-Nutzern für die Erstellung von „Ghost Videos“ (鬼畜视频) verwendet wird. Am 1. September 2023 vollendete Matsuo seinen ersten Song mit einer UTAU-Soundquelle. Auf diese Weise hat er still und heimlich Hunderte von Liedern geschaffen, um Tori-chan zu ehren.

image.png

Im Zeitalter der KI verwandelte sich Matsuos Sehnsucht von etwas Unfassbarem zu etwas Greifbarem. Er lernte verschiedene KI-Techniken kennen und verbesserte alte Fotos mit Pixel und Remini, erstellte Videos mit DID und komponierte mit KI-Musikinstrumenten wie Stable Audio, Udio und Suno. Als Lumas Dream Machine auf den Markt kam, sah er seine Chance.

image.png

Matsuo sagte: „Mein Ziel war nicht die Filmherstellung, sondern es ging darum, Standbilder zum Leben zu erwecken, meine vor 11 Jahren verstorbene Frau wieder in Bewegung zu sehen.“ Er verwendete Fotos aus den Jahren 1978-1987 und generierte mit Dream Machine ein dynamisches Video. Er passte Mimik, Hintergrund und Bewegungen immer wieder an und baute voller Hoffnung seine Erinnerung an sie auf.

Er generierte mit Dream Machine mehrere Szenen von Tori-chan, schrieb einen Song mit Suno, trennte die Gesangsstimme mit Logic Pro 11s STEM Splitter und veränderte die Stimme mit Vocoflex zu Tori-chans Stimme, um ein sehr bewegendes Musikvideo zu erstellen.

Matsuo extrahierte und übersetzte auch einen Brief, den Tori-chan 1984 an ihn geschrieben hatte, der von tiefer Liebe zeugt. Dieses Video ist Matsuos Antwort an seine Frau im Jahr 2024, ausgedrückt durch Technologie, um seine Sehnsucht und Liebe auszudrücken.

Dies ist die Geschichte eines normalen Menschen, der mit Technologie Träume verwirklicht. Auf seine Weise hat er aus begrenzten alten Fotos und Tondateien einen Traum für sich und seine Frau gewebt, der von Zärtlichkeit und Liebe erfüllt ist. Er sagte: „人生は終わっても、物語は続く (Selbst wenn das Leben endet, geht die Geschichte weiter).“

Liebe überwindet den Tod. Im Zeitalter der KI kehren die schönsten Erinnerungen in unsere Träume und unser Blickfeld zurück. Dies ist die Geschichte eines Mannes, der für immer mit seiner Frau singen wird, und seine Geschichte wird für immer weiterleben.

Dream Machine Produktseite: https://top.aibase.com/tool/luma-ai