Runway arbeitet mit Musixmatch zusammen, um Musikern die Erstellung von KI-generierten Lyric-Videos zu ermöglichen.

Der rasante Einsatz von KI-Video-Technologie in der Unterhaltungsbranche nimmt zu. In dieser Woche sorgte der Horrorfilm Late Night With the Devil aus den 1970er Jahren für Aufsehen, da er KI-generierte Titelkarten für retro Grafiken verwendet hat, was bei den Zuschauern auf gemischte Reaktionen stieß. Zudem wurden Fortschritte wie die Veröffentlichung von Stable Video 3D, einem 3D-KI-Asset-Erstellungstool, sowie eine strategische Partnerschaft zwischen dem KI-Video-Startup Runway und der Werbeagentur Media.Monks bekannt gegeben. Diese Zusammenarbeit ermöglicht den Mitgliedern und Kunden von Media.Monks direkten Zugang zu Runways innovativer KI-Software zur Erstellung von Videos aus Text und Bildern.

Darüber hinaus kündigte Runway eine bahnbrechende Partnerschaft mit Musixmatch an, dem italienischen Musik-Technologie-Unternehmen, das für seine Live-Textanpassungen auf Plattformen wie Spotify, Apple Music und Instagram bekannt ist. Ziel dieser Kooperation ist es, über eine Million Musiker von Musixmatch in die Lage zu versetzen, Runways Gen-2, ein fortschrittliches KI-Video-Generator-Modell, zu nutzen. Das Gen-2-Modell bietet Verbesserungen wie einen Multi Motion Brush und einen Bereichsselector, die es Künstlern ermöglichen, dynamische Videoinhalte zu erstellen, die ihre Musik ergänzen.

Laut einer Pressemitteilung von Runway wurde die Partnerschaft initiiert, um Musikern die effiziente Erstellung von KI-Videos zu ermöglichen, die mit ihren Texten synchronisiert sind. Dies wird die Produktion von Lyric-Videos - beliebten Clips, die Songtexte im Einklang mit der Musik und passenden Visuals präsentieren - vereinfachen, wodurch sie von traditionellen Musikvideos, die oft den Künstler oder eine Handlung enthalten, getrennt werden.

Runways Gen-2 integriert eine Funktion "Lyrics to Video", die Songtexte interpretiert und den Prozess der Videoerstellung vereinfacht. Der Zugang zu dieser Funktion ist jedoch exklusiv dem Pro-Abonnement von Musixmatch vorbehalten, das bei 2,99 $ pro Monat startet. Musixmatch Pro-Nutzer benötigen kein separates Runway-Konto oder -Abonnement; die Funktion wird direkt in ihre Musixmatch-Erfahrung integriert. Nach der Erstellung können Künstler die Videos herunterladen oder in sozialen Medien teilen.

Einige Künstler, darunter die in Atlanta ansässige Trip-Hop-Gruppe Earthgang, nutzen bereits Gen-2, um Lyric-Videos zu erstellen und zeigen so das unmittelbare Potenzial dieser Zusammenarbeit.

Cristobal Valenzuela, CEO von Runway, erklärte: "Wir freuen uns, Runways fortschrittliche Modelle direkt in den kreativen Prozess der lebhaften Künstlergemeinschaft von Musixmatch zu integrieren. Diese Partnerschaft wird Künstlern ermöglichen, ihre kreative Vision durch Videos zu verwirklichen und tiefere Verbindungen zu ihrem globalen Publikum herzustellen."

Marco Paglia, Chief of Product bei Musixmatch, bemerkte: "KI läutet eine neue Welle der Kreativität ein. Mit der Zusammenarbeit zwischen Musixmatch und Runway haben Musiker jetzt einen innovativen Partner für die Videoerstellung, der ihre künstlerische Ausdrucksweise bereichert."

Obwohl die Kooperation Begeisterung hervorruft, stellte ein Runway-Sprecher klar, dass im Rahmen dieser Partnerschaft keine Daten für das KI-Training geteilt werden. Finanzielle Einzelheiten der Vereinbarung wurden nicht bekannt gegeben.

Prominente Musiker setzen zunehmend auf KI-Technologie, um ihre kreativen Projekte zu bereichern. Namenhafte Künstler wie A$AP Rocky, Madonna und Ye (ehemals Kanye West) haben KI-generierte visuelle Elemente erfolgreich in ihre Arbeiten integriert. Kürzlich diskutierte die Rapperin Nicki Minaj auf X (ehemals Twitter) über ihren Einsatz von KI-generierten Bildern zur Promotion ihres Albums Pink Friday 2.

Runway erweitert seinen Einfluss durch Partnerschaften mit Softwareanbietern wie Canva, um seine KI-Video-Generierungstools einem breiteren Publikum zugänglich zu machen. Während Runway eine begrenzte Anzahl kostenloser Videoerstellungen anbietet, ist für die weitere Nutzung ein Abonnement ab 12 $ pro Monat erforderlich. Das Startup hat Unterstützung von namhaften Investoren, darunter Google, erhalten.

Trotz der Anerkennung als führendes Unternehmen im Bereich KI-Video seit dem Start von Gen-2 im Juni 2023 sieht sich Runway zunehmendem Wettbewerb ausgesetzt. Das jüngste Demo-Modell Sora von OpenAI, das unglaublich lebensechte Videos präsentierte, hat neue Herausforderungen mit sich gebracht. Ähnlich hat der Wettbewerber Pika Funktionen wie KI-gestützte Lippen-Synchronisation und ein Modell zur Erstellung von Soundeffekten eingeführt, was den Wettbewerb weiter verschärft.

Da sich die Landschaft der KI-Video-Generierung ständig weiterentwickelt, werden Runways strategische Partnerschaften entscheidend sein, um die Wettbewerbsfähigkeit zu wahren. Die Branche bleibt aufmerksam gegenüber Entwicklungen, die die Zukunft der Videoerstellung prägen könnten.