Wenn Sie KI-Influencer oder -Kreatoren in sozialen Medien verfolgt haben, ist Ihnen vielleicht die Aufregung um ein neues KI-Video-Generierungsmodell namens „Kling“ aufgefallen. Kling erzeugt hochrealistische Videos aus Texteingaben und In-App-Einstellungen und ist mit OpenAIs exklusiv verfügbarem KI-Modell Sora vergleichbar. Sora befindet sich derzeit in einer geschlossenen Beta-Phase und wurde selektiv mit einer ausgewählten Gruppe von Künstlern und Filmemachern zum Testen geteilt, insbesondere um deren umstrittene Anwendungsmöglichkeiten zu erkunden.
Kling demonstrierte seine Fähigkeiten kürzlich auf YouTube, indem es „air head“ nachbildete, eines der ersten Videos, das von der Kreativagentur Shy Kids mit Sora erstellt wurde.
Was ist Kling und woher stammt es?
Laut dem South China Morning Post (SCMP) wurde Kling von Kuaishou Technology entwickelt, dem Unternehmen hinter Kuaishou, Chinas zwe beliebteste Kurzvideo-App (außerhalb Chinas als Kwai bekannt) mit 400 Millionen täglich aktiven Nutzern. Damit liegt es hinter Douyin, der chinesischen Version von TikTok, die 600 Millionen DAUs hat. Das hohe Nutzerengagement macht Kling besonders attraktiv und könnte Kuaishous Position im Wettbewerb mit Douyin stärken.
SCMP berichtet, dass das Kling-KI-Modell, das sich derzeit in der Testphase befindet, Texte in Videoclips von bis zu zwei Minuten Länge und in 1080p-Auflösung umwandeln kann, wobei verschiedene Seitenverhältnisse unterstützt werden. Es kann Eingaben so interpretieren, dass Videos geschaffen werden, die reale Szenarien oder fantasievolle Szenen spiegeln.
Laut Quellen von Perplexity verwendet Kling einen einzigartigen 3D Variational Autoencoder (VAE) zur Gesichts- und Körperrekonstruktion, der detaillierte Ausdrücke und Bewegungen aus einem einzigen Ganzkörperbild erfasst. Dies wird durch einen 3D-räumlich-zeitlichen Aufmerksamkeitsmechanismus ergänzt, der es dem Modell ermöglicht, komplexe Szenen unter Berücksichtigung der physikalischen Gesetze zu handhaben.
Zugang zu Kling und Kosten
Kling ist kostenlos über die Kuaishou-, Kwai- und KwaiCut-Apps (letztere ist ein Video-Editing-Wettbewerber zu TikToks CapCut) verfügbar. Allerdings könnten potenzielle Nutzer außerhalb Chinas auf Zugänglichkeitsprobleme stoßen; Berichten zufolge wird eine chinesische Telefonnummer benötigt, um die App herunterzuladen und zu nutzen.
Die Venture-Capital-Partnerin Justine Moore von a16z schlug einen Workaround vor, indem man eine Burner-Nummer über die KwaiCut-App nutzt. Der amerikanische Filmemacher Dustin Hollywood empfahl zudem, ChatGPT zur Übersetzung von App-Menüs und -Schnittstellen für nicht-chinesischsprachige Nutzer zu verwenden.
Die Möglichkeiten von Kling
Frühe Nutzer berichteten, dass Kling besonders gut darin sei, immersive und realistische hochauflösende Videos in verschiedenen Genres zu erstellen, von Actionszenen bis hin zu Ego-Shooter-Nachbildungen und hochfantastischen Szenarien, die an „House of the Dragon“ oder „Game of Thrones“ erinnern.
Dustin Hollywood erwähnt, dass die Erstellung eines Videos basierend auf einem "mittelkomplexen" Prompt etwa zwei Minuten in Anspruch nimmt. Er merkt jedoch einige Einschränkungen an, insbesondere bei der genauen Darstellung von Rasse und Hautfarbe, ähnlich den Herausforderungen, mit denen Googles Gemini KI in der Bildgenerierung konfrontiert ist.
Trotz dieser Mängel sorgt Kling in der Filmemacher-Community für Aufregung und bringt viele, darunter Hollywood, dazu, ihre Ansichten über Sora und OpenAIs vorsichtige Vertriebsstrategie zu überdenken.
Die Auswirkungen von Kling auf die KI-Video-Landschaft
Der Aufstieg von Kling wirft Fragen darüber auf, ob US-amerikanische KI-Video-Anbieter wie OpenAI, Runway und Pika ihre Angebote in Bezug auf Qualität und Auflösung verbessern müssen. Es bleibt abzuwarten, ob sie sich schnell anpassen können, um das zu erreichen oder zu übertreffen, was Kling bietet.
Für alle, die sich für KI-Filmmaking oder die breitere Filmindustrie interessieren, ist die Einführung von Kling sicherlich eine spannende Entwicklung. Wir hoffen auf eine vollständige Veröffentlichung in den USA ohne die aktuellen Einschränkungen hinsichtlich der Telefonnummernverifizierung.