RunwayとMusixmatchが提携：ミュージシャンのためのAI生成歌詞ビデオ作成支援

エンターテインメント業界におけるAI動画技術の急速な普及が進んでいます。今週、1970年代のホラー映画「レイトナイト・ウィズ・ザ・デビル」の話題が沸騰し、AI生成のタイトルカードを用いたレトロなグラフィックが観客から賛否を呼んでいます。また、3D AIアセット作成ツールである「Stable Video 3D」の発表や、AI動画スタートアップ「Runway」と広告代理店「Media.Monks」との戦略的パートナーシップも発表されました。この提携により、Media.Monksのチームメンバーやクライアントは、Runwayの革新的なテキスト＆画像から動画へのAIソフトウェアに直接アクセスできるようになります。

さらに、Runwayが発表した画期的なパートナーシップには、イタリアの音楽テック企業「Musixmatch」が含まれます。MusixmatchはSpotifyやApple Music、Instagramなどの主要プラットフォーム向けにデバイス内でライブ同期された歌詞を提供しています。この協力により、Musixmatchに所属する100万人以上のミュージシャンがRunwayの先進的なAI動画生成モデル「Gen-2」を活用することができます。Gen-2モデルは、多重モーションブラシや領域選択ツールなどの機能を強化されており、アーティストが音楽に合ったダイナミックな動画コンテンツを作成できるようになります。

Runwayのプレスリリースによれば、このパートナーシップはミュージシャンが歌詞に同期したAI動画を効率的に生成できるように設計されています。この取り組みは、歌詞と音楽、そして映像がシンクロした人気のリリックビデオの作成プロセスをスムーズにし、アーティストやストーリーを含む従来のミュージックビデオとは一線を画しています。

RunwayのGen-2には、歌詞を解釈して動画生成プロセスを簡略化する「Lyrics to Video」機能が搭載されています。ただし、この機能はMusixmatchのプロサブスクリプション、月額2.99ドルから利用可能です。Musixmatch Proユーザーは、別途Runwayのアカウントやサブスクリプションを必要とせず、この機能は直接Musixmatchの体験に統合されています。動画が生成されると、アーティストはそれをダウンロードまたはSNSでシェアすることができます。

アトランタを拠点とするトリップホップグループ「Earthgang」など、一部のアーティストはすでにGen-2を活用してリリックビデオを制作しており、今回のコラボレーションの即効性が示されています。

RunwayのCEO、クリストバル・バレンスエラ氏は、「Musixmatchの活気あるアーティストコミュニティのクリエイティブプロセスにRunwayの最先端モデルを直接統合できることを嬉しく思います。このパートナーシップにより、アーティストは動画を通じて創造的なビジョンを高め、世界中の観客との深い関係を築くことができます。」と述べています。

Musixmatchのプロダクト責任者、マルコ・パリア氏は、「AIは新たな創造性の波をもたらしています。MusixmatchとRunwayのコラボレーションによって、ミュージシャンは動画制作の革新的なパートナーを得て、アート表現の幅を広げることができます。」と語っています。

両社のコラボレーションに対する期待が高まる一方で、Runwayのスポークスマンは、このパートナーシップの一環としてAIトレーニングのためにデータを共有することはないと明言しています。契約の財務条件については公開されていません。

著名なアーティストたちは、創造的プロジェクトを強化するためにAI技術をますます取り入れています。A$AP Rockyやマドンナ、Ye（元カニエ・ウェスト）などが、AI生成のビジュアルを自身の作品に成功裏に組み込んでいます。最近、ラッパーのニッキー・ミナージュは、アルバム「Pink Friday 2」の宣伝にAI生成の画像を使用したことについてX（旧Twitter）で議論を交わしました。

Runwayは、AI動画生成ツールを統合するためにCanvaなどのソフトウェアプロバイダーとのパートナーシップを拡大しており、より広範なオーディエンスにアクセスできるようにしています。Runwayは一部の無料動画制作を提供していますが、その後の使用には月額12ドルからのサブスクリプションが必要です。このスタートアップは、Googleを含む著名な投資家からの支援を受けています。

Gen-2が2023年6月に登場以来、AI動画分野のリーダーとして認識される一方で、Runwayは競争の激化に直面しています。最近のOpenAIの「Sora」モデルのデモは非常にリアルな動画を披露し、新たな課題をもたらしました。同様に、競合の「Pika」はAI駆動のリップシンク機能やサウンドエフェクト生成モデルなどを発表し、競争を一層激化させています。

AI動画生成の景観が進化し続ける中、Runwayの戦略的パートナーシップは競争力を維持するために重要です。業界は、動画コンテンツ制作の未来を形作る可能性のある進展を注視しています。