Runway 與 Musixmatch 聯手，幫助音樂人創作 AI 生成的歌詞影片

Home AI新聞 Runway 與 Musixmatch 聯手，幫助音樂人創作 AI 生成的歌詞影片

娛樂產業中，AI視頻技術的快速採用正在上升。本週，1970年代恐怖片《和魔鬼共度深夜》的熱議引發了關注，該片利用AI生成的標題卡來呈現復古圖形，觀眾反應不一。此外，3D AI資產創建工具Stable Video 3D的發布，以及AI視頻初創公司Runway和廣告代理商Media.Monks之間的戰略合作也相繼宣布。這一合作將使Media.Monks的團隊成員和客戶直接訪問Runway創新的文本和影像轉視頻AI軟件。

然而，Runway的最新公告揭示了與意大利音樂科技公司Musixmatch的突破性合作。Musixmatch以其在Spotify、Apple Music和Instagram等主要平台上的即時同步歌詞聞名，這一合作旨在使Musixmatch的超過百萬名音樂人能夠利用Runway的先進AI視頻生成模型Gen-2。Gen-2模型具備多動作畫筆和區域選擇器等增強功能，使藝術家能夠創作出動態視頻內容，與其音樂相輔相成。

根據Runway的新聞稿，該合作旨在幫助音樂人高效生成與歌詞同步的AI視頻，簡化了流行的歌詞視頻創作，這類視頻展示了與音樂和環境視覺同步的歌詞，與通常包含藝術家或劇情的傳統音樂視頻分開。Runway的Gen-2模型具有「歌詞轉視頻」功能，能夠解讀歌詞，簡化視頻生成過程。然而，該功能僅限於Musixmatch的專業訂閱級別，起價為每月$2.99。Musixmatch Pro用戶無需單獨註冊Runway帳戶或訂閱，該功能將直接整合到Musixmatch體驗中。視頻生成後，藝術家可下載或在社交媒體平台上分享。

包括亞特蘭大Trip-hop組合Earthgang在內的一些藝術家，已經開始使用Gen-2創作歌詞視頻，顯示出這一合作的即時潛力。Runway首席執行官Cristobal Valenzuela表示：“我們很高興將Runway的尖端模型直接融入Musixmatch充滿活力的藝術家社區的創作過程中。這一合作將幫助藝術家通過視頻提升創作視野，與全球觀眾建立更深的聯繫。”

Musixmatch產品負責人Marco Paglia指出：“AI正引領創意的新浪潮。Musixmatch和Runway之間的合作，讓音樂人擁有了一個創視頻的創新夥伴，提升了他們的藝術表達方式。”儘管兩家公司之間的合作引發了熱情，Runway的發言人澄清，這一合作不會共享數據以進行AI訓練，協議的財務條款尚未披露。

高知名度音樂人對AI技術在創意項目中的應用越來越積極。像A$AP Rocky、Madonna和Ye（前Kanye West）等知名藝術家已成功將AI生成的視覺元素整合進他們的作品中。最近，饒舌歌手Nicki Minaj在X（前Twitter）上討論了她如何利用AI生成的圖片來促進她的新專輯《Pink Friday 2》。

Runway透過與Canva等軟體供應商合作，擴大其影響力，將其AI視頻生成工具整合，讓更廣泛的受眾可以使用。雖然Runway提供有限的免費視頻創作，但後續使用需訂閱每月起價$12的計劃。這家初創公司已獲得包括Google在內的知名投資者的支持。

自2023年6月推出Gen-2以來，Runway被公認為AI視頻領域的領導者，但面臨日益激烈的競爭。最近，OpenAI的Sora模型展示了極其逼真的視頻，給Runway帶來了新的挑戰。同樣，競爭對手Pika推出了AI驅動的口型同步功能及音效生成模型，進一步加劇了競爭。

隨著AI視頻生成環境的持續演變，Runway的戰略合作將對保持其競爭優勢至關重要。業界對未來視頻內容創作的發展保持高度關注。

人工智慧洞見：King 研究團隊探討 GDC 2024 研究成果

Nvidia 推出 Latte3D：即時根據文本提示創建 3D 形狀