Runway 與 Musixmatch 聯手,幫助音樂人創作 AI 生成的歌詞影片

娛樂產業中,AI視頻技術的快速採用正在上升。本週,1970年代恐怖片《和魔鬼共度深夜》的熱議引發了關注,該片利用AI生成的標題卡來呈現復古圖形,觀眾反應不一。此外,3D AI資產創建工具Stable Video 3D的發布,以及AI視頻初創公司Runway和廣告代理商Media.Monks之間的戰略合作也相繼宣布。這一合作將使Media.Monks的團隊成員和客戶直接訪問Runway創新的文本和影像轉視頻AI軟件。

然而,Runway的最新公告揭示了與意大利音樂科技公司Musixmatch的突破性合作。Musixmatch以其在Spotify、Apple Music和Instagram等主要平台上的即時同步歌詞聞名,這一合作旨在使Musixmatch的超過百萬名音樂人能夠利用Runway的先進AI視頻生成模型Gen-2。Gen-2模型具備多動作畫筆和區域選擇器等增強功能,使藝術家能夠創作出動態視頻內容,與其音樂相輔相成。

根據Runway的新聞稿,該合作旨在幫助音樂人高效生成與歌詞同步的AI視頻,簡化了流行的歌詞視頻創作,這類視頻展示了與音樂和環境視覺同步的歌詞,與通常包含藝術家或劇情的傳統音樂視頻分開。Runway的Gen-2模型具有「歌詞轉視頻」功能,能夠解讀歌詞,簡化視頻生成過程。然而,該功能僅限於Musixmatch的專業訂閱級別,起價為每月$2.99。Musixmatch Pro用戶無需單獨註冊Runway帳戶或訂閱,該功能將直接整合到Musixmatch體驗中。視頻生成後,藝術家可下載或在社交媒體平台上分享。

包括亞特蘭大Trip-hop組合Earthgang在內的一些藝術家,已經開始使用Gen-2創作歌詞視頻,顯示出這一合作的即時潛力。Runway首席執行官Cristobal Valenzuela表示:“我們很高興將Runway的尖端模型直接融入Musixmatch充滿活力的藝術家社區的創作過程中。這一合作將幫助藝術家通過視頻提升創作視野,與全球觀眾建立更深的聯繫。”

Musixmatch產品負責人Marco Paglia指出:“AI正引領創意的新浪潮。Musixmatch和Runway之間的合作,讓音樂人擁有了一個創視頻的創新夥伴,提升了他們的藝術表達方式。”儘管兩家公司之間的合作引發了熱情,Runway的發言人澄清,這一合作不會共享數據以進行AI訓練,協議的財務條款尚未披露。

高知名度音樂人對AI技術在創意項目中的應用越來越積極。像A$AP Rocky、Madonna和Ye(前Kanye West)等知名藝術家已成功將AI生成的視覺元素整合進他們的作品中。最近,饒舌歌手Nicki Minaj在X(前Twitter)上討論了她如何利用AI生成的圖片來促進她的新專輯《Pink Friday 2》。

Runway透過與Canva等軟體供應商合作,擴大其影響力,將其AI視頻生成工具整合,讓更廣泛的受眾可以使用。雖然Runway提供有限的免費視頻創作,但後續使用需訂閱每月起價$12的計劃。這家初創公司已獲得包括Google在內的知名投資者的支持。

自2023年6月推出Gen-2以來,Runway被公認為AI視頻領域的領導者,但面臨日益激烈的競爭。最近,OpenAI的Sora模型展示了極其逼真的視頻,給Runway帶來了新的挑戰。同樣,競爭對手Pika推出了AI驅動的口型同步功能及音效生成模型,進一步加劇了競爭。

隨著AI視頻生成環境的持續演變,Runway的戰略合作將對保持其競爭優勢至關重要。業界對未來視頻內容創作的發展保持高度關注。

Most people like

Find AI tools in YBX

Related Articles
Refresh Articles