Runway推出Gen-3 Alpha:革命性超真實AI視頻模型,創造令人驚豔的10秒短片

紐約市的 Runway ML,通常稱為 Runway,是高品質生成式 AI 影片創作的先驅。自2023年2月推出 Gen-1 模型及2023年6月推出 Gen-2 以來,該公司面臨來自其他高度真實的 AI 影片生成器的激烈競爭,包括 OpenAI 即將推出的 Sora 模型和 Luma AI 最近推出的 Dream Machine。

為了應對挑戰,Runway 在生成式 AI 影片領域強勢回歸,宣佈推出 Gen-3 Alpha。這一模型在一篇部落格文章中被形容為「一系列基於新基礎建設大規模多模態訓練的首個模型」,旨在開發能夠模擬各種現實情境和互動的通用世界模型。文章中展示了展示 Gen-3 Alpha 能力的樣本影片。

Gen-3 Alpha 使用戶能夠生成 10 秒的高品質真實影片片段,具備精確的情感表達和鏡頭運動。Runway 的一位發言人表示,這次初步推出將提供 5 秒和 10 秒片段的生成,顯著提高製作速度—5 秒的影片只需 45 秒,10 秒的影片只需 90 秒。

儘管尚未公佈具體的發布日期,Runway 的網站和 X 社交帳戶上已展示了示範影片。用戶的可用性尚不清晰,有消息指可能透過免費層級或需付費訂閱,月費起價為 15 美元或年費為 144 美元。

在最近的訪談中,Runway 的聯合創始人兼技術總監 Anastasis Germanidis 確認,Gen-3 Alpha 將在未來幾天內向付費訂閱用戶提供,並計劃未來向免費層級用戶推出。Runway 的代表補充,該模型將對企業用戶和創意夥伴計畫的成員開放。

Germanidis 在 X 上表示,Gen-3 Alpha 將增強現有功能,如文字轉視頻和圖片轉視頻,並引入新功能。自推出 Gen-2 以來,Runway 發現擴展影片擴散模型尚未達到最佳表現,使他們能夠開發強大的視覺內容表徵。

擴散是指 AI 模型如何從像素化的「噪聲」重建視覺概念,利用標註的影像/影片和文字配對。Runway 宣稱 Gen-3 Alpha 是「在影片和影像上共同訓練的」,由一組研究科學家、工程師和藝術家指導。儘管如此,他們並未透露具體使用的數據集,這是 AI 媒體生成器中的普遍趨勢。

批評者呼籲 AI 模型創建者通過授權對原始數據作者進行補償,部分人正追求侵犯版權的訴訟。然而,AI 公司主張他們可以合法使用任何公開可用的數據。

當被詢問有關 Gen-3 Alpha 的訓練數據時,Runway 的發言人提到他們依賴內部研究團隊管理的精選內部數據集。

值得注意的是,Runway 正在與領先的媒體和娛樂組織合作,開發定制版本的 Gen-3,以實現風格一致性並符合特定的藝術和敘事目標。雖然這些合作的具體細節尚未披露,但來自獲獎項目如《瞬息全宇宙》和《人民的小丑》的電影製作人曾利用 Runway 的技術。

Runway 還提供了一個表單,供對定制版本的 Gen-3 感興趣的組織填寫,儘管定制模型訓練的價格細節尚未公布。顯然,Runway 對於在迅速演變的生成式 AI 影片創作領域保持其領導地位的承諾非常堅定。

Most people like

Find AI tools in YBX

Related Articles
Refresh Articles