Pika 推出AI驅動的口型同步功能,點燃視頻行業競爭

OpenAI 繼續以其 AI 視頻生成模型 Sora 吸引觀眾,令人印象深刻地展示了新的示範範例。然而,公眾訪問仍然有限。與此同時,競爭者 Pika 為其用戶推出了一項令人興奮的新功能:Lip Sync(嘴唇同步)。

這項創新附加功能使用來自 ElevenLabs 的 AI 生成語音,讓用戶能夠為他們的視頻添加對話,同時還能將口型動作與對話同步,增強角色的現實感。Pika 的 Lip Sync 功能提供文字轉音訊的選項,以及上傳音頻軌道的功能。用戶可以為 Pika AI 生成的角色輸入或錄製對話,自定義聲音風格。

目前,Lip Sync 處於「早期訪問」階段,僅對 Pika Pro 用戶(每月 $58,年費 $696)及 Pika 的邀請制「超級合作夥伴」計劃成員開放。

推進 AI 在電影製作中的應用

儘管 Pika 的 AI 生成影片可能無法達到 OpenAI 的 Sora 或競爭對手 Runway 的同等現實主義,但 Lip Sync 功能標誌著一項重大進展。它為使用 AI 製作長篇敘事影片的挑戰提供了解決方案,因為大多數領先的 AI 視頻生成工具都缺乏類似的本地功能。

傳統上,用戶依賴繁瑣的第三方工具和費時的後期製作方法來添加對話和同步口型運動,這導致了低預算的外觀。在相關消息中,Runway 更新了其上個月推出的多重運動筆刷功能。這個工具允許用戶為視頻中的不同物體應用多達五個獨立的運動方向,例如一隻狗跳向飛盤。此次更新引入了區域檢測功能,自動選擇物體以應用運動,同時仍保持手動「繪製」選項。

Pika 也允許用戶編輯視頻組件並擴展畫布,但目前缺少筆刷工具,導致與 Runway 相比,運動控制不夠精確。

AI 訓練數據的持續擔憂

儘管 Pika 的新功能引發了興奮,但有關其視頻模型所使用訓練數據的問題仍然存在。AI 認證非營利組織 Fairly Trained 的 CEO Ed Newton-Rex 在社交媒體上提出了這些擔憂,強調在 AI 訓練過程中需要獲得創作者和數據擁有者的同意。

隨著視頻 AI 生成公司不斷創新和提升產品,競爭愈發激烈,這對用戶有利,但也令某些電影行業的專業人士感到擔憂。值得注意的是,電影製作人 Tyler Perry 因為見證了 Sora 生成的視頻而面臨反對聲音,並因此暫停了一項價值 8 億美元的工作室擴展計劃,表達了對這項技術可能導致失業的擔憂。

Most people like

Find AI tools in YBX

Related Articles
Refresh Articles