Runway与Musixmatch合作助力音乐人打造AI生成歌词视频

人工智能视频技术在娱乐行业的快速普及正在加速发展。本周,关于1970年代恐怖影片《夜晚与魔鬼》的热议引发关注,该片运用了AI生成的复古标题卡,引发了观众的不同反响。此外,3D AI资产创作工具“Stable Video 3D”的发布,以及AI视频创业公司Runway与广告公司Media.Monks之间的战略合作关系也相继公布。这一合作将为Media.Monks的团队成员和客户提供直接使用Runway创新的文本和图像转视频AI软件的机会。

更值得注意的是,Runway与意大利音乐技术公司Musixmatch达成了一项开创性合作。Musixmatch以其在Spotify、Apple Music和Instagram等主要平台上的现场同步歌词而闻名,此次合作旨在使Musixmatch超过一百万的音乐人能够使用Runway的Gen-2,先进的AI视频生成模型。Gen-2模型新增了多运动画笔和区域选择器功能,帮助艺术家创建与其音乐相辅相成的动态视频内容。

根据Runway的新闻稿,这项合作的宗旨是帮助音乐人高效生成与歌词同步的AI视频,从而简化流行的歌词视频制作过程,这些视频通过同步音乐和环境视觉展示歌词,与传统的音乐视频相区别,后者通常包含艺术家或故事情节。Runway的Gen-2还具备“歌词转视频”功能,能够根据歌词内容简化视频生成过程。不过,此功能仅限于Musixmatch的专业订阅用户,月费起价为2.99美元。Musixmatch Pro用户无需单独的Runway账户或订阅,功能将直接集成在他们的Musixmatch体验中。视频生成后,艺术家可以下载或在社交媒体上分享。

一些艺术家,如亚特兰大三人组Earthgang,已经开始使用Gen-2创建歌词视频,展示了这一合作的即刻潜力。Runway首席执行官Cristobal Valenzuela表示:“我们很高兴将Runway的尖端模型直接整合到Musixmatch丰富的艺术家社区的创作过程中。这一合作将使艺术家能够通过视频提升他们的创作视野,与全球观众建立更深的联系。”

Musixmatch产品总监Marco Paglia指出:“人工智能正在带来新的创作浪潮。通过与Runway的合作,音乐人现在拥有一个创新的合作伙伴,提升他们的艺术表达。”然而,Runway的一位发言人澄清,双方并未在此合作中共享AI训练数据,协议的财务细节尚未披露。

知名音乐人日益拥抱AI技术以增强创意项目。像A$AP Rocky、麦当娜和Ye(前身为Kanye West)等著名艺术家已成功将AI生成的视觉效果融入他们的作品中。最近,饶舌歌手Nicki Minaj在X(前身为Twitter)平台上讨论了她使用AI生成图像来推广专辑《Pink Friday 2》的事宜。

Runway通过与软件提供商如Canva的合作,增强其影响力,使其AI视频生成工具更广泛可用。Runway虽提供有限的免费创作,但后续使用需每月订阅,起价为12美元。该创业公司获得了包括谷歌在内的知名投资者支持。

自2023年6月推出Gen-2以来,尽管Runway在AI视频领域被视为领军者,但面临着日益激烈的竞争。OpenAI近期展示的Sora模型呈现了极其逼真的视频,给Runway带来了新挑战。同样,竞争对手Pika推出了AI驱动的口型同步和音效生成模型,进一步加剧了市场竞争。

随着AI视频生成领域的持续演变,Runway的战略合作将对保持其竞争优势至关重要。业界对可能影响视频内容创作未来的发展保持高度关注。

Most people like

Find AI tools in YBX

Related Articles
Refresh Articles