Runway se une ao Musixmatch para capacitar músicos na criação de vídeos de letras gerados por IA.

A rápida adoção da tecnologia de vídeo com IA na indústria do entretenimento está crescendo. Esta semana, o filme de terror dos anos 1970, Late Night With the Devil, ganhou destaque por seu uso de cartões de título gerados por IA para gráficos retrô, gerando reações mistas do público. Além disso, foram anunciados avanços como o lançamento do Stable Video 3D, uma ferramenta de criação de ativos 3D com IA, e uma parceria estratégica entre a startup de vídeo com IA, Runway, e a agência de publicidade Media.Monks. Essa colaboração permitirá que os membros da equipe e os clientes da Media.Monks tenham acesso direto ao inovador software de IA da Runway, que transforma texto e imagem em vídeo.

Novas confirmações da Runway revelam uma parceria inovadora com a Musixmatch, a empresa italiana de tecnologia musical conhecida por suas letras sincronizadas em dispositivos para plataformas como Spotify, Apple Music e Instagram. Essa colaboração visa capacitar mais de um milhão de músicos da Musixmatch a utilizarem o Gen-2, seu avançado modelo de geração de vídeo com IA. O modelo Gen-2 apresenta melhorias como um Pincel Multi Movimento e um seletor de regiões, permitindo que artistas criem conteúdos de vídeo dinâmicos que complementem sua música.

De acordo com um comunicado de imprensa da Runway, a parceria foi projetada para permitir que músicos gerem vídeos com IA sincronizados às suas letras de forma eficiente. Isso simplificará a criação de vídeos de letras — aqueles clipes populares que exibem letras de músicas em sincronia com a música e visuais ambientes — distinguindo-os dos tradicionais vídeos musicais, que frequentemente incluem o artista ou uma narrativa.

O Gen-2 da Runway incorpora um recurso "Letras para Vídeo", que interpreta as letras das músicas para simplificar o processo de geração de vídeo. No entanto, o acesso a esse recurso é exclusivo para os assinantes do plano Pro da Musixmatch, a partir de US$ 2,99 por mês. Os usuários do Musixmatch Pro não precisarão de uma conta separada ou assinatura da Runway; o recurso será integrado diretamente à experiência Musixmatch. Uma vez que os vídeos são gerados, os artistas podem baixá-los ou compartilhá-los nas redes sociais.

Artistas como o grupo de trip-hop Earthgang, de Atlanta, já estão utilizando o Gen-2 para criar vídeos de letras, demonstrando o potencial imediato dessa colaboração.

"Estamos empolgados em integrar os modelos inovadores da Runway diretamente no processo criativo da vibrante comunidade de artistas da Musixmatch", afirmou o CEO da Runway, Cristobal Valenzuela. "Essa parceria empoderará os artistas a elevarem sua visão criativa através do vídeo, fortalecendo conexões mais profundas com seus públicos globalmente."

O chefe de produto da Musixmatch, Marco Paglia, observou: "A IA está trazendo uma nova onda de criatividade. Com a colaboração entre Musixmatch e Runway, os músicos agora têm um parceiro inovador para a criação de vídeos, aprimorando a forma como expressam sua arte."

Embora a colaboração tenha gerado entusiasmo, um porta-voz da Runway esclareceu que não estão compartilhando dados para treinamento de IA como parte dessa parceria. Os termos financeiros do acordo não foram divulgados.

Músicos de alto perfil estão cada vez mais adotando a tecnologia de IA para aprimorar seus projetos criativos. Artistas notáveis como A$AP Rocky, Madonna e Ye (anteriormente conhecido como Kanye West) integraram com sucesso visuais gerados por IA em seu trabalho. Recentemente, a rapper Nicki Minaj discutiu no X (anteriormente Twitter) sobre seu uso de imagens geradas por IA para promover seu álbum Pink Friday 2.

A Runway está expandindo seu alcance ao criar parcerias com fornecedores de software como a Canva para integrar suas ferramentas de geração de vídeo com IA, tornando-as acessíveis a um público mais amplo. Enquanto a Runway oferece um número limitado de criações de vídeo gratuitas, o uso posterior requer uma assinatura mensal a partir de US$ 12. A startup recebeu apoio de investidores notáveis, incluindo o Google.

Reconhecida como líder no espaço de vídeo com IA desde o lançamento do Gen-2 em junho de 2023, a Runway enfrenta uma concorrência crescente. A recente demonstração do modelo Sora da OpenAI, que apresentou vídeos incrivelmente realistas, trouxe novos desafios. Da mesma forma, a concorrente Pika lançou recursos como capacidades de sincronização labial com IA e um modelo de geração de efeitos sonoros, intensificando ainda mais a competição.

À medida que o cenário da geração de vídeos com IA continua a evoluir, parcerias estratégicas serão fundamentais para a Runway manter sua vantagem competitiva. A indústria permanece atenta a desenvolvimentos que podem moldar o futuro da criação de conteúdo em vídeo.

Most people like

Find AI tools in YBX