Runway ML, con sede en Nueva York y comúnmente conocido como Runway, es un pionero en la creación de videos generativos de alta calidad con inteligencia artificial. Tras el lanzamiento de su modelo Gen-1 en febrero de 2023 y Gen-2 en junio de 2023, la empresa enfrentó una competencia creciente de otros generadores de video AI altamente realistas, como el próximo modelo Sora de OpenAI y la recién lanzada Dream Machine de Luma AI.
En respuesta, Runway está haciendo un notable regreso en el panorama de videos generativos de IA con el anuncio de Gen-3 Alpha. Este modelo, descrito en una entrada de blog como "el primero en una serie entrenada en nueva infraestructura para formación multimodal a gran escala", tiene como objetivo desarrollar Modelos Mundiales Generales capaces de simular una amplia gama de situaciones e interacciones del mundo real. Se pueden encontrar videos de muestra que muestran las capacidades de Gen-3 Alpha a lo largo de este artículo.
Gen-3 Alpha permite a los usuarios generar clips de video de 10 segundos, de alta calidad y realistas, con expresiones emocionales y movimientos de cámara precisos. Según un portavoz de Runway, este lanzamiento inicial ofrecerá la generación de clips de 5 y 10 segundos, acelerando significativamente los tiempos de producción: 5 segundos en 45 segundos y 10 segundos en 90 segundos.
Aunque no se ha anunciado una fecha específica de lanzamiento, se están presentando videos de demostración en el sitio web de Runway y en su cuenta de X. La disponibilidad para los usuarios permanece incierta, con indicios de que podría estar accesible a través de su nivel gratuito o requerir una suscripción de pago a partir de $15 al mes o $144 anuales.
En una reciente entrevista, Anastasis Germanidis, cofundador y CTO de Runway, confirmó que Gen-3 Alpha estará disponible para suscriptores de pago en los próximos días, con planes para un lanzamiento futuro a usuarios del nivel gratuito. Un representante de Runway añadió que el modelo será accesible para usuarios de Enterprise y aquellos en el Programa de Socios Creativos.
Germanidis declaró en X que Gen-3 Alpha mejorará funcionalidades existentes como texto a video e imagen a video, al tiempo que introduce nuevas capacidades. Desde el lanzamiento de Gen-2, Runway ha encontrado que la escalabilidad de los modelos de difusión de video aún no ha alcanzado su rendimiento máximo, lo que les permite desarrollar representaciones potentes de contenido visual.
La difusión se refiere a cómo un modelo de IA aprende a reconstruir conceptos visuales a partir de "ruido" pixelado, utilizando pares de imágenes/videos y textos anotados. Runway afirma que Gen-3 Alpha está "entrenado conjuntamente en videos e imágenes", guiado por un equipo de investigadores, ingenieros y artistas. Sin embargo, no han divulgado los conjuntos de datos específicos utilizados, siguiendo una tendencia común entre los generadores de medios de IA.
Los críticos han pedido a los creadores de modelos de IA que compensen a los autores de datos originales a través de licencias, con algunos persiguiendo demandas por infracción de derechos de autor. No obstante, las empresas de IA sostienen que pueden utilizar legalmente cualquier dato disponible públicamente.
Al ser preguntado sobre los datos de entrenamiento de Gen-3 Alpha, el portavoz de Runway mencionó que confían en conjuntos de datos internos curados y gestionados por su equipo de investigación.
Cabe destacar que Runway está colaborando con importantes organizaciones de medios y entretenimiento para desarrollar versiones personalizadas de Gen-3, que buscan la consistencia estilística y cumplir objetivos artísticos y narrativos específicos. Aunque los detalles sobre estas colaboraciones siguen sin revelarse, cineastas de proyectos galardonados como Everything Everywhere All at Once y The People’s Joker han utilizado previamente la tecnología de Runway.
Además, Runway ha proporcionado un formulario para organizaciones interesadas en versiones personalizadas de Gen-3, aunque no se han publicado detalles sobre los precios para el entrenamiento de modelos personalizados. Es evidente que Runway está firmemente comprometido a mantener su posición como líder en el sector de creación de videos generativos de IA, que evoluciona rápidamente.
Clasificación
