La diffusion vidéo stable désormais accessible via l'API de Stability AI pour améliorer la création vidéo.

Stability AI, connu pour son générateur d'images Stable Diffusion, a lancé son dernier modèle de base, Stable Video Diffusion (SVD). Ce modèle est désormais accessible via la plateforme développeur de l'entreprise et son interface de programmation d'application (API), permettant aux développeurs tiers de l'intégrer dans leurs applications, sites web et solutions logicielles.

« Cette nouvelle addition offre un accès programmatique à un modèle vidéo de pointe, adapté à divers secteurs. Notre objectif est d'équiper les développeurs d'une méthode efficace pour incorporer de manière fluide la génération avancée de vidéos dans leurs produits », a déclaré l'entreprise dans un article de blog.

Bien que cette sortie propose un outil puissant pour les entreprises cherchant à créer des vidéos générées par IA, elle suscite également des préoccupations. Stability AI a récemment été critiquée pour avoir utilisé le jeu de données LAION-5B, qui contenait des contenus inappropriés et a depuis été retiré.

Malgré ces défis, l'API SVD de Stability offre un avantage concurrentiel en matière de qualité vidéo. Selon un post LinkedIn de l'entreprise, le modèle SVD peut générer 2 secondes de vidéo, comprenant 25 images générées et 24 images d'interpolation FILM, en seulement 41 secondes. Bien que cela puisse ne pas suffire pour de vastes campagnes vidéo, c'est utile pour créer des GIF et des messages spécifiques, y compris des mèmes.

SVD rivalise avec d'autres modèles de génération vidéo de Runway et Pika Labs, qui a récemment sécurisé 55 millions de dollars de financement et lancé une nouvelle plateforme de montage vidéo. Cependant, contrairement à Stability AI, ces options ne sont pas disponibles via une API, obligeant les utilisateurs à y accéder directement sur leurs sites ou applications respectifs.

De plus, Stability AI prévoit de lancer une expérience web conviviale pour son générateur vidéo, incitant les utilisateurs à rejoindre une liste d'attente pour un accès anticipé.

Comprendre Stable Video Diffusion

Présenté dans une prévisualisation de recherche il y a un mois, Stable Video Diffusion permet aux utilisateurs de créer des vidéos MP4 à partir d'images fixes comme des JPG et des PNG. Les premiers échantillons montrent que bien que le modèle puisse produire de courts clips de jusqu'à deux secondes, il est encore en phase de développement et offre une durée inférieure à celle de certains modèles orientés recherche.

Cependant, plusieurs courts clips peuvent être combinés pour produire des vidéos plus longues. Stability AI affirme que le modèle peut être bénéfique dans des secteurs tels que la publicité, le marketing, la télévision, le cinéma et les jeux vidéo.

Il est important de noter que le dernier modèle peut générer des vidéos dans plusieurs mises en page et résolutions, y compris 1024×576, 768×768 et 576×1024. Il dispose également d'un contrôle de la force de mouvement et d'une génération basée sur des graines, permettant des sorties à la fois répétables et aléatoires.

Naviguer à travers la controverse

Bien que le lancement de Stable Video Diffusion offre une méthode simplifiée pour que les entreprises intègrent des capacités vidéo, cela souligne l'engagement de Stability AI à établir une présence sur le marché malgré les controverses persistantes concernant ses sources de données d'entraînement.

Récemment, un rapport du Stanford Internet Observatory a révélé que le jeu de données LAION-5B, utilisé pour former des modèles d'IA populaires, contenait des instances de matériel inapproprié, entraînant son retrait. De plus, l'entreprise fait face à un recours collectif concernant son acquisition présumée d'images protégées par des droits d'auteur sans autorisation pour la création de Stable Diffusion.

Actuellement, l'API de la plateforme développeur de Stability AI offre l'accès à tous ses modèles, y compris le générateur d'images Stable Diffusion XL et le nouveau modèle SVD. L'entreprise propose également une option d'adhésion pour que les clients hébergent ces modèles localement.