Les chercheurs d'Apple ont présenté "Keyframer", un outil innovant d'IA qui utilise de grands modèles de langage (LLM) pour animer des images statiques en fonction de commandes en langage naturel. Cette application révolutionnaire, dévoilée dans un article de recherche sur arxiv.org intitulé « Keyframer : Empowering Animation Design using Large Language Models », représente une avancée majeure dans l'intégration de l'intelligence artificielle dans les processus créatifs, pouvant influencer les futurs produits d'Apple, comme l’iPad Pro et le Vision Pro.
Keyframer utilise un grand modèle de langage, en particulier le GPT-4, qui génère du code d'animation CSS à partir d'images SVG statiques et de phrases textuelles. La recherche souligne les défis d’application des LLM à l’animation, notamment la manière dont les utilisateurs peuvent décrire efficacement le mouvement en langage naturel.
Imaginez être un animateur avec une idée en tête. Vous disposez d'images statiques et d'un récit, mais passer des heures à animer sur un iPad peut sembler décourageant. Avec Keyframer, il suffit de quelques phrases concises pour que vos images prennent vie à l’écran, comme si vos idées étaient interprétées de manière fluide par les LLM d'Apple.
Cet outil permet aux utilisateurs de télécharger une image SVG, de saisir une commande comme « Faites dériver lentement les nuages vers la gauche », et de recevoir un code d'animation généré. Les utilisateurs peuvent affiner les animations en modifiant le code CSS ou en ajoutant de nouvelles commandes. L'étude indique que « Keyframer supporte l'exploration et le perfectionnement des animations grâce à une combinaison de commandes et d'édition directe des résultats générés. » Cette approche centrée sur l'utilisateur a été développée grâce à des interviews avec des animateurs professionnels et des ingénieurs, soulignant l'importance de la conception itérative et de la créativité.
« Je pense que c'était beaucoup plus rapide que de nombreuses méthodes que j'ai utilisées... J'aurais passé des heures sur des tâches similaires auparavant, » a commenté un participant.
Keyframer incite les utilisateurs à adopter une approche itérative et "décomposée" dans la conception de commandes, leur permettant d’ajuster leurs objectifs en fonction des réponses de l'IA. « Keyframer a permis aux utilisateurs de perfectionner leurs designs de manière itérative grâce à des commandes séquentielles, plutôt que de devoir considérer l’ensemble de leur design à la fois, » notent les chercheurs. Les fonctionnalités pour l'édition directe du code offrent un contrôle créatif détaillé.
Bien que les outils d’animation d’IA puissent démocratiser le design, des inquiétudes subsistent quant à la perte de contrôle créatif. Keyframer vise à équilibrer la création prototypique accessible avec l'autonomie des utilisateurs en combinant commandes et édition.
« Grâce à ce travail, nous espérons inspirer de futurs outils de conception d'animation qui allient les capacités génératives des LLM à des éditeurs dynamiques, permettant aux créateurs de conserver le contrôle sur leurs réalisations, » concluent les chercheurs.
Keyframer pourrait révolutionner le paysage de l'animation, le rendant plus accessible à un large éventail de créateurs, permettant aux non-experts d'animer des récits qui nécessitaient auparavant des compétences techniques approfondies. Cela marque un changement dans le processus créatif, où l'IA émerge comme un partenaire collaboratif.
Les implications plus larges de Keyframer pourraient entraîner un changement culturel, rendant l'IA une partie plus intuitive de l'expérience créative. Cette avancée n'est pas seulement une étape technologique, mais un catalyseur pour redéfinir notre interaction avec le monde numérique. L'introduction de Keyframer par Apple pourrait marquer l'aube d'une nouvelle ère où la distinction entre créateur et création s'estompe, guidée par les capacités de l'intelligence artificielle.
Classement
