Explorer le nouveau modèle d'IA 'MM1' d'Apple : fonctionnalités, applications et innovations

Les chercheurs d'Apple ont développé une méthode révolutionnaire pour entraîner des modèles de langage de grande taille (LLMs) qui intègre de manière fluide des informations textuelles et visuelles. Cette innovation est présentée dans leur article intitulé "MM1 : Une méthode de préentraînement pour les LLMs multimodaux, analyse et perspectives," qui ouvre une nouvelle voie vers des systèmes d'intelligence artificielle plus intelligents et polyvalents.

En utilisant un ensemble de données diversifié comprenant des paires d'images et de légendes, des documents texte-image entrecroisés, ainsi que des données uniquement textuelles, Apple affirme que son modèle MM1 montre une précision supérieure dans des tâches telles que la génération de légendes d'images, la réponse à des questions visuelles, et le raisonnement en langage naturel. Cette recherche établit de nouvelles normes dans l'IA en mettant l'accent sur la combinaison de divers types de données d'entraînement et d'architectures de modèle, permettant ainsi aux machines de comprendre et de générer des réponses basées sur des indices visuels et linguistiques. De telles capacités sont essentielles pour des tâches nécessitant une interprétation complexe du monde, comme l'explication d'images complexes ou la réponse à des questions liées à des éléments visuels.

L'article met également en avant les impressionnantes capacités d'apprentissage contextuel de MM1, notamment dans des configurations contenant jusqu'à 3 milliards de paramètres. Notamment, son raisonnement en "chaîne de pensée" permet au modèle de résoudre des problèmes complexes et ouverts en se basant sur seulement quelques exemples.

Cette recherche constitue une avancée significative pour Apple dans l’amélioration de ses capacités en matière d'IA face à une concurrence féroce. Des rapports récents indiquent qu'Apple est en pourparlers avec Google pour licencier son LLM génératif Gemini, afin de soutenir les futures fonctionnalités d'iOS 18 sur l'iPhone.