OpenAI Lance GPT-4 Turbo avec Vision pour un Accès Général à l'API

Les développeurs d'entreprise et les dirigeants astucieux reconnaissent que l'interface de programmation d'application (API) est au cœur du développement logiciel moderne, permettant aux applications tierces de se connecter sans effort aux plateformes technologiques. OpenAI a récemment apporté des améliorations significatives à son API pour le puissant modèle de langage GPT-4 Turbo.

La société a annoncé sur ses comptes X que le modèle GPT-4 Turbo avec Vision est désormais "généralement disponible" via son API. Les capacités visuelles ont été introduites avec les téléchargements audio en septembre 2023, tandis que le GPT-4 Turbo a été dévoilé lors de la conférence des développeurs d'OpenAI en novembre. Cette version promet un traitement plus rapide, des fenêtres de contexte d'entrée plus larges (jusqu'à 128 000 tokens, soit l'équivalent d'un livre de 300 pages) et une utilisation économique.

Les développeurs peuvent désormais utiliser les fonctionnalités de reconnaissance et d'analyse d'images du modèle via le format texte JSON et l'appel de fonctions, facilitant l'automatisation de diverses actions au sein des applications connectées, telles que l'envoi d'e-mails, la publication en ligne ou les achats. OpenAI souligne l'importance de mettre en place des flux de confirmation utilisateurs avant d'exécuter des actions qui affectent leurs environnements.

Un porte-parole d'OpenAI a déclaré que ces améliorations simplifient le flux de travail des développeurs, qui devaient auparavant utiliser des modèles distincts pour le texte et les images. Désormais, un seul appel API permet une analyse d'image et un raisonnement fluides.

OpenAI met en avant plusieurs clients utilisant GPT-4 Turbo avec Vision, dont Cognition, une startup qui utilise le modèle pour générer du code de manière autonome, et Healthify, une application de santé et de fitness qui propose des analyses nutritionnelles et des recommandations de repas à partir de photos soumises par les utilisateurs. De plus, la startup britannique TLDraw utilise GPT-4 Turbo avec Vision pour améliorer son tableau blanc virtuel, transformant les dessins des utilisateurs en sites web fonctionnels.

Bien que le GPT-4 Turbo ait fait face à la concurrence de modèles plus récents comme Claude 3 Opus d'Anthropic, Command R+ de Cohere et Gemini Advanced de Google lors de tests de référence, le lancement du GPT-4 Turbo avec Vision vise à attirer davantage de clients d'entreprise et de développeurs. Cette initiative positionne les modèles d'OpenAI comme un choix attrayant alors que l'industrie anticipe la sortie de son prochain modèle de langage.