Braintrust Data, basé en Californie, a levé 5,1 millions de dollars lors d'un financement d'amorçage, dirigé par Greylock Partners. Fondé par Ankur Goyal, qui a précédemment vendu son entreprise d'IA Impira à Figma, Braintrust a pour mission d’aider les entreprises à évaluer et améliorer efficacement les modèles d'intelligence artificielle avant leur mise en production.
Bien que ce soit une jeune startup, Braintrust a rapidement attiré de nombreux clients et investisseurs prestigieux tels qu'Elad Gil, Clem Delangue, et Greg Brockman. L'entreprise vise à agrandir son équipe et à continuer à proposer des solutions innovantes qui permettent aux développeurs de rester à jour dans un paysage d'IA en constante évolution.
Naviguer dans les Défis de l'IA en Production
L'IA forme l'épine dorsale des applications modernes, mais son intégration et sa maintenance peuvent s'avérer complexes. De petites modifications de code conçues pour améliorer une application peuvent perturber l'ensemble du flux de travail, obligeant les équipes backend à chercher des solutions rapidement. Cette approche réactive peut nuire à l'expérience client, ce qui rend l'évaluation des performances de l'IA pendant le développement essentielle. Les équipes analysent les données et métriques spécifiques au contexte tout en expérimentant divers modèles et techniques pour optimiser les résultats.
Rationaliser Temps et Efforts
Les méthodes d'évaluation traditionnelles, bien que efficaces, demandent souvent beaucoup de temps et de ressources, retardant ainsi le lancement de nouvelles fonctionnalités — un problème rencontré par Goyal chez Impira. En réponse, il a créé Braintrust Data pour faciliter des évaluations plus rapides et des tests en conditions réelles des modifications de code.
« Notre produit permet d'instrumenter votre code pour des évaluations en moins d'une heure », a expliqué Goyal aux médias. « Vous pouvez rapidement réexécuter des évaluations après des modifications et recevoir un retour instantané sur la performance de votre modèle, tout en déboguant des cas spécifiques avant le déploiement final. Cela inclut la journalisation d'exemples issus des environnements de staging et de production pour identifier de nouveaux cas limites utilisateurs. »
Adoption Rapide par les Clients
Lancé en août 2023, Braintrust a déjà conquis des centaines de clients, entreprises et startups, notamment Airtable, Zapier, Coda, et Instacart. Les clients auraient augmenté la précision de leurs offres d'IA de plus de 30 % en quelques semaines, entraînant des cycles de publication plus rapides et une meilleure collaboration d'équipe.
« Notre produit peut fonctionner dans votre propre environnement cloud, garantissant une sécurité de niveau entreprise—essentielle dans un paysage d'IA riche en informations personnelles et propriétaires. Cette capacité permet à nos clients d'utiliser Braintrust pour des charges de travail critiques », a ajouté Goyal.
Améliorer l'Efficacité des Équipes d'IA
En plus des outils d'évaluation, Braintrust propose des fonctionnalités pour aider les équipes d'IA à itérer plus rapidement, comme un espace de jeu pour comparer des prompts, le benchmarking de paires entrée-sortie, la gestion de datasets, et un proxy d'IA offrant un accès à des modèles populaires d'OpenAI, Anthropic, LLaMa 2, et Mistral.
Une Attention Croissante pour la Qualité de l'IA
Avec l'adoption croissante des solutions d'IA par les entreprises, la demande d'outils pour évaluer les performances des modèles et combler les lacunes se renforce. Braintrust n'est pas le seul acteur dans cet espace ; de nombreuses entreprises ont émergé depuis le lancement de ChatGPT, proposant divers produits pour mesurer les performances des modèles et améliorer l'observabilité.
Goyal souligne l'approche unique de Braintrust : « Alors que de nombreux produits se concentrent sur l'observabilité, ne fournissant des insights qu'après le déploiement, nos évaluations permettent aux équipes d'ingénierie d'innover à des vitesses jusqu'à dix fois plus rapides que celles qui s'appuient uniquement sur des corrections post-publication. »
Avec le financement récent de Greylock, qui porte le capital total levé à 8,3 millions de dollars, Goyal prévoit d'élargir l'équipe et d'avancer la feuille de route du produit, renforçant les capacités de Braintrust en matière d'évaluations et d'outils d'IA, y compris des fonctions de jeu de prompts, de journalisation en production, de support multimodal, et bien plus encore.
Classement
