BraintrustデータでLLM評価を加速：企業向けの迅速なソリューション

カリフォルニアに本拠を置くBraintrust Dataは、Greylock Partnersの主導で510万ドルのシード資金を調達しました。Ankur Goyalが設立したこの企業は、以前にAIベンチャーImpiraをFigmaに売却した経験を持っています。Braintrustは、企業がAIモデルを生産前に効率的に評価し、改善できるようサポートすることを目的としています。

若いスタートアップでありながら、Braintrustは業界の著名な投資家やクライアントを多数惹きつけています。著名な人物にはElad Gil、Clem Delangue、Greg Brockmanが含まれます。同社はチームを拡大し、急速に進化するAI環境において開発者が常に知識を更新できる革新的なソリューションを提供し続ける計画です。

AIの実装における課題の解決

AIは現代のアプリケーションの基盤となっていますが、これらのシステムを統合し維持することは困難です。アプリケーションの向上を目指す小さなコード変更が、ワークフロー全体を混乱させることがあります。このため、バックエンドチームは迅速に解決策を見つける必要があります。このような反応的な戦略は、顧客体験に悪影響を及ぼす可能性があるため、開発段階でのAIパフォーマンスの評価が重要です。チームはデータとメトリクスを評価し、さまざまなモデルや技術を試しながら最適化を目指します。

時間と労力の効率化

従来の評価手法は効果的ですが、時間とリソースを多く消耗し、機能のリリースを遅らせることがあったため、GoyalはBraintrust Dataを設立しました。Goyalは「私たちの製品は、評価のためにコードを1時間以内にインスツルメント化できます。変更後にすぐに評価を再実行し、モデルのパフォーマンスに関する即時フィードバックを得ることができます。最終デプロイ前に特定のケースをデバッグすることも可能です」とメディアに語りました。

顧客の急速な採用

2023年8月に設立されたBraintrustは、すでにエンタープライズやスタートアップから何百件もの顧客を獲得しています。Airtable、Zapier、Coda、Instacartなどが含まれます。クライアントのAIサービスの精度は数週間で30％以上向上し、リリースサイクルの短縮とチームのコラボレーションの向上につながっています。Goyalは「私たちの製品はお客様のクラウド環境内で動作し、エンタープライズレベルのセキュリティを確保します。これは、個人情報や独自情報が交じり合うAI環境において重要です。これにより、顧客は重要な業務にBraintrustを利用できます」と述べています。

AIチームの効率向上

Braintrustは評価ツールに加え、AIチームが迅速に反復作業を行えるような機能を提供しています。これには、プロンプトを比較するためのプロンプトプレイグラウンド、入力出力ペアのベンチマーク、データセット管理、OpenAI、Anthropic、LLaMa 2、Mistralから人気モデルへのアクセスを提供するAIプロキシが含まれます。

AIの品質向上への注目

企業がAIソリューションをますます導入する中、モデルのパフォーマンスを評価し、ギャップを解消するツールへの需要が高まっています。Braintrustだけでなく、多くの企業がChatGPTの登場以来、モデルのパフォーマンスを測定し、可観測性を向上させる製品を提供しています。GoyalはBraintrustのユニークなアプローチについて次のように強調します。「多くの製品は可観測性に焦点を当て、デプロイ後の洞察を提供するだけですが、私たちの評価はエンジニアリングチームが最大で10倍速くイノベーションを進められるようにサポートします。」

Greylockからの最近の資金調達により、総調達額は830万ドルに達しました。Goyalはチームの拡大と製品のロードマップの推進を計画し、Braintrustの評価能力やAIツールをさらに強化する準備を整えています。