ファーウェイ初の包括的AIトレーニングツールチェーン「ModelEngine」正式発表

2023年8月16日、上海でグローバルオープンソース技術会議(GOTC2024)が開催され、オープンソース中国と上海浦東ソフトウェアパークが主催しました。そこで、Huaweiのデータストレージソフトウェアの主任専門家である張群輝氏が、垂直大規模モデル分野におけるModelEngineの実用例について発表しました。

張氏は、ModelEngineをHuaweiのデータセンタースタック(DCS)内にある包括的なAIトレーニングおよび推論ツールチェーンと説明しました。この最先端のツールチェーンは、業界初のAIストリーミングプログラミングフレームワークを採用しており、データ処理、知識生成、モデルの微調整、デプロイメント、情報強化生成(RAG)アプリケーション開発に対するエンドツーエンドソリューションを提供します。データエンジニア、モデルエンジニア、アプリケーション開発者にシームレスなAI開発体験を提供します。

彼は、ModelEngineに基づくオープンソースツールチェーンが、オープンデータオペレーター、主流のモデル、アプリケーションオペレーターを活用してデータ処理、モデル活用、アプリケーションサポートを可能にすると強調しました。このプラットフォームは、コーパス生成時間を数か月から数日へと大幅に短縮しました。さらに、開発者にはAIアプリケーションの開発、評価、最適化、デプロイメントにおけるワンストップソリューションを提供し、LangChainやLlamaIndexプラグインなどの既存のAI資産との互換性を保ちながら、迅速なAIアプリケーションの構築を促進しています。

Most people like

Find AI tools in YBX

Related Articles
Refresh Articles