Présentation du premier outil complet de chaîne d'entraînement IA de Huawei : lancement officiel de ModelEngine

Le 16 août, la Conférence Mondiale sur les Technologies Open Source (GOTC2024) s'est tenue à Shanghai, organisée par Open Source China et le Parc Logiciel de Pudong à Shanghai. Zhang Qunhui, Expert en Chef des Logiciels de Stockage de Données chez Huawei, a partagé des perspectives sur les applications pratiques de ModelEngine dans les domaines des grands modèles verticaux.

Zhang a présenté ModelEngine comme la chaîne d'outils complète d'intelligence artificielle pour l'entraînement et l'inférence au sein de la Data Center Stack (DCS) de Huawei. Cette chaîne d'outils de pointe est la première dans l'industrie à utiliser un cadre de programmation par flux d'IA, offrant une solution complète pour le traitement des données, la génération de connaissances, le fin-tuning de modèles, le déploiement, et le développement d'applications avec génération augmentée par récupération (RAG). Elle propose aux ingénieurs des données, aux ingénieurs de modèles et aux développeurs d'applications une expérience de développement d'IA fluide.

Il a souligné que la chaîne d'outils open source basée sur ModelEngine permet le traitement des données, l'utilisation de modèles, et le support d'applications avec des opérateurs de données ouverts, des modèles mainstream et des opérateurs d'application. La plateforme a considérablement réduit le temps de génération de corpus, le faisant passer de plusieurs mois à quelques jours seulement. De plus, elle offre aux développeurs une solution clé en main pour le développement, l'évaluation, l'optimisation et le déploiement d'applications d'IA, facilitant la construction rapide d'applications tout en garantissant la compatibilité avec les actifs d'IA existants tels que les plugins LangChain et LlamaIndex.