Updated on 四月 12 2024
在人工智能领域，新的竞争正在逐步展开。近日，法国公司Mistral AI推出了其具有突破性的专家混合大模型——Mixtral 8x22B，该模型拥有惊人的1760亿参数，成为市场上第二大开源模型，仅次于Grok-1。
Mixtral 8x22B因其创新结构而备受关注，它由八个专家模型构成，每个模型具备22亿参数，总体模型文件大小约为262GB。在性能方面，Mixtral 8x22B在多项评估中表现出色，特别是在MMLU（大规模多任务语言理解）测试中，成为领先的开源模型。此外，它在Hellaswag、TruthfulQA和GSM8K等测试中超越了Llama 2 70B、GPT-3.5和Claude 3 Sonnet等竞争对手。
尽管Mixtral 8x22B的发布相对低调，但在开源社区内引发了极大的兴奋。推出后不久，该模型便迅速在Hugging Face上架，供用户进一步训练和部署。AI搜索平台Perplexity Labs和开源平台Together AI也随后提供了必要的支持。
在性能优化方面，AI科学家贾阳青指出，通过有效的量化，Mixtral 8x22B可以在四个A100/H100 GPU上运行，通常只需三台A100 GPU。此外，苹果机器学习研究员Awni Hannun强调，该模型与苹果MLX框架中的M2 Ultra芯片兼容，并与MLX社区分享量化模型。
Mistral AI的进展展示了法国在人工智能领域的强大实力，进一步推动全球AI技术的发展。迅速发展的开源社区意味着Mixtral 8x22B的推出为开发者和研究人员带来了新的机遇与挑战。
近年来，法国在人工智能方面取得了显著进展，从训练机构发展为深度学习研究中心和科技孵化器，已成为全球AI领域的重要参与者。谷歌DeepMind在巴黎开设实验室凸显了法国在人工智能领域的吸引力。Mistral AI的成功为法国的AI生态系统注入了新的动力。
展望未来，我们期待像Mistral AI这样更多公司涌现出来，推动全球AI技术的进步，通过创新与合作为社会带来更好的发展。
Find AI tools in YBX
微软宣布将推出新的AI助手密钥，为Windows PC键盘带来重大变革，目标是2024年成为“AI个人电脑之年”。新版Windows 11将直接整合AI助手Copilot，进一步增强其在Microsoft 365中的应用。新键盘将于春季推出。
排行榜
