跳到正文
Mistral AI·· 2024-04-17精选AI 评分82

Mistral 发布开源模型 Mixtral 8x22B

Cheaper, Better, Faster, Stronger

AI 导读

Mistral 发布开源模型 Mixtral 8x22B,采用稀疏 MoE 架构,141B 总参数中仅 39B 激活参数,以 Apache 2.0 许可开放。该模型支持英语、法语、意大利语、德语和西班牙语,具备数学与编码能力,原生支持函数调用,上下文窗口为 64K tokens。

推荐理由

Mixtral 8x22B 以 39B 激活参数和 Apache 2.0 许可发布,读者可据此判断开源模型的性能与成本取舍。

来源:Mistral AI · mistral.ai