Introducing Mellum2: A 12B Mixture-of-Experts Model by JetBrains
JetBrains 发布 Mellum2:12B 参数的开放 MoE 模型
要点导读
- JetBrains发布Mellum2模型
- 采用混合专家架构
- 参数规模12B
内容摘要
Mellum2 由代码补全模型扩展而来,是针对低延迟文本与代码任务优化的开放混合专家模型。
阅读原文
原文来源:Hugging Face(huggingface.co)。本页摘要与要点整理自公开来源,版权归原作者所有,完整内容请阅读原文。