月之暗面Kimi发布MoE架构基础模型K2并同步开源,总参数1T
快讯·2025-07-11 23:00
模型发布 - 月之暗面Kimi发布MoE架构基础模型K2并同步开源 [1] - 模型总参数1T,激活参数32B [1] - 在自主编程、工具调用、数学推理等领域超越全球其他开源模型 [1] 技术优化 - 使用MuonClip优化器实现万亿参数模型的高效训练 [1] - 在高质量数据遇到瓶颈的背景下通过提升Token效率找到新的预训练扩展空间 [1] 模型能力 - 具备更强代码能力,擅长通用Agent任务 [1] - 在多个实际场景中展现出更强的能力泛化及实用性 [1] - 新模型目前已上线开放体验 [1]