月之暗面宣布Kimi K2.5模型月底退役 K3已开源接棒

月之暗面官方表示,Kimi K3 是首个达到 2.8 万亿参数规模的开源模型,在过去 12 个月中的 9 个月里,Kimi 模型都保持着开源模型的规模上限。

月之暗面于8月24日通过官方微博宣布,其第一代万亿参数多模态模型Kimi K2.5将于本月底结束服役。该模型于今年1月正式发布并开源,同期Kimi智能助手的K2版本已自动切换至K2.5。

据月之暗面介绍,Kimi K2.5是其当时最智能的模型,在Agent、代码、图像、视频及一系列通用智能任务上取得了开源state-of-the-art表现。该模型采用原生多模态架构设计,同时支持视觉与文本输入、思考与非思考模式、对话与Agent任务切换,定位为一款通用型多模态模型。

在K2.5退役之前,月之暗面已于今年7月正式开源其继任者Kimi K3。K3是一个拥有2.8万亿参数的模型,基于KDA混合线性注意力机制(Kimi Delta Attention)和注意力残差(Attention Residuals)技术构建,原生支持视觉理解,并拥有100万token上下文窗口。

月之暗面官方表示,Kimi K3是首个达到2.8万亿参数规模的开源模型,在过去12个月中的9个月里,Kimi模型都保持着开源模型的规模上限。这一迭代节奏显示出月之暗面在大规模多模态模型领域的持续投入,其模型能力在参数规模和技术架构上均有显著提升。

Kimi K2.5的退役标志着月之暗面第一代万亿参数多模态模型完成使命,而K3的接棒则延续了该公司在开源大模型赛道上的竞争力。随着K3的全面应用,Kimi系列模型在Agent任务、视觉理解和长上下文处理等场景下的表现值得关注。

该文观点仅代表作者本人,企服科学平台仅提供信息存储空间服务。

(0)
AI研究员Luke Metz加入Meta超级智能实验室 人才争夺战持续升温
上一篇 3小时前
小米玄戒芯片技术沟通会今日举行 新一代旗舰处理器即将亮相
下一篇 2小时前

相关推荐

发表回复

登录后才能评论
分享本页
返回顶部