FEATURED STORY / 01

六天烧掉雷军2300万,小米发布新模型,罗福莉:创新和工程难度超过DeepSeek R1

图片经AI处理 出品 |搜狐科技 作者 |常博硕 9月22日,小米正式发布MiMo-V2.6系列,包括旗舰推理模型MiMo-V2.6-Pro和更强调效率的MiMo-V2.6-Flash,同时推出MiMo-V2.6-Pro-UltraSpeed,官方表示其在保持模型质量的前提下,输出速度最高可达到Pro版本的 20 倍。 其中,MiMo-V2.6-Pro是一款万亿参数级模型,支持文本、图像、视频和音

READ
THE
DETAIL
EDITORIAL NOTE

图片经AI处理 出品 |搜狐科技 作者 |常博硕 9月22日,小米正式发布MiMo-V2.6系列,包括旗舰推理模型MiMo-V2.6-Pro和更强调效率的MiMo-V2.6-Flash,同时推出MiMo-V2.6-Pro-UltraSpeed,官方表示其在保持模型质量的前提下,输出速度最高可达到Pro版本的 20 倍。 其中,MiMo-V2.6-Pro是一款万亿参数级模型,支持文本、图像、视频和音频输入,上下文长度达到100万Token,最大输出长度为12.8万Token。它可以进行深度思考、调用工具、联网搜索,也可以处理结构化输出。Flash则是更轻量的版本,总参数约3090亿,激活参数约150亿,同样支持100万Token上下文。 每小时烧20万,小米要上桌 9月17日,罗福莉就在社交媒体上披露了小米MiMo-V2.6的训练细节,并随帖发布了MiMo-V2.6-Pro和MiMo-V2.6-Flash的实时训练数据看板。训练步数、Token消耗量、任务通过率、累计花费,甚至哪个节点的显卡出了故障,全都实时可查,把两款模型的训练过程做成了一场面向全网的直播。 按页面设定的费用速率计算, 两轮训练合计每小时约3.08万美元,约合人民币20万。 根据小米最终公布的数据,MiMo-V2.6-Pro和MiMo-V2.6-Flash分别完成30个强化学习Step,累计约75万条轨迹,两轮训练成本分别约为262万美元和85万美元,合计347万美元,折合人民币约2328万元。 模型发布当天,罗福莉在社交媒体上发文表示,MiMo-V2.6很可能是迄今为止任何开源模型团队根据计算量进行的最大的单一RL运行。在推文中她还公开表示:“今天,它(MiMo-V2.6)是排名第一的开源模型。我强烈推荐阅读技术报告。我相信它将成为AgentRL从业者反复打开并每次都发现新内容的论文之一。在我看来,它背后的研究创新和工程挑战超过了DeepSeekR1,后者我曾部分参与。” 从模型结构本身看,小米这次并没有把全部赌注押在“更大的模型”上。 MiMo-V2.6技术报告题为《Scaling Reinforcement Learning Towards Self-Improvement》,小米团队把这项工作的核心概括为:继续扩大强化学习规模,并把它作为模型走向自我改进的一条路径。 从外部结果看,MiMo-V2.6确实完成了一次明显跃升。MiMo-V2.6-Pro 在 Artificial Analysis Intelligence Index v4.3 中获得 46.32 分,超过 Kimi K3 和 Qwen3.8 Max,与马斯克新发的Grok4.7持平,目前是全球开源模型首位。 图片源自Artificial Analysis官网 具体到各项基准测试成绩,Pro在DeepSWE v1.1中获得71.9分,接近DeepSeek V4.1 Flash的74.2、Claude Opus 5与 GPT 6 Astra 的74.0;在Toolathlon-verified中获得76.9 分,高于GPT 5.6 Sol的 74.9。 看模型本身,Pro是一个1.02万亿参数的稀疏MoE模型,但每个Token实际激活的参数约为420亿,Flash是3090亿参数、150亿激活参数。 在底层架构上,Pro的语言骨干共有70层,其中60层采用128 Token窗口的滑动窗口注意力,10层采用全局注意力。 Pro和Flash两者都是稀疏MoE结构,通过局部注意力和少量全局注意力结合,在长上下文场景下降低计算和显存压力。 多模态部分也不是简单外挂几个模型,文字、图像、视频和音频最终进入的是同一套模型体系,而不是多个彼此独立的模型拼在一起。 在推理速度上,MiMo-V2.6继续采用多Token预测机制。官方数据来看,它加入了5层SWA结构的MTP推测解码器,每次前向过程可以提出后续多个Token,再进行并行验证。 当然,小米自己也承认,MiMo-V2.6和目前顶尖的闭源模型依然有差距。 不过如果按照性价比来看,MiMo-V2.6非常能打。 搜狐科技整理了目前主流的一些大模型的API价格。 搜狐科技制图,数据源自网络 “You Only RL Once” DeepSeek R1已经证明,模型在经过足够的强化学习后,可以出现明显的推理能力跃升。但如果把问题继续往前推一步,就会遇到新的瓶颈。如果题目越来越复杂,模型需要执行越来越长的任务,训练就需要更多尝试;任务变得开放之后,过去简单的答对还是答错又开始不够用了。 MiMo-V2.6解决的就是这几个问题。小米在这次训练中同时扩大了三件事。 第一是训练本身的规模。 每个RL Step使用1568个样本,每个样本可以进行16次尝试,单Step处理

about image
上一篇 终败给“残酷现实”!65岁刘德华近况曝光,和76岁张艺谋如出一辙... 下一篇 都怪维尼修斯!高价签迪奥曼德错失罗德里,皇马已两年无中场组织者...

觉得内容有价值?

分享给更多关注行业变化的朋友。

返回资讯列表
03 / TRENDING NOW

热点资讯

查看近期访问较多的内容,快速了解读者正在关注的行业话题。

物业费改革有新提议:两室一厅年收费200元,三室一厅300元
1

物业费改革有新提议:两室一厅年收费200元,三室一厅300元

对于绝大多数家庭来说,物业费是每年固定的住房开支,也是大家日常吐槽最多的民生费用。目前国内小区物业费大多按照房屋面积计费,每平米几元不等,看似单价不高,一套百平米的房子,一年下来物业费动辄上千甚至几千元。 很多业主常年缴费,却经常遇到服务不到位、保洁偷懒、安保松懈、公共设施无人维修等问题,缴费和服务不匹配的情况十分普遍。近期,物业费计费模式迎来全新改革提议,打破沿用多年的按平米收费方式,改为按户型

曼晚:曼联最后的反扑不错,但让人不禁想问前面一个小时干嘛去了
2

曼晚:曼联最后的反扑不错,但让人不禁想问前面一个小时干嘛去了

直播吧9月21日讯 英超第五轮,曼联客场1-1战平富勒姆。赛后,曼彻斯特晚报对本场比赛曼联的表现进行了点评。 曼晚赛评: 曼联终于等到了他们盼了很久的运气,在对阵富勒姆的比赛里捞到一分,但这又是一场糟糕的表现。 卡里克这段时间一直在念叨,最近几个决定比赛的小细节都站在曼联的对立面:对埃弗顿那场突然冒出来的神仙球、曼市德比里的裁判离谱判罚、然后就是今天对富勒姆这个荒诞的乌龙球。 卡里克现在的处境,就

6尺9寸仅185磅,他末段7场场均6.3助攻却三分跌到20.3%
3

6尺9寸仅185磅,他末段7场场均6.3助攻却三分跌到20.3%

奥萨曼·迪昂是密尔沃基上赛季的突破球员之一。这位22岁的法国侧翼来自维勒讷夫-苏尔-洛特,在一系列截止日交易后落脚密尔沃基。雄鹿在一笔三方交易中得到他,那笔交易把阿米尔·科菲和科尔·安东尼送往菲尼克斯。此后迪昂一路向上,开局火热,在密尔沃基场均出战26.8分钟,得到11.0分、4.6个篮板和3.6次助攻。他在六月同意了一份三年1750万美元的合同,被期待成为雄鹿年轻核心中令人兴奋的一块。 身高与体

勇士外卡夺冠后,球迷最关心的却是明天这套阵容
4

勇士外卡夺冠后,球迷最关心的却是明天这套阵容

勇士国联分区系列赛开打前夜,球迷讨论的焦点已经不在昨晚那场外卡胜利上了。 球队官方账号在 10月2日 发了一条动态,配图是一瓶香槟,瓶身上贴着一张定制贴纸,写着"Let It Fly / Wild Card Won"。这张贴纸成了当天最被反复提起的细节——它把昨晚那场胜利的分量,浓缩成了一句可以贴在酒瓶上的话。 昨晚那场胜利,被反复回看 这一天被形容为"美好且基本没有压力"的一天,大家沉浸在昨晚那

德甲积分榜:拜仁大胜暂登榜首,多特同分,莱比锡未赛暂落后1分
5

德甲积分榜:拜仁大胜暂登榜首,多特同分,莱比锡未赛暂落后1分

首页 NBA视频 旧版页面 录像页面 足球视频 旧版页面 录像页面 NBA资讯 滚动资讯 足球资讯 滚动资讯 电竞 电竞资讯 电竞视频 综合 综合资讯 综合视频 比分 数据 NBA资料库 资料 个人 下载客户端 新版 直播首页 > 足球资讯 >德甲积分榜:拜仁大胜暂登榜首,多特同分,莱比锡未赛暂落后1分 德甲积分榜:拜仁大胜暂登榜首,多特同分,莱比锡未赛暂落后1分 直播吧10月18日讯 本轮德甲,