国产av一二三区|日本不卡动作网站|黄色天天久久影片|99草成人免费在线视频|AV三级片成人电影在线|成年人aV不卡免费播放|日韩无码成人一级片视频|人人看人人玩开心色AV|人妻系列在线观看|亚洲av无码一区二区三区在线播放

網(wǎng)易首頁(yè) > 網(wǎng)易號(hào) > 正文 申請(qǐng)入駐

超越DeepSeek-V4!羅福莉交出小米最強(qiáng)開(kāi)源模型,首日適配5家國(guó)產(chǎn)芯片

0
分享至


智東西
作者 李水青
編輯 云鵬

智東西4月28日?qǐng)?bào)道,剛剛,小米開(kāi)源羅福莉帶隊(duì)研發(fā)的MiMo-V2.5系列模型,采用MIT協(xié)議,允許商用推理部署與二次訓(xùn)練,無(wú)需額外授權(quán)。


▲MiMo-V2.5-Pro在Hugging Face的開(kāi)源頁(yè)面截圖

此前,該系列模型于4月23日開(kāi)啟公測(cè),包括MiMo-V2.5-Pro、MiMo-V2.5兩款模型。模型具備更強(qiáng)Agent能力,支持100萬(wàn)上下文,且Token效率大幅提升。

MiMo-V2.5-Pro的完整基準(zhǔn)測(cè)試結(jié)果今日公布,小米稱(chēng)其在GDPVal-AA(Elo)、Claw-Eval(pass^3)等多項(xiàng)測(cè)評(píng)中超過(guò)了最新開(kāi)源的DeepSeek-V4-Pro模型,也超過(guò)了發(fā)布不久的Kimi K2.6等主流閉源模型,實(shí)現(xiàn)總體最佳。


▲MiMo-V2.5-Pro的最新測(cè)評(píng)成績(jī)

開(kāi)源首日,MiMo-V2.5-Pro宣布已完成與阿里平頭哥、亞馬遜云科技、AMD、百度昆侖芯、燧原科技、沐曦、天數(shù)智芯多個(gè)芯片廠(chǎng)商的接入適配。MiMo-V2.5系列模型同步完成SGLang和vLLM主流推理框架的Day 0適配。

與此同時(shí),小米還推出百萬(wàn)億Token創(chuàng)造者激勵(lì)計(jì)劃,計(jì)劃30天內(nèi)免費(fèi)發(fā)放總計(jì)100萬(wàn)億Token權(quán)益;推出Agent生態(tài)共建計(jì)劃,目前已與OpenCode、Hermes Agent、KiloCode等Agent框架廠(chǎng)商展開(kāi)合作。

模型權(quán)重合集:
https://huggingface.co/collections/XiaomiMiMo/mimo-v25
更多細(xì)節(jié)參考模型Blog:
https://mimo.xiaomi.com/index#blog
百萬(wàn)億Token計(jì)劃申請(qǐng)網(wǎng)址:
https://100t.xiaomimimo.com/

一、模型技術(shù)細(xì)節(jié)公布,測(cè)評(píng)超越DeepSeek-V4

由小米最新公開(kāi)的模型卡可知,小米迄今為止最強(qiáng)模型MiMo-V2.5-Pro是一款擁有1.02萬(wàn)億(1.02T)個(gè)參數(shù)的混合專(zhuān)家模型,其中420億(42B)個(gè)激活參數(shù),基于混合注意力架構(gòu),相比前代模型在通用智能能力、復(fù)雜軟件工程和長(zhǎng)時(shí)域任務(wù)處理方面均實(shí)現(xiàn)了顯著提升。

MiMo-V2.5-Pro繼承了MiMo-V2-Flash的混合注意力機(jī)制和多標(biāo)記預(yù)測(cè)(MTP)設(shè)計(jì)。局部滑動(dòng)窗口注意力(SWA)和全局注意力(GA)以6:1的比例交錯(cuò)使用,窗口大小為128個(gè)Token,在長(zhǎng)上下文情況下,通過(guò)可學(xué)習(xí)的注意力池偏置,將鍵值緩存存儲(chǔ)空間減少了近7倍,同時(shí)保持了性能。一個(gè)輕量級(jí)的MTP模塊,采用密集前饋神經(jīng)網(wǎng)絡(luò)(FFN),原生集成用于訓(xùn)練和推理,輸出吞吐量大約提升了三倍,并加速了強(qiáng)化學(xué)習(xí)(RL)的部署。


▲MiMo-V2.5-Pro的模型架構(gòu)及訓(xùn)練過(guò)程

該模型預(yù)訓(xùn)練使用27萬(wàn)億(27T)個(gè)Token,采用FP8混合精度,原生序列長(zhǎng)度為32K,上下文擴(kuò)展至1M個(gè)Token。后訓(xùn)練遵循MiMo-V2-Flash中引入的三階段范式:1、監(jiān)督式微調(diào),在精心挑選的數(shù)據(jù)對(duì)上建立基礎(chǔ)的指令跟蹤;2、領(lǐng)域?qū)>?xùn)練,其中不同的教師模型分別通過(guò)針對(duì)特定領(lǐng)域的強(qiáng)化學(xué)習(xí)進(jìn)行優(yōu)化,涵蓋數(shù)學(xué)、安全、智能工具使用等領(lǐng)域;3、多教師策略蒸餾(MOPD),其中單個(gè)學(xué)生模型在每位專(zhuān)精教師的Token級(jí)指導(dǎo)下,從自身的展開(kāi)中學(xué)習(xí)策略,并將所有教師的能力融合到一個(gè)統(tǒng)一的模型中。

再來(lái)看看MiMo-V2.5,這是一個(gè)3100億(310B)參數(shù)的稀疏MoE模型,擁有150億(15B)激活參數(shù),在48萬(wàn)億(48T)個(gè)Token上進(jìn)行訓(xùn)練。它的語(yǔ)言主干框架繼承了MiMo-V2-Flash的混合滑動(dòng)窗口注意力機(jī)制,并搭載自研預(yù)訓(xùn)練視覺(jué)、音頻編碼器,兩類(lèi)編碼器通過(guò)輕量化投影模塊完成跨模塊融合。


▲MiMo-V2.5架構(gòu)

訓(xùn)練過(guò)程分為五個(gè)階段:1、基于多樣化語(yǔ)料開(kāi)展文本預(yù)訓(xùn)練,搭建大語(yǔ)言模型主干網(wǎng)絡(luò);2、進(jìn)行投影層預(yù)熱訓(xùn)練,實(shí)現(xiàn)音視頻、視覺(jué)投影器與語(yǔ)言模型的對(duì)齊融合;3、依托高質(zhì)量跨模態(tài)數(shù)據(jù)集,開(kāi)展大規(guī)模多模態(tài)預(yù)訓(xùn)練;4、執(zhí)行監(jiān)督微調(diào)與智能體后訓(xùn)練,在此過(guò)程中將上下文窗口從32K逐步擴(kuò)容至256K,最終達(dá)到100萬(wàn)Token;5、最后是通過(guò)強(qiáng)化學(xué)習(xí)(RL)與多目標(biāo)偏好蒸餾(MOPD),進(jìn)一步強(qiáng)化模型的感知、邏輯推理與智能體執(zhí)行能力。

從小米最新公布的測(cè)評(píng)結(jié)果來(lái)看,MiMo-V2.5在Claw-Eval Text、Terminal-Bench 2.0、SWE-Bench Pro等多項(xiàng)測(cè)評(píng)中大幅超越了DeepSeek最新發(fā)布的DeepSeek-V4-Flash。


▲MiMo-V2.5最新測(cè)評(píng)情況

二、開(kāi)源首日,完成阿里平頭哥沐曦等7家芯片廠(chǎng)商適配

小米還公布了芯片生態(tài)與推理框架最新適配情況,MiMo-V2.5-Pro開(kāi)源首日完成多個(gè)芯片廠(chǎng)商的接入適配:

阿里平頭哥:基于真武810E及全棧自研AI軟件棧實(shí)現(xiàn)深度適配。

亞馬遜云科技:基于Trainium2芯片與Neuron SDK + vLLM推理框架完成深度適配,實(shí)現(xiàn)開(kāi)源即全球可用的首日適配。下一代3nm制程Trainium3將進(jìn)一步釋放模型性能。

AMD:依托ROCm開(kāi)源軟件棧提供Day-0適配及全面優(yōu)化支持。

百度昆侖芯:通過(guò)底層算子優(yōu)化與軟硬件協(xié)同加速,保障模型穩(wěn)定高效運(yùn)行。

燧原科技:基于自研馭算TopsRider軟件棧深度優(yōu)化,在燧原L600上完成全量適配。

沐曦:基于曦云C系列及全棧自研MXMACA軟件棧,實(shí)現(xiàn)Triton語(yǔ)法到沐曦GPU指令集的端到端原生支持。

天數(shù)智芯:實(shí)現(xiàn)Day 0級(jí)深度適配。

此外,MiMo-V2.5系列模型同步完成SGLang和vLLM主流推理框架的Day 0適配。

三、免費(fèi)發(fā)放100萬(wàn)億Token,已與Hermes Agent等合作

與此同時(shí),小米還同步推出MiMo Orbit計(jì)劃,包含兩部分:“百萬(wàn)億Token創(chuàng)造者激勵(lì)計(jì)劃”,與面向Agent框架團(tuán)隊(duì)的“Agent生態(tài)共建計(jì)劃”。

在百萬(wàn)億Token創(chuàng)造者激勵(lì)計(jì)劃方面,小米面向全球AI用戶(hù)免費(fèi)發(fā)放Token,30天內(nèi)發(fā)放總計(jì)100萬(wàn)億Token權(quán)益,贈(zèng)完即止。

該計(jì)劃采取申請(qǐng)制,通過(guò)者最高獲得Max檔位Token Plan,包含16億Credits,價(jià)值659元;顒(dòng)時(shí)間:北京時(shí)間2026年4月28日00:00至5月28日00:00。

Agent生態(tài)共建計(jì)劃方面,小米面向全球Agent框架團(tuán)隊(duì)提供專(zhuān)項(xiàng)支持,為框架提供MiMo Token限免支持,同時(shí)參與和贊助框架平臺(tái)的AI Hackathon等共創(chuàng)活動(dòng)。

其目前已與OpenCode、Hermes Agent、KiloCode等Agent框架廠(chǎng)商展開(kāi)深度合作。

結(jié)語(yǔ):多款國(guó)產(chǎn)開(kāi)源模型“亮劍”交鋒

近期,大模型行業(yè)開(kāi)源力度持續(xù)加碼,模型與國(guó)產(chǎn)及國(guó)際芯片的“Day 0”適配已從亮點(diǎn)變?yōu)閯傂,推理效率和部署成本成為下一階段競(jìng)爭(zhēng)的核心。同時(shí),百億級(jí)Token免費(fèi)激勵(lì)與Agent框架生態(tài)共建,反映出行業(yè)正從“拼參數(shù)”轉(zhuǎn)向“拼應(yīng)用”。

值得關(guān)注的是,小米MiMo-V2.5-Pro在多項(xiàng)基準(zhǔn)評(píng)測(cè)中直接超越DeepSeek最新開(kāi)源的DeepSeek-V4-Pro模型,可謂與DeepSeek在開(kāi)源賽道發(fā)起“亮劍”交鋒,有望倒逼行業(yè)更快降低推理成本、提升Agent真實(shí)任務(wù)完成率。

特別聲明:以上內(nèi)容(如有圖片或視頻亦包括在內(nèi))為自媒體平臺(tái)“網(wǎng)易號(hào)”用戶(hù)上傳并發(fā)布,本平臺(tái)僅提供信息存儲(chǔ)服務(wù)。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相關(guān)推薦
熱點(diǎn)推薦
騎士猛龍G4最后兩分鐘裁判報(bào)告:共出現(xiàn)7次漏判,騎士獲利4次

騎士猛龍G4最后兩分鐘裁判報(bào)告:共出現(xiàn)7次漏判,騎士獲利4次

懂球帝
2026-04-28 08:07:05
有點(diǎn)慘!燃油車(chē)再迎大降價(jià):最大跌幅50%,豪華車(chē)帶頭“跳水”

有點(diǎn)慘!燃油車(chē)再迎大降價(jià):最大跌幅50%,豪華車(chē)帶頭“跳水”

古事尋蹤記
2026-04-28 07:21:43
男子打麻將身體不適倒地昏迷后死亡,家屬起訴棋牌室及經(jīng)營(yíng)者索賠28萬(wàn)余元被駁回

男子打麻將身體不適倒地昏迷后死亡,家屬起訴棋牌室及經(jīng)營(yíng)者索賠28萬(wàn)余元被駁回

紅星新聞
2026-04-27 19:30:42
草草收?qǐng)?美記稱(chēng)KD已打完火箭最后一戰(zhàn) 火箭是否會(huì)拆隊(duì)補(bǔ)強(qiáng)?

草草收?qǐng)?美記稱(chēng)KD已打完火箭最后一戰(zhàn) 火箭是否會(huì)拆隊(duì)補(bǔ)強(qiáng)?

驚奇侃球
2026-04-28 09:33:58
特朗普,又變了

特朗普,又變了

南風(fēng)窗
2026-04-27 16:22:26
扎克·施奈德首曝《蝙蝠俠大戰(zhàn)超人》未公開(kāi)海報(bào)!

扎克·施奈德首曝《蝙蝠俠大戰(zhàn)超人》未公開(kāi)海報(bào)!

3DM游戲
2026-04-27 09:20:10
孫楊私生子風(fēng)波升級(jí)!孩子近況曝光,13歲在練擊劍,長(zhǎng)得很像爸爸

孫楊私生子風(fēng)波升級(jí)!孩子近況曝光,13歲在練擊劍,長(zhǎng)得很像爸爸

小娛樂(lè)悠悠
2026-04-28 07:20:27
這就是張作霖年輕時(shí)的真實(shí)長(zhǎng)相,比兒子張學(xué)良帥多了,罕見(jiàn)老照片

這就是張作霖年輕時(shí)的真實(shí)長(zhǎng)相,比兒子張學(xué)良帥多了,罕見(jiàn)老照片

潯陽(yáng)咸魚(yú)
2026-04-27 09:30:21
首個(gè)退群北約的國(guó)家來(lái)了:已走程序,退意已決!

首個(gè)退群北約的國(guó)家來(lái)了:已走程序,退意已決!

福建睿平
2026-04-27 11:46:08
太可怕了!繼注射藥物、熱巴事件后,王陽(yáng)再揭?jiàn)蕵?lè)圈最臟的一面

太可怕了!繼注射藥物、熱巴事件后,王陽(yáng)再揭?jiàn)蕵?lè)圈最臟的一面

橙星文娛
2026-04-17 13:19:56
日本大地震!“三餐變一頓”,開(kāi)始呼叫中國(guó)?

日本大地震!“三餐變一頓”,開(kāi)始呼叫中國(guó)?

小正說(shuō)娛樂(lè)
2026-04-27 07:53:23
草蜢40周年演唱會(huì),蔡一杰首度公開(kāi)病情:腦癌已擴(kuò)散,但永不言棄

草蜢40周年演唱會(huì),蔡一杰首度公開(kāi)病情:腦癌已擴(kuò)散,但永不言棄

地理三體說(shuō)
2026-04-27 22:33:41
高速上一新能源車(chē)電量耗盡,司機(jī)竟試圖接路邊監(jiān)控電源給車(chē)充電!所幸交警及時(shí)發(fā)現(xiàn):萬(wàn)一下雨漏電你怎么辦?司機(jī)被罰款200元、記3分

高速上一新能源車(chē)電量耗盡,司機(jī)竟試圖接路邊監(jiān)控電源給車(chē)充電!所幸交警及時(shí)發(fā)現(xiàn):萬(wàn)一下雨漏電你怎么辦?司機(jī)被罰款200元、記3分

揚(yáng)子晚報(bào)
2026-04-27 07:27:12
克媒:莫德里奇顴骨骨折賽季報(bào)銷(xiāo),預(yù)計(jì)將戴面具出戰(zhàn)世界杯

克媒:莫德里奇顴骨骨折賽季報(bào)銷(xiāo),預(yù)計(jì)將戴面具出戰(zhàn)世界杯

懂球帝
2026-04-27 22:00:51
NBA選秀改革即將落地:戰(zhàn)績(jī)墊底的10支球隊(duì),獲得狀元簽的概率統(tǒng)一為8%

NBA選秀改革即將落地:戰(zhàn)績(jī)墊底的10支球隊(duì),獲得狀元簽的概率統(tǒng)一為8%

林子說(shuō)事
2026-04-28 03:21:58
世界第一爆冷無(wú)緣八強(qiáng)!特魯姆普12-13惜敗,止步世錦賽第2輪

世界第一爆冷無(wú)緣八強(qiáng)!特魯姆普12-13惜敗,止步世錦賽第2輪

全景體育V
2026-04-28 05:44:20
7歲女孩獨(dú)自走6公里上學(xué),只有小狗相伴引發(fā)關(guān)注。

7歲女孩獨(dú)自走6公里上學(xué),只有小狗相伴引發(fā)關(guān)注。

一絲不茍的法律人
2026-04-27 14:58:35
周一圍張頌文林家川三家聚會(huì),張頌文妻兒罕見(jiàn)出鏡,老婆氣質(zhì)絕了

周一圍張頌文林家川三家聚會(huì),張頌文妻兒罕見(jiàn)出鏡,老婆氣質(zhì)絕了

手工制作阿殲
2026-04-28 07:21:57
不想訪(fǎng)華了?特朗普聯(lián)手27國(guó)針對(duì)中國(guó),話(huà)音剛落,中方制裁令下達(dá)

不想訪(fǎng)華了?特朗普聯(lián)手27國(guó)針對(duì)中國(guó),話(huà)音剛落,中方制裁令下達(dá)

霽寒飄雪
2026-04-28 09:41:52
回顧遼寧一廠(chǎng)長(zhǎng)邀15名歌廳舞女做客,喝完酒后,將15人沖進(jìn)下水道

回顧遼寧一廠(chǎng)長(zhǎng)邀15名歌廳舞女做客,喝完酒后,將15人沖進(jìn)下水道

談史論天地
2026-04-27 15:00:03
2026-04-28 10:40:49
智東西 incentive-icons
智東西
智東西,AI產(chǎn)業(yè)新媒體,專(zhuān)注報(bào)道人工智能的前沿技術(shù)發(fā)展,和技術(shù)應(yīng)用帶來(lái)的千行百業(yè)產(chǎn)業(yè)變革。
11703文章數(shù) 117048關(guān)注度
往期回顧 全部

科技要聞

10億周活目標(biāo)落空!傳OpenAI爆發(fā)內(nèi)部分歧

頭條要聞

"探店"網(wǎng)紅白冰偷稅超900萬(wàn)被查 官方公布案件細(xì)節(jié)

頭條要聞

"探店"網(wǎng)紅白冰偷稅超900萬(wàn)被查 官方公布案件細(xì)節(jié)

體育要聞

人類(lèi)馬拉松"破二"新紀(jì)元,一場(chǎng)跑鞋軍備競(jìng)賽

娛樂(lè)要聞

楊冪險(xiǎn)遭蒸汽眼罩毀容!傷照曝光…

財(cái)經(jīng)要聞

俞敏洪再遭重?fù)?/h3>

汽車(chē)要聞

領(lǐng)克900大五座正式上市 限時(shí)售價(jià)25.48萬(wàn)起

態(tài)度原創(chuàng)

本地
手機(jī)
房產(chǎn)
時(shí)尚
公開(kāi)課

本地新聞

云游中國(guó)|逛世界風(fēng)箏都 留學(xué)生探秘中國(guó)傳統(tǒng)文化

手機(jī)要聞

蘋(píng)果重新轉(zhuǎn)向曲面屏 手機(jī)設(shè)計(jì)方向原地調(diào)頭

房產(chǎn)要聞

信號(hào)!海南商業(yè)版圖,迎來(lái)大變局!

T恤+闊腿褲、襯衫+闊腿褲,今年夏天最火的搭配,誰(shuí)穿誰(shuí)時(shí)髦!

公開(kāi)課

李玫瑾:為什么性格比能力更重要?

無(wú)障礙瀏覽 進(jìn)入關(guān)懷版