国产av一二三区|日本不卡动作网站|黄色天天久久影片|99草成人免费在线视频|AV三级片成人电影在线|成年人aV不卡免费播放|日韩无码成人一级片视频|人人看人人玩开心色AV|人妻系列在线观看|亚洲av无码一区二区三区在线播放

網(wǎng)易首頁(yè) > 網(wǎng)易號(hào) > 正文 申請(qǐng)入駐

微軟在KubeCon甩出7張牌,AI基礎(chǔ)設(shè)施要抄Kubernet

0
分享至


去年北美KubeCon上,微軟還在講"要把Kubernetes的運(yùn)營(yíng)成熟度帶到AI工作負(fù)載"。一年后阿姆斯特丹的歐洲站,他們掏出了7個(gè)具體更新——從GPU調(diào)度到多集群網(wǎng)絡(luò),從可觀測(cè)性到存儲(chǔ)生命周期。這不是畫(huà)餅,是實(shí)打?qū)嵉墓こ探桓丁?/p>

AI基礎(chǔ)設(shè)施正在重復(fù)Kubernetes十年前的老路:工具爆炸、標(biāo)準(zhǔn)缺失、每家都在重新發(fā)明輪子。

微軟云原生團(tuán)隊(duì)的人打了個(gè)比方:早期Kubernetes社區(qū)也經(jīng)歷過(guò)"靈活性幻覺(jué)"——聽(tīng)起來(lái)是自由選擇,規(guī)?;蟛虐l(fā)現(xiàn)是碎片化災(zāi)難。解法從來(lái)不是加更多功能,而是共享運(yùn)營(yíng)哲學(xué)。AI現(xiàn)在卡在同樣的坑里,只是問(wèn)題更難量化:從"能用vs不能用"變成了"答案好vs答案壞"。

這次發(fā)布的核心邏輯很直白:把AI工作負(fù)載變成Kubernetes的"一等公民",讓GPU調(diào)度、網(wǎng)絡(luò)加密、跨集群治理這些能力,像容器編排一樣成為默認(rèn)基線(xiàn)。

GPU調(diào)度:從"能跑"到"可預(yù)測(cè)"

微軟聯(lián)合行業(yè)伙伴推進(jìn)的硬件資源管理開(kāi)放標(biāo)準(zhǔn),在這次有了實(shí)質(zhì)性落地。動(dòng)態(tài)資源分配(DRA)框架的進(jìn)展尤其關(guān)鍵——它讓GPU、TPU這類(lèi)加速器的調(diào)度從靜態(tài)預(yù)留變成按需切片。

過(guò)去團(tuán)隊(duì)常遇到這種尷尬:一塊A100要么整卡獨(dú)占,要么冒著性能干擾的風(fēng)險(xiǎn)共享。DRA的細(xì)粒度分配讓訓(xùn)練任務(wù)和推理服務(wù)能安全地?cái)D在同一臺(tái)機(jī)器上,利用率數(shù)字好看得多。

更隱蔽但更重要的是拓?fù)涓兄{(diào)度。大模型訓(xùn)練對(duì)NVLink、InfiniBand的拓?fù)錁O度敏感,選錯(cuò)節(jié)點(diǎn)可能讓通信開(kāi)銷(xiāo)吃掉30%以上的算力。微軟把這部分信息暴露給調(diào)度器,讓Kubernetes能"看懂"機(jī)柜里的物理連線(xiàn)。

「我們不是在解決'怎么跑容器',而是在解決'怎么安全地變更運(yùn)行中的系統(tǒng)'。」微軟工程師在演講里重復(fù)了這句社區(qū)老話(huà)。對(duì)AI負(fù)載來(lái)說(shuō),"安全變更"意味著訓(xùn)練任務(wù)被搶占時(shí)能優(yōu)雅checkpoint,意味著推理服務(wù)的滾動(dòng)更新不會(huì)觸發(fā)P99延遲爆炸。

網(wǎng)絡(luò)與安全:IP地址正在成為負(fù)債

分布式Kubernetes有個(gè)反直覺(jué)的趨勢(shì):節(jié)點(diǎn)越多,IP地址越像燙手山芋??梢暬懒?,安全策略審計(jì)變成噩夢(mèng),加密通信要么綁死全量服務(wù)網(wǎng)格,要么自己動(dòng)手寫(xiě)iptables。

微軟這次推的Cilium集成方案,本質(zhì)上是把eBPF(擴(kuò)展伯克利數(shù)據(jù)包過(guò)濾器)的過(guò)濾能力嫁接到AKS的網(wǎng)絡(luò)層。東西向流量加密不再依賴(lài)sidecar,延遲降了一截,運(yùn)維也少了一層故障點(diǎn)。

多集群場(chǎng)景更棘手。聯(lián)邦集群的DNS解析、證書(shū)輪轉(zhuǎn)、策略同步,每個(gè)都是生產(chǎn)環(huán)境的雷區(qū)。微軟的Fleet Manager新增了基于身份的網(wǎng)絡(luò)策略——不再問(wèn)"這個(gè)IP能訪(fǎng)問(wèn)那個(gè)IP嗎",而是問(wèn)"這個(gè)工作負(fù)載的身份有權(quán)調(diào)用那個(gè)服務(wù)嗎"。

IP地址會(huì)漂移,身份不會(huì)。這個(gè)抽象層的切換,是規(guī)?;\(yùn)營(yíng)的必經(jīng)之路。

安全側(cè)的另一個(gè)更新是機(jī)密容器(Confidential Containers)的GA。簡(jiǎn)單說(shuō),讓云服務(wù)商也看不到你的模型權(quán)重。對(duì)金融、醫(yī)療這類(lèi)客戶(hù),這不是加分項(xiàng)是入場(chǎng)券。

可觀測(cè)性:從"指標(biāo)洪水"到"推理追蹤"

傳統(tǒng)監(jiān)控工具面對(duì)AI工作負(fù)載有種無(wú)力感。GPU利用率100%可能是高效訓(xùn)練,也可能是死鎖;P99延遲平穩(wěn)可能是系統(tǒng)健康,也可能是模型在輸出垃圾。

微軟和OpenTelemetry社區(qū)合作推進(jìn)的LLM可觀測(cè)性規(guī)范,試圖把prompt長(zhǎng)度、token吞吐量、模型版本這些語(yǔ)義層信息,塞進(jìn)標(biāo)準(zhǔn)的鏈路追蹤里。這意味著你可以像查分布式事務(wù)一樣,追蹤一次推理請(qǐng)求經(jīng)過(guò)了哪些模型編排步驟,哪個(gè)環(huán)節(jié)拖了后腿。

Prometheus的遠(yuǎn)程寫(xiě)入端點(diǎn)也做了優(yōu)化,針對(duì)時(shí)序數(shù)據(jù)的 Cardinality 爆炸問(wèn)題加了預(yù)聚合。實(shí)測(cè)中,十萬(wàn)級(jí)Pod集群的監(jiān)控存儲(chǔ)成本降了40%左右——這對(duì)長(zhǎng)期保留訓(xùn)練實(shí)驗(yàn)數(shù)據(jù)很關(guān)鍵。

存儲(chǔ)與生命周期:數(shù)據(jù)管道的隱形戰(zhàn)場(chǎng)

AI工作負(fù)載的存儲(chǔ)模式很分裂:訓(xùn)練需要高吞吐順序讀,檢查點(diǎn)需要突發(fā)寫(xiě)帶寬,模型倉(cāng)庫(kù)需要低延遲隨機(jī)訪(fǎng)問(wèn)。單一存儲(chǔ)方案往往顧此失彼。

AKS新支持的容器存儲(chǔ)接口(CSI)驅(qū)動(dòng),允許在同一個(gè)集群里混布對(duì)象存儲(chǔ)、并行文件系統(tǒng)和本地NVMe,按作業(yè)類(lèi)型自動(dòng)掛載。配合Kubernetes的Volume Populator,預(yù)加載百GB級(jí)數(shù)據(jù)集的時(shí)間從小時(shí)級(jí)壓到分鐘級(jí)。

集群生命周期管理則瞄準(zhǔn)了另一個(gè)痛點(diǎn):升級(jí)。Kubernetes的版本迭代速度讓LTS(長(zhǎng)期支持)策略成為剛需。微軟把AKS的維護(hù)窗口和節(jié)點(diǎn)池的滾動(dòng)更新做了更細(xì)粒度的編排,允許訓(xùn)練任務(wù)所在的節(jié)點(diǎn)池滯后兩個(gè)小版本,而前端服務(wù)緊跟最新安全補(bǔ)丁。

「我們內(nèi)部有個(gè)指標(biāo):集群升級(jí)導(dǎo)致的作業(yè)中斷時(shí)間?!构こ處熗嘎哆@個(gè)數(shù)字在過(guò)去一年從平均47分鐘降到了8分鐘。沒(méi)有魔法,只是把Pod遷移、GPU驅(qū)動(dòng)兼容性檢查、網(wǎng)絡(luò)策略驗(yàn)證這些步驟從人工腳本變成了聲明式配置。

開(kāi)源協(xié)作的"社區(qū)壓力"機(jī)制

回看微軟這次的所有發(fā)布,有個(gè)貫穿的線(xiàn)索:沒(méi)有一個(gè)是AKS獨(dú)占的閉源功能。DRA、Cilium、OpenTelemetry LLM語(yǔ)義規(guī)范,全部以開(kāi)源提案或上游合并的形式存在。

這符合他們反復(fù)提及的"社區(qū)壓力"理論——當(dāng)足夠多的生產(chǎn)環(huán)境采用同一種實(shí)踐,它就會(huì)從"可選方案"變成"默認(rèn)預(yù)期"。Kubernetes的Pod安全策略、網(wǎng)絡(luò)策略、甚至YAML本身,都是這么過(guò)來(lái)的。

AI基礎(chǔ)設(shè)施的混沌期不會(huì)自動(dòng)結(jié)束。它需要有人先把坑踩一遍,把解法寫(xiě)成可復(fù)現(xiàn)的文檔,再推動(dòng)成為跨廠商的標(biāo)準(zhǔn)。微軟顯然想扮演這個(gè)角色,至少在云原生和AI的交叉地帶。

阿姆斯特丹的現(xiàn)場(chǎng)有個(gè)細(xì)節(jié):演示多集群GPU調(diào)度時(shí),工程師故意觸發(fā)了一次節(jié)點(diǎn)故障。訓(xùn)練任務(wù)在23秒內(nèi)遷移到備用節(jié)點(diǎn),checkpoint只丟了最后120秒的進(jìn)度。臺(tái)下有人舉手問(wèn),這個(gè)23秒能不能再壓?

工程師沒(méi)給承諾,只說(shuō)了一句:「下個(gè)版本見(jiàn)?!?/p>

特別聲明:以上內(nèi)容(如有圖片或視頻亦包括在內(nèi))為自媒體平臺(tái)“網(wǎng)易號(hào)”用戶(hù)上傳并發(fā)布,本平臺(tái)僅提供信息存儲(chǔ)服務(wù)。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相關(guān)推薦
熱點(diǎn)推薦
王晶曝陳百?gòu)?qiáng)真正死因,64歲何超瓊顏面盡失

王晶曝陳百?gòu)?qiáng)真正死因,64歲何超瓊顏面盡失

君笙的拂兮
2026-03-22 03:44:36
“寫(xiě)作業(yè)就頭痛,睡一覺(jué)又好了”,江蘇一家長(zhǎng)以為孩子裝病逃避學(xué)習(xí),為探究竟帶往醫(yī)院,結(jié)果孩子突發(fā)腦出血,被送ICU,家屬:正在恢復(fù)中

“寫(xiě)作業(yè)就頭痛,睡一覺(jué)又好了”,江蘇一家長(zhǎng)以為孩子裝病逃避學(xué)習(xí),為探究竟帶往醫(yī)院,結(jié)果孩子突發(fā)腦出血,被送ICU,家屬:正在恢復(fù)中

瀟湘晨報(bào)
2026-03-26 11:49:57
5分鐘開(kāi)通國(guó)家免費(fèi)電視!不用機(jī)頂盒、不連網(wǎng),永久免費(fèi)

5分鐘開(kāi)通國(guó)家免費(fèi)電視!不用機(jī)頂盒、不連網(wǎng),永久免費(fèi)

叮當(dāng)當(dāng)科技
2026-03-20 03:29:51
千萬(wàn)不要小看F-35,雖然打不過(guò)殲-20,卻是東風(fēng)快遞、紅旗導(dǎo)彈的巨大威脅

千萬(wàn)不要小看F-35,雖然打不過(guò)殲-20,卻是東風(fēng)快遞、紅旗導(dǎo)彈的巨大威脅

利刃號(hào)
2026-02-02 19:07:20
掛斷王毅電話(huà)后,伊朗向全球發(fā)出"照會(huì)",把小薩拉曼鼻子都?xì)馔崃?>
    </a>
        <h3>
      <a href=聞香閣
2026-03-25 22:48:26
斬草除根!美以聯(lián)合空襲打擊伊朗伊斯法罕關(guān)鍵光電及導(dǎo)彈研究設(shè)施

斬草除根!美以聯(lián)合空襲打擊伊朗伊斯法罕關(guān)鍵光電及導(dǎo)彈研究設(shè)施

軍迷戰(zhàn)情室
2026-03-25 07:42:05
中央定調(diào),養(yǎng)老金調(diào)整方向明確,2026年若上漲,企退能多漲3%嗎?

中央定調(diào),養(yǎng)老金調(diào)整方向明確,2026年若上漲,企退能多漲3%嗎?

有范又有料
2026-03-26 14:35:52
國(guó)宴上錢(qián)學(xué)森按請(qǐng)柬找不到座位,毛主席:你的名字是我劃掉的

國(guó)宴上錢(qián)學(xué)森按請(qǐng)柬找不到座位,毛主席:你的名字是我劃掉的

浩渺青史
2026-03-16 15:02:55
國(guó)際油價(jià)漲幅擴(kuò)大 布倫特原油期貨站上105美元/桶

國(guó)際油價(jià)漲幅擴(kuò)大 布倫特原油期貨站上105美元/桶

每日經(jīng)濟(jì)新聞
2026-03-26 15:11:37
張雪峰生前日常:1份飯6個(gè)菜,日均睡眠不足4小時(shí),最后露面疲憊

張雪峰生前日常:1份飯6個(gè)菜,日均睡眠不足4小時(shí),最后露面疲憊

洲洲影視娛評(píng)
2026-03-25 13:16:24
商業(yè)航天巨頭沖刺上市,A股概念股曝光

商業(yè)航天巨頭沖刺上市,A股概念股曝光

數(shù)據(jù)寶
2026-03-26 12:16:17
爭(zhēng)端升級(jí),日本援兵已到,中方宣布封海4天,俄羅斯警告軍備競(jìng)賽

爭(zhēng)端升級(jí),日本援兵已到,中方宣布封海4天,俄羅斯警告軍備競(jìng)賽

薦史
2026-03-25 15:28:17
伊朗導(dǎo)彈專(zhuān)挑航母打,美軍意識(shí)到不對(duì)勁,對(duì)手越打越強(qiáng)了?

伊朗導(dǎo)彈專(zhuān)挑航母打,美軍意識(shí)到不對(duì)勁,對(duì)手越打越強(qiáng)了?

瑛派兒老黃
2026-03-26 19:44:46
“尼帕病毒”來(lái)勢(shì)洶洶,建議:每家備好6樣?xùn)|西,關(guān)鍵時(shí)刻能救命

“尼帕病毒”來(lái)勢(shì)洶洶,建議:每家備好6樣?xùn)|西,關(guān)鍵時(shí)刻能救命

路醫(yī)生健康科普
2026-01-28 12:18:49
火箭加時(shí)13-0被15-0逆轉(zhuǎn)創(chuàng)NBA歷史,烏度卡下課

火箭加時(shí)13-0被15-0逆轉(zhuǎn)創(chuàng)NBA歷史,烏度卡下課

余飩搞笑段子
2026-03-26 14:04:10
伊朗用導(dǎo)彈拼出尊嚴(yán),中國(guó)導(dǎo)彈實(shí)力藏不住了,俄專(zhuān)家給出硬核定論

伊朗用導(dǎo)彈拼出尊嚴(yán),中國(guó)導(dǎo)彈實(shí)力藏不住了,俄專(zhuān)家給出硬核定論

探史
2026-03-25 14:48:10
中美衛(wèi)星導(dǎo)航用戶(hù)數(shù)量懸殊:GPS用戶(hù)數(shù)超60億,中國(guó)北斗令人意外

中美衛(wèi)星導(dǎo)航用戶(hù)數(shù)量懸殊:GPS用戶(hù)數(shù)超60億,中國(guó)北斗令人意外

混沌錄
2026-03-18 23:54:31
殲-20總師被除名:長(zhǎng)期任央企領(lǐng)導(dǎo),最近照曝出,事發(fā)全過(guò)程披露

殲-20總師被除名:長(zhǎng)期任央企領(lǐng)導(dǎo),最近照曝出,事發(fā)全過(guò)程披露

博士觀察
2026-03-23 23:03:27
巴基斯坦外長(zhǎng)說(shuō)美伊正進(jìn)行間接談判

巴基斯坦外長(zhǎng)說(shuō)美伊正進(jìn)行間接談判

新華社
2026-03-26 19:27:23
“只要決心夠大,諾貝爾獎(jiǎng)不在話(huà)下!”

“只要決心夠大,諾貝爾獎(jiǎng)不在話(huà)下!”

槽邏輯
2026-03-24 18:46:27
2026-03-26 20:16:49
硬核玩家2哈
硬核玩家2哈
沉淀中,勿擾
168文章數(shù) 0關(guān)注度
往期回顧 全部

科技要聞

Meta高管狂分百億期權(quán),700名員工卻下崗

頭條要聞

張雪峰留巨額遺產(chǎn):二婚妻子或拿50% 剩下的女兒占1/3

頭條要聞

張雪峰留巨額遺產(chǎn):二婚妻子或拿50% 剩下的女兒占1/3

體育要聞

申京努力了,然而杜蘭特啊

娛樂(lè)要聞

劉曉慶妹妹發(fā)聲!稱(chēng)姐姐受身邊人挑撥

財(cái)經(jīng)要聞

油價(jià)"馴服"特朗普?一到100美元就TACO

汽車(chē)要聞

一汽奧迪A6L e-tron開(kāi)啟預(yù)售 CLTC最大續(xù)航815km

態(tài)度原創(chuàng)

教育
健康
親子
數(shù)碼
公開(kāi)課

教育要聞

2026人工智能時(shí)代下的教育課堂變革

轉(zhuǎn)頭就暈的耳石癥,能開(kāi)車(chē)上班嗎?

親子要聞

這就是引導(dǎo)型老師的厲害嗎?

數(shù)碼要聞

1+4核,英特爾酷睿3 304處理器現(xiàn)身基準(zhǔn)測(cè)試

公開(kāi)課

李玫瑾:為什么性格比能力更重要?

無(wú)障礙瀏覽 進(jìn)入關(guān)懷版