北京
AI下半場，騰訊終于交卷了
4月23日，騰訊混元Hy3 preview正式發(fā)布。這是姚順雨去年底加入騰訊后從頭重建的模型，今年1月啟動訓(xùn)練，三個月內(nèi)完成從底層基礎(chǔ)設(shè)施到預(yù)訓(xùn)練和強(qiáng)化學(xué)習(xí)框架的重建。
姚順雨是ReAct框架提出者，也是AI圈公認(rèn)的“智能體鼻祖”。他加入騰訊后一直在強(qiáng)調(diào)：AI上半場拼參數(shù)，下半場拼模型在真實(shí)世界里能不能干活。發(fā)布前，姚順雨團(tuán)隊(duì)的署名論文CL-bench發(fā)現(xiàn)，十個前沿模型平均任務(wù)解決率只有17.2%，問題不是模型不夠大，而是“沒讀進(jìn)去上下文”。
Hy3 preview定位明確：解決真實(shí)世界的復(fù)雜工程問題。不卷參數(shù)，主打?qū)嵱眯浴Ｔ赟WE-Bench Verified、Terminal-Bench 2.0等代碼智能體評測中拿到有競爭力的分?jǐn)?shù)，ClawEval和WildClawBench上表現(xiàn)突出，意味著它能接住“龍蝦”這類復(fù)雜Agent任務(wù)。
模型采用快慢思考融合的MoE架構(gòu)，總參數(shù)295B，激活參數(shù)21B，最大支持256K上下文。團(tuán)隊(duì)在參數(shù)上保持克制，重點(diǎn)解決真實(shí)世界復(fù)雜工程問題。官方測試顯示，代碼和智能體方向提升最顯著。
姚順雨在發(fā)布會上表示，Hy3 preview是混元重建的第一步，“希望通過開源和發(fā)布獲得來自開源社區(qū)和用戶的真實(shí)反饋”。
特別聲明：以上內(nèi)容(如有圖片或視頻亦包括在內(nèi))為自媒體平臺“網(wǎng)易號”用戶上傳并發(fā)布，本平臺僅提供信息存儲服務(wù)。
Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.
