大模型應(yīng)用7項(xiàng)第一！10月24日，第七屆世界聲博會(huì)暨2024科大訊飛全球1024開(kāi)發(fā)者節(jié)開(kāi)幕式上，科大訊飛董事長(zhǎng)劉慶峰公布訊飛星火大模型應(yīng)用成績(jī)單，并發(fā)布訊飛星火4.0Turbo：七大核心能力全面超過(guò)GPT-4 Turbo，數(shù)學(xué)和代碼能力超越GPT-4o，國(guó)內(nèi)外中英文14項(xiàng)主流測(cè)試集中訊飛星火4.0Turbo實(shí)現(xiàn)9項(xiàng)第一。與此同時(shí)，國(guó)產(chǎn)超大規(guī)模智算平臺(tái)“飛星二號(hào)”正式啟動(dòng)。

會(huì)上，科大訊飛首發(fā)10項(xiàng)基于訊飛星火底座能力的硬核產(chǎn)品與創(chuàng)新應(yīng)用：定義多模AIUI標(biāo)準(zhǔn)，發(fā)布超擬人數(shù)字人；發(fā)布星火多語(yǔ)言大模型、訊飛星火醫(yī)學(xué)影像大模型、汽車(chē)端側(cè)星火大模型；發(fā)布首個(gè)基于“問(wèn)題鏈”的高中數(shù)學(xué)智能教師系統(tǒng)、星火智慧黑板2.0、AI作業(yè)過(guò)濾器等；發(fā)布星火智辦一體機(jī)、智能座艙人機(jī)交互效果評(píng)測(cè)機(jī)器人VIAS以及科大訊飛多語(yǔ)種 AI 翻譯透明屏。

訊飛星火4.0Turbo：國(guó)際14項(xiàng)主流測(cè)試集9項(xiàng)超越，提效50%

訊飛星火大模型4.0Turbo正式發(fā)布，在數(shù)學(xué)能力、代碼能力上超過(guò)了GPT-4o。由艾倫人工智能研究所、OpenAI等國(guó)內(nèi)外權(quán)威單位發(fā)布，涵蓋理解和推理、綜合考試、數(shù)學(xué)和科學(xué)、代碼等不同任務(wù)類(lèi)型的14項(xiàng)主流測(cè)試集中，訊飛星火4.0-Turbo在其中9項(xiàng)測(cè)試集中實(shí)現(xiàn)超越，效率相對(duì)提升50%。

劉慶峰特別提到“硬碰硬”的數(shù)學(xué)能力和代碼能力。

根據(jù)實(shí)用數(shù)學(xué)任務(wù)構(gòu)建測(cè)試集CAppliedMath-1.0，訊飛星火4.0Turbo在計(jì)算、財(cái)務(wù)、金融、度量等多個(gè)維度的任務(wù)中均超過(guò)GPT-4o水平，已完成超長(zhǎng)思維鏈、樹(shù)搜索和自我反思評(píng)價(jià)等算法驗(yàn)證，預(yù)計(jì)今年底可實(shí)現(xiàn)類(lèi)“o1”的高難度數(shù)學(xué)能力顯著提升。

根據(jù)代碼生成HumanEval測(cè)試集上的效果對(duì)比，訊飛星火4.0Turbo在Python、Java、JavaScript等任務(wù)上和GPT-4o的差距微弱，在C++能力上超過(guò)GPT-4o。在真實(shí)應(yīng)用場(chǎng)景，基于認(rèn)知智能全國(guó)重點(diǎn)實(shí)驗(yàn)室構(gòu)建的iFLYCode-Eval-2.0代碼實(shí)用場(chǎng)景測(cè)試集，訊飛星火4.0Turbo在代碼生成、代碼檢錯(cuò)、單元測(cè)試等任務(wù)上都超過(guò)了GPT-4o。同時(shí)推出星火代碼7B版本，滿(mǎn)足代碼生成、代碼補(bǔ)全等極速響應(yīng)型任務(wù)，效果業(yè)界最優(yōu)。

首發(fā)語(yǔ)音視覺(jué)虛擬人交互“三合一”

發(fā)布會(huì)上，科大訊飛重新定義萬(wàn)物智聯(lián)時(shí)代的多模AIUI交互標(biāo)準(zhǔn)，在原有的遠(yuǎn)場(chǎng)高噪、全雙工、多語(yǔ)種多方言能力上，升級(jí)了多模態(tài)能力，新增了超擬人和個(gè)性化能力。

超擬人數(shù)字人首次亮相，多模態(tài)的交互從超擬人的語(yǔ)音變成超擬人的數(shù)字人，實(shí)現(xiàn)語(yǔ)音、視頻、圖文的全部聯(lián)動(dòng)的多模態(tài)交互?？拼笥嶏w研究院院長(zhǎng)劉聰現(xiàn)場(chǎng)和超擬人數(shù)字人玩了個(gè)“角色扮演”游戲，無(wú)論是扮演孫悟空還是小豬佩奇，數(shù)字人反應(yīng)都惟妙惟肖。

多模態(tài)視覺(jué)能力加持下的人機(jī)交互有多驚喜？劉聰現(xiàn)場(chǎng)給超擬人數(shù)字人打了個(gè)“視頻電話(huà)”，他不斷調(diào)整道具“孫悟空”“奧特曼”“怪獸”的擺放位置，無(wú)需拍照，超擬人數(shù)字人看圖說(shuō)話(huà)，馬上回應(yīng)：“奧特曼和孫悟空停止了打斗，正在聯(lián)合對(duì)抗怪獸”，和劉聰暢聊不同角度的所見(jiàn)。

劉聰還演示了更實(shí)用的旅游購(gòu)物場(chǎng)景，當(dāng)攝像頭轉(zhuǎn)向印有外文的化妝品及酒類(lèi)產(chǎn)品時(shí)，超擬人數(shù)字人能對(duì)畫(huà)面中產(chǎn)品的品牌、功能等信息進(jìn)行“秒回”，超擬人數(shù)字人已成為“跨語(yǔ)言”購(gòu)物的好幫手。

“目前，訊飛星火支持用戶(hù)創(chuàng)建自己的個(gè)性化數(shù)字人，打造每個(gè)人的數(shù)字分身?！眲⒙敩F(xiàn)場(chǎng)演示了一個(gè)自己的“數(shù)字分身”，只需在后臺(tái)進(jìn)行簡(jiǎn)單的編輯、定義，就可快速生成自己的卡通形象，更能一句話(huà)復(fù)刻自己的聲音作為發(fā)音人，隨時(shí)隨地與自己對(duì)話(huà)。目前，已支持1300+種人設(shè)打造。

硬件產(chǎn)品端，內(nèi)嵌了星火多模AIUI能力的訊飛AI學(xué)習(xí)機(jī)閱讀伙伴即將上線(xiàn)，孩子們“指哪讀哪”，書(shū)中的故事可以馬上“擬人化”啟發(fā)孩子思考和提問(wèn)。

發(fā)布會(huì)現(xiàn)場(chǎng)，超擬人數(shù)字人能力正式開(kāi)通內(nèi)測(cè)，向現(xiàn)場(chǎng)來(lái)賓開(kāi)通體驗(yàn)權(quán)限。

首發(fā)星火多語(yǔ)言大模型，為世界提供第二種選擇

在語(yǔ)音識(shí)別領(lǐng)域，科大訊飛的遠(yuǎn)場(chǎng)高噪場(chǎng)景語(yǔ)音識(shí)別領(lǐng)先優(yōu)勢(shì)進(jìn)一步擴(kuò)大。

在多語(yǔ)言能力上，首次實(shí)現(xiàn)全國(guó)地級(jí)市方言全覆蓋，含全國(guó)288個(gè)地市、202種方言，訊飛輸入法14.0即將支持202種方言免切換自由說(shuō)。

在多語(yǔ)種能力上，首次發(fā)布星火多語(yǔ)言大模型，除中英文外，可支持俄、日、阿、法等8個(gè)語(yǔ)種。根據(jù)實(shí)用任務(wù)場(chǎng)景構(gòu)建測(cè)試集MMT-Eval-1.0，訊飛星火在汽車(chē)、家電、辦公、翻譯等行業(yè)的任務(wù)場(chǎng)景應(yīng)用效果超過(guò)了GPT-4o。

“訊飛作為中國(guó)唯一的認(rèn)知智能全國(guó)重點(diǎn)實(shí)驗(yàn)室承建單位，我們有使命有責(zé)任要做多語(yǔ)言大模型”，劉慶峰表示，訊飛星火底座能力要不斷提升，對(duì)標(biāo)全球最好水平，同時(shí)還要針對(duì)真實(shí)應(yīng)用場(chǎng)景做到全球最好，不斷擴(kuò)大多語(yǔ)種范圍，“我們一定要代表中國(guó)給世界第二種選擇?！?/p>

多模態(tài)多語(yǔ)言能力升級(jí)，將全面賦能汽車(chē)產(chǎn)業(yè)?？拼笥嶏w還首發(fā)了汽車(chē)端側(cè)星火大模型，據(jù)悉，今年第四季度起，奇瑞、廣汽、長(zhǎng)城等多款搭載端側(cè)大模型的車(chē)型將上市開(kāi)售。

大模型賦能民生剛需：發(fā)布教育、醫(yī)療、司法、政務(wù)等領(lǐng)域AI助手

“用人工智能技術(shù)解決社會(huì)剛需”，是科大訊飛一直以來(lái)的出發(fā)點(diǎn)之一。此次1024科大訊飛全球開(kāi)發(fā)者節(jié)上，科大訊飛面向教育、醫(yī)療、司法、政務(wù)服務(wù)、企業(yè)辦公等多個(gè)行業(yè)場(chǎng)景發(fā)布了最新的產(chǎn)品應(yīng)用。

在教育行業(yè)，首次發(fā)布基于“問(wèn)題鏈”的高中數(shù)學(xué)智能教師系統(tǒng)。

今年1月份，中國(guó)教育科學(xué)研究院與科大訊飛、華為開(kāi)展深度合作，在訊飛星火教育大模型的基礎(chǔ)上開(kāi)展“基于生成式人工智能的中小學(xué)智能教師示范研究”。此次發(fā)布的高中數(shù)學(xué)智能教師系統(tǒng)，是眾多高中數(shù)學(xué)學(xué)科優(yōu)秀教師集體智慧和AI大模型的機(jī)器智能雙向賦能，實(shí)現(xiàn)“人機(jī)共育”。它可以智能生成教學(xué)問(wèn)題鏈，以循序漸進(jìn)的方式輔助教師啟發(fā)學(xué)生思考并逐步解決問(wèn)題，同時(shí)基于精準(zhǔn)學(xué)情定位學(xué)生薄弱點(diǎn)、融合最近發(fā)展區(qū)規(guī)劃路徑、鼓勵(lì)學(xué)生基于真實(shí)世界的主動(dòng)提問(wèn)、探究式學(xué)習(xí)，幫助學(xué)生實(shí)現(xiàn)知識(shí)、到能力、再到素養(yǎng)的綜合培養(yǎng)。該高中數(shù)學(xué)智能教師系統(tǒng)是中國(guó)教科院牽頭、北京、上海、重慶、深圳、合肥、成都、大連、廣州、哈爾濱等12個(gè)區(qū)域50多位數(shù)學(xué)教研員、400多位優(yōu)秀教師與訊飛星火大模型人機(jī)共創(chuàng)的智慧成果。

搭載了高中數(shù)學(xué)智能教師系統(tǒng)的星火智慧黑板2.0也將于10月25日在第84屆教育裝備展上正式發(fā)布，從AI均衡視聽(tīng)更公平、AI教學(xué)工具更高效、AI教師助手更智慧、全國(guó)產(chǎn)化算力更安全等四個(gè)方面推動(dòng)黑板從板書(shū)工具躍遷為教學(xué)AI助手。

此外，訊飛AI學(xué)習(xí)機(jī)中首發(fā)AI作業(yè)過(guò)濾器。學(xué)習(xí)機(jī)通過(guò)OCR能力識(shí)別出紙質(zhì)練習(xí)題，根據(jù)學(xué)生歷史學(xué)習(xí)情況和本地化考情，將題目分出“必做題”“選做題”“建議不做題”三個(gè)等級(jí)，實(shí)現(xiàn)“練得更少、學(xué)得更好”的目標(biāo)。

在醫(yī)療行業(yè)，發(fā)布訊飛星火醫(yī)療大模型2.0，醫(yī)療海量知識(shí)問(wèn)答、醫(yī)療復(fù)雜語(yǔ)言理解、醫(yī)療專(zhuān)業(yè)文書(shū)生成、醫(yī)療診斷治療推薦、醫(yī)療多輪交互、醫(yī)療多模態(tài)交互等六大醫(yī)療核心場(chǎng)景能力重大升級(jí)并持續(xù)領(lǐng)先。

基于訊飛星火醫(yī)學(xué)影像大模型打造的智能醫(yī)學(xué)影像助手也正式發(fā)布，在智能質(zhì)控環(huán)節(jié)，可幫助影像技師快速評(píng)估圖像質(zhì)量，及時(shí)糾正檢查問(wèn)題；在智能診斷環(huán)節(jié)，可幫助影像醫(yī)師快速生成診斷報(bào)告，解釋溯源并多期對(duì)比；在智能讀片環(huán)節(jié)，可接入醫(yī)學(xué)影像大模型，通過(guò)相關(guān)問(wèn)答，幫助臨床醫(yī)師制定診療方案。

會(huì)上，訊飛醫(yī)療還聯(lián)合安徽省衛(wèi)生健康委員會(huì)、認(rèn)知智能全國(guó)重點(diǎn)實(shí)驗(yàn)室，共同發(fā)布全譜系全模態(tài)醫(yī)學(xué)影像大模型開(kāi)放合作計(jì)劃，旨在匯聚全球最頂尖的影像AI科研團(tuán)隊(duì)，共同推進(jìn)醫(yī)學(xué)影像大模型的發(fā)展。

在司法領(lǐng)域，星火法律大模型賦能庭審筆錄制作、裁判文書(shū)編寫(xiě)、法條類(lèi)案檢索等司法場(chǎng)景，和星火通用大模型相比，效率提升從61.7%提升到87.9%。

在政務(wù)服務(wù)場(chǎng)景，政務(wù)大模型持續(xù)迭代，全面覆蓋4500多種標(biāo)準(zhǔn)化事項(xiàng)和60多種材料，老百姓和政務(wù)大模型“聊天”就能實(shí)現(xiàn)邊聊邊確認(rèn)辦事意圖，審核時(shí)間縮短80%，登記效率提升5倍。此外，發(fā)布會(huì)上首發(fā)了搭載政務(wù)大模型的“星火智辦一體機(jī)”，方便群眾從“問(wèn)著辦”到“領(lǐng)著辦”。

AI賦能企業(yè)：訊飛星火正成為央國(guó)企的第一選擇

“訊飛星火已成為央國(guó)企大模型的第一選擇。”劉慶峰曬出了大模型應(yīng)用成績(jī)單：央國(guó)企中標(biāo)第一、教育醫(yī)療市場(chǎng)第一、智能汽車(chē)市場(chǎng)第一、大模型開(kāi)發(fā)者生態(tài)第一、智能硬件市場(chǎng)第一、賦能科研應(yīng)用第一、賦能工業(yè)應(yīng)用第一。

截至2024年10月，科大訊飛已與各頭部企業(yè)共建20多個(gè)行業(yè)大模型，覆蓋300+應(yīng)用場(chǎng)景，所覆蓋行業(yè)和場(chǎng)景數(shù)都是第一。

為了幫助各行各業(yè)更好地落地大模型，科大訊飛構(gòu)建了從“建算力、理數(shù)據(jù)、訓(xùn)模型，到落場(chǎng)景、保安全、精運(yùn)營(yíng)”的全套解決方案。“科大訊飛有領(lǐng)先的工具鏈，可大幅提升‘理數(shù)據(jù)、訓(xùn)模型’的效率；有覆蓋300+行業(yè)場(chǎng)景的實(shí)際應(yīng)用案例，已形成相互借鑒和復(fù)用的規(guī)?；?yīng)；還有全國(guó)產(chǎn)化的算力平臺(tái)。”劉慶峰說(shuō)。

值得一提的是，越來(lái)越多的企業(yè)依托訊飛智能體平臺(tái)，孵化員工自己的AI助手。比如國(guó)能集團(tuán)舉辦“國(guó)家能源杯”大賽，共126個(gè)隊(duì)伍參賽，最終創(chuàng)新孵化了54個(gè)場(chǎng)景智能體，打造員工自己的AI助手。會(huì)上，科大訊飛也正式邀請(qǐng)全國(guó)開(kāi)發(fā)者們參與共創(chuàng)。

訊飛星火賦能科研行業(yè)NO.1,AI for Science成為科技發(fā)展新引擎

今年的諾貝爾物理學(xué)獎(jiǎng)、化學(xué)獎(jiǎng)、經(jīng)濟(jì)學(xué)獎(jiǎng)都頒發(fā)給了AI 領(lǐng)域的科學(xué)家。劉慶峰表示，AI for Science帶來(lái)科研范式的根本變革，正在成為科技發(fā)展的新引擎。

訊飛星火持續(xù)為高校提供基礎(chǔ)科研提效服務(wù)。劉慶峰介紹，星火科研助手自去年底發(fā)布以來(lái)，已在中科院下屬116個(gè)院所使用。北京郵電大學(xué)EZCoding雛雁/大創(chuàng)團(tuán)隊(duì)基于訊飛星火大模型打造的編程教學(xué)應(yīng)用平臺(tái)“碼上”，目前已在全國(guó)332所院校開(kāi)通使用，學(xué)生主動(dòng)提問(wèn)率增加1倍，教師輔導(dǎo)工作減少80%。

劉慶峰提到，人工智能賦能科研工作的三個(gè)臺(tái)階：依托科研文獻(xiàn)助手和代碼助手提升基礎(chǔ)工作效率，基于深度神經(jīng)網(wǎng)絡(luò)對(duì)科學(xué)任務(wù)進(jìn)行精準(zhǔn)建模，以及借助認(rèn)知大模型學(xué)習(xí)領(lǐng)域知識(shí)并輔助設(shè)計(jì)科研實(shí)驗(yàn)方案。據(jù)悉，科大訊飛已在大模型+科研領(lǐng)域做了許多探索，如聯(lián)合中國(guó)科學(xué)技術(shù)大學(xué)劉海燕教授團(tuán)隊(duì)，成功設(shè)計(jì)了48個(gè)自然界不存在的全新蛋白質(zhì);聯(lián)合中科院動(dòng)物研究所李鑫團(tuán)隊(duì)，研究單細(xì)胞基因表達(dá)課題；聯(lián)合中科院等離子體物理研究所李建剛院士團(tuán)隊(duì)，研究托卡馬克等離子體控制。此外，科大訊飛還聯(lián)合中國(guó)科技大學(xué)研發(fā)“化學(xué)大模型”，聯(lián)合中科院大連化學(xué)物理研究所研發(fā)“化工大模型”。

“AI for Science決定了中國(guó)科技發(fā)展的速度，賦能科研是訊飛星火的重要使命”，劉慶峰說(shuō)。