2026.05.01

本文字?jǐn)?shù)：1351，閱讀時(shí)長(zhǎng)大約2分鐘

作者 |第一財(cái)經(jīng) 劉曉潔

DeepSeek終于能“看見(jiàn)”了。前兩天，DeepSeek偷偷開啟了多模態(tài)能力的灰度測(cè)試，部分用戶打開DeepSeek首頁(yè)會(huì)發(fā)現(xiàn)，界面多了一個(gè)“識(shí)圖模式”的入口。上傳圖片后，DeepSeek能像人一樣理解畫面了。

DeepSeek多模態(tài)團(tuán)隊(duì)負(fù)責(zé)人陳小康在4月29日發(fā)文稱，“現(xiàn)在，我們能看見(jiàn)你了。”這是DeepSeek的聊天產(chǎn)品第一次接入多模態(tài)。

就在4月30日，DeepSeek又發(fā)布了一篇關(guān)于多模態(tài)技術(shù)報(bào)告《Thinking with Visaul Primitives》（《用視覺(jué)原語(yǔ)思考》），闡釋了這次上新的多模態(tài)技術(shù)背后的細(xì)節(jié)。

在五一節(jié)假日前一天發(fā)布重磅論文，“這很DeepSeek”。但很快大家發(fā)現(xiàn)，官方連夜刪除了多模態(tài)倉(cāng)庫(kù)和論文原文，5月1日打開Github界面已經(jīng)是“404”狀態(tài)。

關(guān)于刪除原因官方并沒(méi)有特別說(shuō)明，不過(guò)有猜測(cè)不是內(nèi)容問(wèn)題，而是信息透露太多。

這次的論文說(shuō)了些啥？從行業(yè)反饋來(lái)看，論文符合DeepSeek扎實(shí)且務(wù)實(shí)的風(fēng)格，同樣在通過(guò)工程能力降低成本，采用了新的范式，也意味著，DeepSeek開始在視覺(jué)模型上發(fā)力了。

具體來(lái)看，DeepSeek的論文指出，目前的多模態(tài)模型在復(fù)雜任務(wù)上崩潰，不是因?yàn)榭床灰?jiàn)（感知鴻溝），而在于“指不準(zhǔn)”（引用鴻溝）。

自然語(yǔ)言天然具有模糊性。當(dāng)用戶要求模型處理復(fù)雜的空間布局時(shí)，僅靠文字描述很容易產(chǎn)生歧義。就像數(shù)一堆散落的硬幣，如果不用手指逐個(gè)按著確認(rèn)，人類也很容易數(shù)錯(cuò)或數(shù)重。

DeepSeek的解法是給模型配上一只“手指”。通過(guò)引入“視覺(jué)原語(yǔ)”（Visual Primitives）框架，模型將點(diǎn)、邊界框等空間標(biāo)記提升為最小思維單元。這意味著模型在推理時(shí)，能夠一邊“想”一邊“指”，將抽象的語(yǔ)言邏輯指向到具體空間坐標(biāo)。

這一靈感借鑒了人類的認(rèn)知。論文提及，人類走迷宮或數(shù)密集物體時(shí)，會(huì)用手指這類指示性指向來(lái)降低認(rèn)知負(fù)荷、維持邏輯一致性。通過(guò)將視覺(jué)原語(yǔ)嵌入思考，模型可以模擬人類這種“指向-推理”的協(xié)同。

這一模型基于DeepSeek-V4-Flash（總參數(shù)2840億）構(gòu)建。DeepSeek的大量實(shí)驗(yàn)表明，該方法在推理精度上實(shí)現(xiàn)顯著突破，在空間推理、視覺(jué)問(wèn)答等挑戰(zhàn)性任務(wù)上，性能持平或超越 GPT、Claude、Gemini 最新版本。

DeepSeek的研究證明：多模態(tài)智能的未來(lái)，不只是 “看見(jiàn)更多像素”，而是構(gòu)建語(yǔ)言與視覺(jué)之間精準(zhǔn)、無(wú)歧義的指代橋梁。

值得一提的是，DeepSeek在4月24日發(fā)布了V4系列旗艦?zāi)Ｐ�，這次發(fā)布并沒(méi)有涉及傳言已久的多模態(tài)。官方當(dāng)時(shí)對(duì)V4的定義是：支持百萬(wàn)字超長(zhǎng)上下文，在 Agent（智能體）能力、世界知識(shí)和推理性能上均實(shí)現(xiàn)國(guó)內(nèi)與開源領(lǐng)域的領(lǐng)先。

多模態(tài)已經(jīng)成為當(dāng)前大模型更新的一個(gè)重要方向，而DeepSeek在這一方面卻遲遲未跟上，這也被認(rèn)為是DeepSeek能力上的一大短板。也有傳言稱，DeepSeek暫緩多模態(tài)生成的訓(xùn)練策略，主要源于算力和現(xiàn)金的掣肘，在融資后，或許這一方向的訓(xùn)練會(huì)更加順利。

微信編輯| 蘇小

：bianjibu@yicai.com

：business@yicai.com