国产av一二三区|日本不卡动作网站|黄色天天久久影片|99草成人免费在线视频|AV三级片成人电影在线|成年人aV不卡免费播放|日韩无码成人一级片视频|人人看人人玩开心色AV|人妻系列在线观看|亚洲av无码一区二区三区在线播放

網(wǎng)易首頁 > 網(wǎng)易號 > 正文 申請入駐

智譜放大招!實測GLM-4.6V,它也太會“看圖做事”了

0
分享至

這篇文章,由AI一鍵直出??

今天,智譜發(fā)布并開源了GLM-4.6V多模態(tài)模型,一個是向云端服務(wù)的106B基礎(chǔ)版,一個是面向本地部署的9B輕量版。

模型下載:

https://huggingface.co/collections/zai-org/glm-46v

API調(diào)用平臺:

https://www.bigmodel.cn

MCP調(diào)用入口:

https://docs.bigmodel.cn/cn/coding-plan/mcp/vision-mcp-server

開頭這篇文章,便是由GLM-4.6V-106B直接生成。

可以看到,GLM-4.6V除了在視覺理解上能夠“看懂”多模態(tài)內(nèi)容外,還具備工具調(diào)用能力(Function Call)能夠直接做“執(zhí)行”。

官方說,這是一個原生具備多模態(tài)工具調(diào)用能力的模型。比如,可以處理圖文混排、識圖購物、導(dǎo)購以及各種Agent場景的復(fù)雜視覺任務(wù)。

省流:感知→理解→執(zhí)行,都在一個推理鏈里完成,無需外部工程化。


一手實測

我知道,這么說,你可能還是沒懂。下面,我們來看點(diǎn)實際的。

打開Z.ai,選擇模型“GLM-4.6V”,根據(jù)任務(wù)需要選擇合適的工具,開啟“深度思考”,進(jìn)行體驗。


這里,簡單分享幾點(diǎn)技巧:

  • ①建議所有場景都開啟深度思考,除非是明確的簡單行為,比如OCR識別。

  • ②不需要把所有工具都勾選,建議根據(jù)自己的任務(wù)情況來選擇。比如coding任務(wù),它不太需要圖像處理、圖像搜索和購物搜索,那就把4個工具都關(guān)掉。

  • 如果不知道自己需要什么樣的工具,可以點(diǎn)下方的膠囊入口


  • 這里內(nèi)置了6個場景:識圖搜圖、圖文掃描、文檔解讀、視頻理解、商品比價和數(shù)理解題。

1)復(fù)刻網(wǎng)頁

我們先來復(fù)刻一個網(wǎng)頁,比如復(fù)刻抖音電腦版。

請給我這個網(wǎng)頁截圖的HTML Code,如果網(wǎng)頁包含圖片素材,一定要給我圖片,不要用Placeholder替代。


這是成品,跟抖音網(wǎng)頁版幾乎一模一樣。


復(fù)刻小紅書。


提示詞:復(fù)刻這個網(wǎng)頁。如果網(wǎng)頁包含圖片素材,請聯(lián)網(wǎng)搜索與內(nèi)容適配的圖片進(jìn)行替代,不要使用占位圖。

復(fù)刻OpenAI News。


提示詞:請給我這個網(wǎng)頁截圖的HTML Code,如果網(wǎng)頁包含圖片素材,一定要給我圖片,不要用Placeholder替代。

個人體驗來看,GLM-4.6V的前端能力離Gemini 3 Pro還差了那么一點(diǎn)。但話又說回來,又有誰的前端能力能比得過Gemini 3呢?

不同的是,GLM-4.6V的前端復(fù)刻支持多輪視覺交互修改,可以在生成的網(wǎng)頁截圖上框選區(qū)域進(jìn)行修改,比如“把這個按鈕向左移一點(diǎn),顏色改為橘紅色”。

案例來自官方視頻

2)文檔解讀+寫作

之前,很多模型一直解決不了的圖文同時輸出能力,GLM-4.6V這次做到了。

比如,我們拿一份Transformer論文給它,然后輸入提示詞:

根據(jù)附件論文,寫一篇圖文并茂的微信公眾號文章來介紹這篇論文,語言要通俗易懂、生動有趣,盡量讓小學(xué)生也能聽懂。使用圖文并茂的markdown格式輸出。

然后,就得到了一篇圖文并茂的公眾號文章。

(可上下滑動,查看全圖)

所有配圖都來自論文中的真實架構(gòu)圖和圖表,不是生圖,也不是聯(lián)網(wǎng)找圖。而是模型自己定位內(nèi)容所在的頁面和區(qū)域,然后調(diào)用工具進(jìn)行截圖和嵌入,輸出圖文并茂的文章。

從對信息的理解,到工具的調(diào)用,到內(nèi)容的生成,均由GLM-4.6V在同一推理鏈路內(nèi)完成。

在我見過的VLM模型中,GLM-4.6V應(yīng)該是第一個做到的,非常牛逼。

它的場景非常豐富,特別是對于我這樣還在堅持圖文創(chuàng)作的博主來說,非常受用。

比如,我們可以讓它對比論文。

提示詞:根據(jù)這兩篇論文的圖表,對比一下Transformer 和 ViT 模型的差異,并思考和闡述下一步改進(jìn) ViT 模型的思路。

(可上下滑動,查看全圖)

又比如,讓它直接搜索《瘋狂動物城2》,生成一篇圖文并茂的影評文章。

(可上下滑動,查看全圖)

3)商品比價

最近,為了更快的vibe working,特地買了一個麥克風(fēng)接電腦上,可以更快的口噴文章、口噴代碼需求。


正好,讓GLM-4.6V幫我比下價,查下大家的評價。

(可上下滑動,查看全圖)

這信息找的,還挺準(zhǔn)的。感覺,我以后都不用逛購物平臺了,直接問它就行。

4)識別疑難雜字

豆瓣上有個小組,叫「史上寫字最爛小組」,里面的字個個奇葩,但又個個真實。

畢竟,這世上能寫出好看、齊整字的人,本就鳳毛麟角。相反,那些寫出爛字、疑難雜字的人,才是更普遍的大多數(shù)。

比如,這位爺爺在ICU留下的字,就直接把我干沉默了。


沉默的原因在于,一是我也猜不出這是什么字,二是問了GLM-4.6V也不行,遺憾未能幫到這位朋友。

但這些字,對于GLM-4.6V來說,就小菜一碟了。

比如這個,如果我沒有背過“君不見”這幾個字,我還真不知道他在說什么。


發(fā)給GLM-4.6V,一下子把全文寫出來了。


看到這,我相信你可能也有和我一樣的疑問:是不是因為模型背過這首詩?所以能秒懂。

于是,我又換了張圖。說實話,我根本不懂他想表達(dá)什么。


發(fā)給GLM-4.6V后,這下終于懂了。


5)地圖推理

這是我11月去北京在大聰明的酒吧拍的。


問GLM-4.6V,輕松推導(dǎo)出是在北京中關(guān)村創(chuàng)業(yè)大街。


這是我10月去昆明拍的。


它也能輕松推理出是昆明老街,完全正確。


提示詞:你正在參加一場地圖推理游戲,附件的圖片是我11某個早晨在飛機(jī)上拍攝的,請盡可能地推導(dǎo)出圖片所在的位置,我要具體的、詳細(xì)的位置,比如某某路或者某某街區(qū)。

6)圖片反推

這是來自沃垠AI群里的一張圖片,用戶用NBP生成的,拿來上課非常好使。


我試著用GLM-4.6V反推了一下提示詞。


得到提示詞:

Traditional Chinese ink - wash style educational infographic titled "Water Journey: Chinese Vocabulary Memory Aid", illustrating the water radical (氵) through nature. Features a flowing river (江, Jiāng - River), river (河, Hé - River), lake (湖, Hú - Lake), ocean (海, Hǎi - Ocean), and swim (泳, Yǒng - Swim) with Chinese characters, pinyin, and English translations. Includes mountains, pine trees, waterfalls, clouds, small boats, and swimmers. Soft pastel color palette with beige background, blue water, earthy mountain tones. Composition shows water flow from river to lake to ocean, with arrows indicating direction. Detailed landscape with traditional Chinese artistic elements, suitable for language learning.

中文:傳統(tǒng)中國水墨風(fēng)格教育信息圖,標(biāo)題為“Water Journey: Chinese Vocabulary Memory Aid”(《水之旅:中文詞匯記憶輔助》),通過自然展示水部首(氵)。畫面包含流動的江(江,Jiāng - River)、河(河,Hé - River)、湖(湖,Hú - Lake)、海(海,Hǎi - Ocean)和游泳(泳,Yǒng - Swim),配有漢字、拼音和英文翻譯。包含山脈、松樹、瀑布、云朵、小船和游泳者。柔和的 pastel 色彩,米色背景,藍(lán)色水域,土色調(diào)的山脈。構(gòu)圖展示水流從河流到湖泊再到海洋,箭頭指示方向。細(xì)節(jié)豐富的景觀,具有傳統(tǒng)中國藝術(shù)元素,適合語言學(xué)習(xí)。

發(fā)到即夢上,沒想到直接就生成了類似的圖。


以后,用GLM-4.6V做反推真的太容易了。

7)視頻理解

我把GLM-4.6V官方介紹視頻里的多個功能,用3倍速剪在了一塊。

發(fā)給GLM-4.6V問:這支視頻講了什么?


GLM-4.6V的回答還是挺準(zhǔn)的,而且精確定位到了幀數(shù)。


從個人實測來看,GML-4.6V的工具調(diào)用能力(Function Call)非常出色,而且是原生就支持。

做到了「圖像即參數(shù),結(jié)果即上下文」。

雖然在一些能力上(比如寫作、前端)還達(dá)不到頂尖,這需要更強(qiáng)力的基模,但這一手工具調(diào)用能力就已經(jīng)是很多VLM不能比的了。

所以,這是一個天然適合做Agentic基座的模型,可以為真實業(yè)務(wù)場景賦能。

自GLM-4.6以來,我們看到,智譜正在開發(fā)者生態(tài)爆發(fā)相當(dāng)大的潛力。

今天,又一個強(qiáng)力VLM模型來襲,而且已經(jīng)加入智譜Coding Plan

而這,只是智譜開源周的Day 1。

說實話,有點(diǎn)期待接下來的幾天了。

特別聲明:以上內(nèi)容(如有圖片或視頻亦包括在內(nèi))為自媒體平臺“網(wǎng)易號”用戶上傳并發(fā)布,本平臺僅提供信息存儲服務(wù)。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相關(guān)推薦
熱點(diǎn)推薦
拼命的賀嬌龍與將關(guān)掉102家門店的西貝

拼命的賀嬌龍與將關(guān)掉102家門店的西貝

吳女士
2026-01-15 19:54:51
安徽一殯儀館處理逝者遺物時,竟在被子里發(fā)現(xiàn)41萬存款單……

安徽一殯儀館處理逝者遺物時,竟在被子里發(fā)現(xiàn)41萬存款單……

環(huán)球網(wǎng)資訊
2026-01-15 15:33:07
王健林預(yù)言成真!第3輪大漲來了?內(nèi)行人:2026年房價或超出想象

王健林預(yù)言成真!第3輪大漲來了?內(nèi)行人:2026年房價或超出想象

貓叔東山再起
2026-01-15 10:55:03
重慶合川呆呆爆火后續(xù)!滿屋堆成山的禮物全部化成整個村的溫暖

重慶合川呆呆爆火后續(xù)!滿屋堆成山的禮物全部化成整個村的溫暖

南方健哥
2026-01-15 15:15:05
馬克龍:首批法國士兵已抵達(dá)格陵蘭島

馬克龍:首批法國士兵已抵達(dá)格陵蘭島

界面新聞
2026-01-15 20:32:24
植入電極戒毒后,一起醫(yī)療試驗引發(fā)的“副作用”爭議

植入電極戒毒后,一起醫(yī)療試驗引發(fā)的“副作用”爭議

新京報
2026-01-15 10:21:12
換帥如換刀!從6戰(zhàn)5負(fù)到9戰(zhàn)8勝,只因換了一個教練 球迷:CBA奇跡

換帥如換刀!從6戰(zhàn)5負(fù)到9戰(zhàn)8勝,只因換了一個教練 球迷:CBA奇跡

體育哲人
2026-01-15 09:03:54
大冷!里勒40分北控輸9連敗江蘇 廖三寧22+7龐崢麟12助攻創(chuàng)新高

大冷!里勒40分北控輸9連敗江蘇 廖三寧22+7龐崢麟12助攻創(chuàng)新高

醉臥浮生
2026-01-15 21:27:55
賀嬌龍遺體已回昭蘇!生前最后畫面曝光,母親曾斥"再騎馬別回家"

賀嬌龍遺體已回昭蘇!生前最后畫面曝光,母親曾斥"再騎馬別回家"

烏娛子醬
2026-01-15 14:53:06
機(jī)場偶遇宋佳,姐真的是老了,面部松弛下垂嚴(yán)重,歲月是把殺豬刀

機(jī)場偶遇宋佳,姐真的是老了,面部松弛下垂嚴(yán)重,歲月是把殺豬刀

溫讀史
2026-01-15 11:48:44
網(wǎng)傳伊朗最高領(lǐng)袖哈梅內(nèi)伊之子,正向迪拜申請政治庇護(hù)

網(wǎng)傳伊朗最高領(lǐng)袖哈梅內(nèi)伊之子,正向迪拜申請政治庇護(hù)

爆角追蹤
2026-01-15 16:56:57
媒體:多國空軍排隊購買梟龍戰(zhàn)機(jī)

媒體:多國空軍排隊購買梟龍戰(zhàn)機(jī)

財聯(lián)社
2026-01-14 17:33:05
一夜間南海12島礁合體,5800億噸海水被吸走,東大這盤棋下得高明

一夜間南海12島礁合體,5800億噸海水被吸走,東大這盤棋下得高明

趣生活
2026-01-15 19:50:29
聶衛(wèi)平去世僅1天,惡心的一幕發(fā)生,私生活被扒,郎平也受牽連

聶衛(wèi)平去世僅1天,惡心的一幕發(fā)生,私生活被扒,郎平也受牽連

查爾菲的筆記
2026-01-15 19:26:43
出大事了!德印80億搞大事_技術(shù)全轉(zhuǎn)讓,俄羅斯急瘋了!

出大事了!德印80億搞大事_技術(shù)全轉(zhuǎn)讓,俄羅斯急瘋了!

興史興談
2026-01-15 03:32:23
已確認(rèn)!時隔7年著名笑星2026春晚回歸!

已確認(rèn)!時隔7年著名笑星2026春晚回歸!

家在棲霞
2026-01-15 09:10:46
人民日報點(diǎn)名批評,這類主播將被嚴(yán)厲打擊,亂象已經(jīng)存在多年

人民日報點(diǎn)名批評,這類主播將被嚴(yán)厲打擊,亂象已經(jīng)存在多年

新游戲大妹子
2026-01-14 13:07:41
北京大興機(jī)場海關(guān)查獲600余克黃金 價格約為59萬元人民幣 黃金及其制品屬于國家限制進(jìn)出境物品 該案件已移交緝私部門處理

北京大興機(jī)場海關(guān)查獲600余克黃金 價格約為59萬元人民幣 黃金及其制品屬于國家限制進(jìn)出境物品 該案件已移交緝私部門處理

閃電新聞
2026-01-15 16:19:16
扛造小鋼炮!新機(jī)官宣:1月16日,正式全面發(fā)售!

扛造小鋼炮!新機(jī)官宣:1月16日,正式全面發(fā)售!

科技堡壘
2026-01-14 11:51:36
8連勝現(xiàn)存最長!山東三外援72分大勝寧波 辛普森31+7+10

8連勝現(xiàn)存最長!山東三外援72分大勝寧波 辛普森31+7+10

醉臥浮生
2026-01-15 21:36:05
2026-01-16 05:31:00
沃垠AI incentive-icons
沃垠AI
努力分享一些有用、有趣的AI干貨
22文章數(shù) 0關(guān)注度
往期回顧 全部

科技要聞

阿里最狠的一次“自我革命”

頭條要聞

美突襲委內(nèi)瑞拉動用神秘武器:委士兵跪倒在地吐血

頭條要聞

美突襲委內(nèi)瑞拉動用神秘武器:委士兵跪倒在地吐血

體育要聞

聶衛(wèi)平:黑白棋盤上的凡人棋圣

娛樂要聞

92歲陶玉玲去世,馮遠(yuǎn)征曹可凡悼念

財經(jīng)要聞

央行再次結(jié)構(gòu)性降息0.25個百分點(diǎn)

汽車要聞

吉利帝豪/繽越推冠軍一口價 起售價4.88萬

態(tài)度原創(chuàng)

游戲
旅游
房產(chǎn)
時尚
本地

任天堂股價暴跌!為何索尼未收影響?專家分析來了

旅游要聞

龍慶峽冰燈節(jié)“上新”

房產(chǎn)要聞

突發(fā)!商業(yè)用房購房貸款最低首付比例下調(diào)至30%

年度最扎心電影,看得中年男女坐立難安

本地新聞

云游內(nèi)蒙|黃沙與碧波撞色,烏海天生會“混搭”

無障礙瀏覽 進(jìn)入關(guān)懷版