最近字節(jié)開(kāi)源了自動(dòng)化桌面辦公的項(xiàng)目開(kāi)源，這就是現(xiàn)在的UI-Tars-desktop，通過(guò)這個(gè)系統(tǒng)就可以實(shí)現(xiàn)桌面自動(dòng)化辦公，可以說(shuō)這就是“豆包電腦”

如下是系統(tǒng)截圖，通過(guò)視覺(jué)可視化UI完成解讀UI來(lái)驅(qū)動(dòng)系統(tǒng)自動(dòng)化操作

目前這個(gè)產(chǎn)品到底使用如何，簡(jiǎn)單來(lái)說(shuō)就是通過(guò)對(duì)話完成任務(wù)命令，就可以完成各類瀏覽器、與應(yīng)用程序打開(kāi)。

目前系統(tǒng)支持agent形式的CLI調(diào)用以及普通桌面形式使用，前者是可以將以及客戶端2種方式，第一種是支持Web Ui或者CLI的形式，允許開(kāi)發(fā)者進(jìn)行調(diào)用與兼容，第二周則是原生桌面GUI，只能通過(guò)遠(yuǎn)程桌面完成自動(dòng)化操作。

也就是官方系統(tǒng)了自動(dòng)化的平臺(tái)調(diào)用形式，如下是系統(tǒng)的演示，15秒時(shí)間完成了對(duì)比酒店信息與價(jià)格。

目前支持多個(gè)工具：從CLI命令行到可視化桌面窗口

現(xiàn)在最新版本在11月份更新了之后，支持結(jié)構(gòu)化輸出，查看最后的結(jié)果，并且適合系統(tǒng)批量處理。

能夠支持自動(dòng)debug相關(guān)任務(wù)流程命令

可以查詢到AI的溝通記錄，以及了解他為什么會(huì)這么干，以及了解過(guò)去的過(guò)程與步驟，從而優(yōu)化提示詞與界面，

從豆包手機(jī)再到“豆包”電腦，接下來(lái)白領(lǐng)會(huì)成為第一批淘汰的人

在最近大火的2025年底馬斯克的2個(gè)半小時(shí)訪談里，就提到在2026年預(yù)計(jì)Grok就會(huì)達(dá)到AGI，同時(shí)第一批被淘汰的人就是用鼠標(biāo)和鍵盤(pán)的這群白領(lǐng)。

這些人將首先最容易被AI替代，因?yàn)闆](méi)有涉及到物理世界，使用的數(shù)據(jù)都是數(shù)據(jù)信號(hào)，沒(méi)有物理原理，而真實(shí)世界會(huì)有物理世界，這些會(huì)逐步被空間智能與空間感知替代。

帶著團(tuán)隊(duì)打通vision Pro與AndroidXR 以及空間計(jì)算與PC、手機(jī)

最近之所以發(fā)現(xiàn)這個(gè)項(xiàng)目，是因?yàn)槲規(guī)е鴪F(tuán)隊(duì)正在打破空間計(jì)算與PC電腦的隔閡，要是使用vision Pro的同學(xué)應(yīng)該知道，我們現(xiàn)在都只能夠投屏PC或手機(jī)，所以使用vision Pro總是感覺(jué)是割裂的，就是無(wú)法和自己的PC電腦進(jìn)行交互，雖然你知道都是數(shù)字化的屏幕，這就導(dǎo)致體驗(yàn)是割裂的。

但是比較遺憾的，現(xiàn)在vision Pro還沒(méi)有提供眼球數(shù)據(jù)，所以開(kāi)發(fā)者不能夠獲取到精細(xì)化的選中，而只有AndroidXR提供了眼球數(shù)據(jù)。

所以后續(xù)這類豆包手機(jī)、電腦都會(huì)成為大大提升人類與系統(tǒng)交互的工具，就不需要每一次點(diǎn)擊鼠標(biāo)或鼠標(biāo)鍵盤(pán)打字了，將其通過(guò)agent幫忙進(jìn)行輸入

另外相關(guān)開(kāi)源項(xiàng)目的地址已經(jīng)放在知識(shí)星球了，如果有需要可以在星期查看，今天的分享就到這里。

“關(guān)注我，一個(gè)產(chǎn)品經(jīng)理的創(chuàng)業(yè)故事”

每日案例拆解庫(kù)，今天的開(kāi)源產(chǎn)品與APP拆解在這兒

我創(chuàng)建的產(chǎn)品設(shè)計(jì)打卡社群，加入后365天，每天體驗(yàn)一款A(yù)PP。提升產(chǎn)品設(shè)計(jì)能力，同時(shí)有1300份體驗(yàn)報(bào)告幫助你找到競(jìng)品

在這里你可以隨時(shí)查詢到你想找的各類競(jìng)品行業(yè)APP，無(wú)須自己親自下載就可以馬上得到APP的一手產(chǎn)品優(yōu)化、交互設(shè)計(jì)、功能描述信息。

從優(yōu)化&建議、商業(yè)模式、運(yùn)營(yíng)、功能描述、交互設(shè)計(jì)、產(chǎn)品定位至少6個(gè)維度，體驗(yàn)一款應(yīng)用。

平均1天1塊錢，掃碼購(gòu)買即可加入

連續(xù)體驗(yàn)48款應(yīng)用，通過(guò)后原路退回

報(bào)名后添加星球助理

PMTalk123