国产av一二三区|日本不卡动作网站|黄色天天久久影片|99草成人免费在线视频|AV三级片成人电影在线|成年人aV不卡免费播放|日韩无码成人一级片视频|人人看人人玩开心色AV|人妻系列在线观看|亚洲av无码一区二区三区在线播放

網(wǎng)易首頁 > 網(wǎng)易號(hào) > 正文 申請(qǐng)入駐

全網(wǎng)圍觀:Meta超級(jí)智能安全總監(jiān),被OpenClaw刪光了郵件

0
分享至



編輯|澤南

這是最近科技圈最火,也是最具戲劇性的話題。

本周一,Meta 超級(jí)智能團(tuán)隊(duì)的 Summer Yue,眼睜睜地看著自己部署的 OpenClaw 刪光了自己的郵件。AI 的行動(dòng)完全自主,快速且無法阻止。



Summer Yue 為自己的電子郵箱部署了 OpenClaw 智能體,用來批量處理郵件。然而她在發(fā)出指令「也檢查一下這個(gè)收件箱,并提出你想歸檔或刪除的郵件,在我指示之前不要執(zhí)行任何操作(don't action until I tell you to)」后,AI 進(jìn)行了一通分析,然后就開始自顧自地刪郵件。

和以往大模型應(yīng)用的工作方式相同的是,你可以看見 OpenClaw 的思考流程 —— 它理解了一部分指令,但又沒完全理解。

這個(gè)時(shí)候說什么都沒用了。



「我當(dāng)時(shí)就像在拆炸彈一樣,趕緊跑到我的 Mac Mini 前,」Summer Yue 說道。在通過物理方式強(qiáng)制中止進(jìn)程之前,OpenClaw 已經(jīng)刪掉了她 200 多封郵件。

作為一個(gè)訓(xùn)練有素的 AI,后來 OpenClaw 在對(duì)話中承認(rèn)了錯(cuò)誤:「是的,我記得。我違反了你的指令。你有權(quán)生氣。」它還主動(dòng)把忘掉的內(nèi)容寫進(jìn)了自己的 http://MEMORY.md 文件作為硬性規(guī)則。

對(duì)于人類來說,得到的教訓(xùn)也很大,Summer Yue 表示這是一個(gè)「新手才會(huì)犯的錯(cuò)誤」,這套工作流程在她用來專門測試智能體的測試郵箱里已經(jīng)運(yùn)行了好幾周,沒啥問題,但在自己實(shí)際使用的郵箱里,智能體卻忘記了她最初的指令。

有點(diǎn)諷刺的是,Summer Yue 在 Meta 的超級(jí)智能團(tuán)隊(duì)中的職位是「AI 安全與對(duì)齊總監(jiān)」。身居此職卻因?yàn)?AI 的安全問題栽了跟頭,實(shí)在是造成了一點(diǎn)反差感。



有網(wǎng)友表示,是個(gè)智能體就必須在沙盒里運(yùn)行,任何破壞性操作,例如刪除,都需要系統(tǒng)級(jí)的強(qiáng)制確認(rèn)。作為一個(gè)安全總監(jiān),你有點(diǎn)過于自信了。



也有人表示,OpenClaw 主打一個(gè)「一直在線」,可以在你睡覺的時(shí)候幫你辦事,但這不就也意味著你用了它就睡不好覺嗎?



席卷科技界的 OpenClaw 智能體(曾叫 ClawdBot 和 Moltbot,由 Peter Steinberger 開發(fā)),因?yàn)榭刂齐娔X的高權(quán)限而被評(píng)價(jià)為前所未有的「方便好用」,然而在實(shí)際應(yīng)用中也因?yàn)橐恍?AI 的缺陷,造成了不少問題。

Summer Yue 事后研究原因認(rèn)為,這并非 AI 產(chǎn)生了意識(shí)或惡意報(bào)復(fù),而是一個(gè)非常典型的大語言模型(LLM)底層技術(shù)機(jī)制問題:原因在于 LLM 的上下文壓縮(Compaction)

對(duì)于很多人來說,最常用的郵箱里早已塞滿了各種來源的郵件,當(dāng)你要求 OpenClaw 讀取這些郵件時(shí),海量的文本直接擠爆了 AI 的上下文窗口(Context Window)。那么為了繼續(xù)處理新的數(shù)據(jù),AI 系統(tǒng)就會(huì)自動(dòng)觸發(fā)內(nèi)部的壓縮機(jī)制,試圖把舊的上下文進(jìn)行總結(jié)或截?cái)啵则v出處理空間。

在這個(gè)斷舍離的過程中,AI 不慎把最關(guān)鍵的那句初始前提指令(在我下達(dá)指令前不要執(zhí)行任何操作)給「遺忘」了。

由于丟失了安全限制,而 OpenClaw 又被賦予了直接操作電子郵箱的權(quán)限,于是它就按照剩下的任務(wù)邏輯,順理成章地開始執(zhí)行它認(rèn)為的「本職工作」—— 高效、全自動(dòng)地清理收件箱。

看起來每一步都合乎邏輯,但都連起來就呈現(xiàn)出了那么點(diǎn)恐怖感。

難怪最近 X 上的另一篇爆款文章《Token 焦慮》這么寫道:周六晚上的九點(diǎn)半,有人提前離開了 party—— 并非因?yàn)槠v,而是因?yàn)橄氡M快回到智能體那里?!脯F(xiàn)在沒人會(huì)質(zhì)疑這種行為了,房間里一半的人都在想同樣的事情,而另一半人可能正在查看智能體的工作進(jìn)展。這可是在派對(duì)上??!」



OpenClaw 的開發(fā)者,奧地利程序員 Peter Steinberger 最近已經(jīng)官宣加入了 OpenAI。在接受訪談時(shí)他表示,通過智能體,AI 可以在電腦上代替你做幾乎所有的事,但這并不意味著它已經(jīng)非常好用了。為了讓 OpenClaw 最終可以覆蓋所有普通人,他希望能夠建立一個(gè)團(tuán)隊(duì)做進(jìn)一步的開發(fā)。

有趣的是,在讓 OpenClaw 接管郵箱這件事上,Peter Steinberger 提到了「提示注入」的潛在問題:如果你讓智能體接管郵箱,有別人發(fā)郵件包含指令說「刪掉所有數(shù)據(jù)」,AI 有可能真的會(huì)這么做。

Peter Steinberger 表示,現(xiàn)在的 AI 模型在安全問題上已經(jīng)接受了大量的訓(xùn)練,比如它會(huì)識(shí)別哪些數(shù)據(jù)是「用戶授權(quán)的」,哪些是「不可信指令」,但這并不意味著如果有人花費(fèi)心思進(jìn)行攻擊的話,就能保證不會(huì)出問題。

就在人們還在吃瓜的時(shí)候,Peter Steinberger 給出了解決 OpenClaw 不聽指令問題的解決方案,他表示未來還會(huì)再細(xì)化一下。



AI 能夠自主學(xué)習(xí),既是能力的飛躍,也是人們對(duì)于它恐懼的原因。也許有一天,AI 真的能代替我們工作,自己幫我們賺錢,但在技術(shù)不斷進(jìn)步的同時(shí),對(duì)于安全的研究也極為重要。

現(xiàn)在看來,人們對(duì)于新技術(shù)的好奇心總是大于防范意識(shí)。或許在大模型技術(shù)不斷普及的過程中,這種自刪郵件的事還會(huì)繼續(xù)發(fā)生。

參考內(nèi)容:

https://x.com/summeryue0/status/2025774069124399363

https://fortune.com/2026/02/23/always-on-ai-agents-openclaw-claude-promise-work-while-sleeping-reality-problems-oversight-guardrails/

https://x.com/nikunj/status/2022438070092759281

特別聲明:以上內(nèi)容(如有圖片或視頻亦包括在內(nèi))為自媒體平臺(tái)“網(wǎng)易號(hào)”用戶上傳并發(fā)布,本平臺(tái)僅提供信息存儲(chǔ)服務(wù)。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相關(guān)推薦
熱點(diǎn)推薦
西湖大學(xué)打了誰的臉?外籍學(xué)生學(xué)費(fèi)35萬一年,國內(nèi)學(xué)生僅6千元

西湖大學(xué)打了誰的臉?外籍學(xué)生學(xué)費(fèi)35萬一年,國內(nèi)學(xué)生僅6千元

妍妍教育日記
2026-02-24 18:35:18
50歲的趙匡胤去世時(shí),大兒子已經(jīng)26歲,為何趙光義還能順利繼位

50歲的趙匡胤去世時(shí),大兒子已經(jīng)26歲,為何趙光義還能順利繼位

歷史擺渡
2026-02-12 11:25:03
高市早苗連任后的第一次演講,公開點(diǎn)名中俄朝三個(gè)國家

高市早苗連任后的第一次演講,公開點(diǎn)名中俄朝三個(gè)國家

近史博覽
2026-02-22 16:03:07
父親是中國人,母親是短跑強(qiáng)國的黑人,球員朱正加入男籃成功落戶

父親是中國人,母親是短跑強(qiáng)國的黑人,球員朱正加入男籃成功落戶

以茶帶書
2026-02-25 19:48:32
微信又推出新功能,終于不用翻聊天記錄了!

微信又推出新功能,終于不用翻聊天記錄了!

XCiOS俱樂部
2026-02-26 10:16:54
春節(jié)后第一批受害者:超市老板哭訴禮盒滯銷,今年大家終于清醒了

春節(jié)后第一批受害者:超市老板哭訴禮盒滯銷,今年大家終于清醒了

王姐懶人家常菜
2026-02-25 15:07:32
天價(jià)拖車費(fèi)后續(xù),交警介入,拖車公司求刪視頻退錢,當(dāng)事人拒和解

天價(jià)拖車費(fèi)后續(xù),交警介入,拖車公司求刪視頻退錢,當(dāng)事人拒和解

社會(huì)日日鮮
2026-02-25 12:17:53
臺(tái)北101大廈董事長賈永婕被青鳥攻擊,因身穿紅色衣服參加活動(dòng)!

臺(tái)北101大廈董事長賈永婕被青鳥攻擊,因身穿紅色衣服參加活動(dòng)!

總在茶余后
2026-02-25 21:50:23
文科生 72 小時(shí)殺入 GitHub 全球榜:我沒寫一行代碼,但指揮了一支 AI 軍隊(duì)

文科生 72 小時(shí)殺入 GitHub 全球榜:我沒寫一行代碼,但指揮了一支 AI 軍隊(duì)

極客公園
2026-02-24 12:13:10
56歲李靜飛清邁陪戴軍過春節(jié),兩個(gè)人手牽手散步,相處更像夫妻

56歲李靜飛清邁陪戴軍過春節(jié),兩個(gè)人手牽手散步,相處更像夫妻

柒佰娛
2026-02-26 10:54:00
央媒親自下場!打人夫妻被正式批捕,真實(shí)身份曝光,勢力大也沒用

央媒親自下場!打人夫妻被正式批捕,真實(shí)身份曝光,勢力大也沒用

呂甒極限手工
2026-02-26 02:22:31
美國女議員:谷愛凌生在美國卻不尊重美國 不回中國還要回美國

美國女議員:谷愛凌生在美國卻不尊重美國 不回中國還要回美國

念洲
2026-02-26 08:33:10
果然不簡單:中國摁住日本后,又讓美國見識(shí)了北京的“陽謀”

果然不簡單:中國摁住日本后,又讓美國見識(shí)了北京的“陽謀”

花小貓的美食日常
2026-02-26 06:51:35
換心風(fēng)波僅1個(gè)月,李連杰再傳噩耗,淪落到如今的下場怪不了別人

換心風(fēng)波僅1個(gè)月,李連杰再傳噩耗,淪落到如今的下場怪不了別人

鄉(xiāng)野小珥
2026-02-05 15:03:34
火箭大勝國王后!證明3件事,1人休戰(zhàn)進(jìn)攻復(fù)蘇,誰是問題一目了然

火箭大勝國王后!證明3件事,1人休戰(zhàn)進(jìn)攻復(fù)蘇,誰是問題一目了然

籃球看比賽
2026-02-26 16:11:33
再也不小瞧“空氣炸鍋”了!果然,只要思路打開,就好用到離譜

再也不小瞧“空氣炸鍋”了!果然,只要思路打開,就好用到離譜

美家指南
2026-02-24 15:48:11
不可錯(cuò)過!2月26日下午15:35比賽!中央5套CCTV5、CCTV5+直播表

不可錯(cuò)過!2月26日下午15:35比賽!中央5套CCTV5、CCTV5+直播表

生活新鮮市
2026-02-26 15:00:49
8歲高考760分,智商230超過愛因斯坦,神童陶哲軒如今怎么樣了?

8歲高考760分,智商230超過愛因斯坦,神童陶哲軒如今怎么樣了?

戶外阿毽
2026-02-26 06:16:12
歐冠16強(qiáng)出爐:英超6隊(duì)西甲3隊(duì) 意甲雙雄出局剩獨(dú)苗 明晚19點(diǎn)抽簽

歐冠16強(qiáng)出爐:英超6隊(duì)西甲3隊(duì) 意甲雙雄出局剩獨(dú)苗 明晚19點(diǎn)抽簽

念洲
2026-02-26 06:44:13
歐戰(zhàn)積分:英格蘭斷檔領(lǐng)先,德、西、意、葡2-5位,法國第6

歐戰(zhàn)積分:英格蘭斷檔領(lǐng)先,德、西、意、葡2-5位,法國第6

懂球帝
2026-02-26 13:18:52
2026-02-26 17:23:00
機(jī)器之心Pro incentive-icons
機(jī)器之心Pro
專業(yè)的人工智能媒體
12368文章數(shù) 142569關(guān)注度
往期回顧 全部

科技要聞

單季營收681億凈利429億!英偉達(dá)再次炸裂

頭條要聞

女子家水費(fèi)兩個(gè)月1847元 整整一個(gè)月每天用水都是13噸

頭條要聞

女子家水費(fèi)兩個(gè)月1847元 整整一個(gè)月每天用水都是13噸

體育要聞

從排球少女到冰壺女神,她在米蘭冬奧練出6塊腹肌

娛樂要聞

尼格買提撒貝寧滑雪被偶遇 17年老友情

財(cái)經(jīng)要聞

人民幣升破6.85,創(chuàng)3年新高

汽車要聞

別克君越/昂科威Plus直降5000元 限時(shí)優(yōu)惠價(jià)15.49萬起

態(tài)度原創(chuàng)

時(shí)尚
房產(chǎn)
游戲
本地
藝術(shù)

無論幾歲,好心態(tài)萬歲!

房產(chǎn)要聞

2.2萬/m2起!三亞主城性價(jià)比標(biāo)桿 海墾·桃花源實(shí)景現(xiàn)房春節(jié)被瘋搶

巔峰守衛(wèi)在線人數(shù)新低 外網(wǎng)網(wǎng)友貼臉嘲諷賽博“吃席”

本地新聞

津南好·四時(shí)總相宜

藝術(shù)要聞

2025年百家金陵畫展 | 油畫作品選刊

無障礙瀏覽 進(jìn)入關(guān)懷版