在機(jī)器人領(lǐng)域，實(shí)驗(yàn)室的精選視頻與現(xiàn)實(shí)應(yīng)用的笨拙表現(xiàn)之間一直存在巨大鴻溝。長期以來，行業(yè)習(xí)慣于將失敗歸咎于硬件，但Physical Intelligence (PI)團(tuán)隊(duì)卻提出了一個(gè)極具挑戰(zhàn)性的觀點(diǎn)：智能，才是機(jī)器人普及的唯一瓶頸。

2026年初，PI 團(tuán)隊(duì)發(fā)布了通用機(jī)器人模型 π*0.6。本期對話邀請到了公司核心成員Karol Hausman與Tobi Springenberg，深入探討他們?nèi)绾瓮ㄟ^端到端學(xué)習(xí)與真實(shí)世界強(qiáng)化學(xué)習(xí)，試圖打破機(jī)器人學(xué)的舊范式。

訪談中，兩位專家針對行業(yè)痛點(diǎn)提出了三項(xiàng)核心主張：

• 模塊化是進(jìn)步的枷鎖：過去幾十年將機(jī)器人拆解為感知、規(guī)劃、控制的“分治法”從底層就錯(cuò)了。這種架構(gòu)導(dǎo)致模塊間的信息流失嚴(yán)重，而端到端的視覺語言動(dòng)作模型才是通往真智能的唯一路徑。

• 告別仿真環(huán)境的溫室陷阱：當(dāng)同行還在模擬器里跑數(shù)據(jù)時(shí)，PI 堅(jiān)持真實(shí)世界強(qiáng)化學(xué)習(xí)。他們認(rèn)為模擬器永遠(yuǎn)無法復(fù)現(xiàn)紙板粘連或咖啡粉受潮這種長尾故障，只有讓機(jī)器人在現(xiàn)實(shí)中瘋狂“交學(xué)費(fèi)”，才能練出真正的可靠性。

• 硬件早已不是借口：PI 團(tuán)隊(duì)認(rèn)為，十年前的機(jī)器人硬件就足以打掃房間。研發(fā)重心應(yīng)從堆硬件轉(zhuǎn)向磨智能。一旦智能瓶頸突破，現(xiàn)有的簡單夾具也能完成切菜、烹飪等復(fù)雜家務(wù)。

• 部署即數(shù)據(jù)，數(shù)據(jù)即一切：由于互聯(lián)網(wǎng)缺乏現(xiàn)成的機(jī)器人動(dòng)作數(shù)據(jù)，PI 的策略是直接部署：通過機(jī)器人實(shí)地工作收集海量真實(shí)經(jīng)驗(yàn)，形成“部署→數(shù)據(jù)→優(yōu)化→更廣部署”的正向循環(huán)，最終構(gòu)建出能跨領(lǐng)域泛化的“物理大模型”。

在 Physical Intelligence 的愿景中，我們正處于機(jī)器人從特定工具向通用物種”轉(zhuǎn)變的前夜。以下訪談實(shí)錄，帶你走進(jìn)物理智能的最前沿。

圖片來源：Sequoia Capital

Sonya Huang：在本期節(jié)目中，我們邀請到了Physical Intelligence公司的Karol和Tobi。該公司專注于構(gòu)建機(jī)器人基礎(chǔ)模型。Karol和Tobi將解釋，為何傳統(tǒng)上將機(jī)器人技術(shù)拆解為感知、規(guī)劃和控制的方法存在根本性錯(cuò)誤，以及基于強(qiáng)化學(xué)習(xí)的端到端學(xué)習(xí)如何最終實(shí)現(xiàn)技術(shù)落地。你將聽到他們?nèi)绾螌?shí)現(xiàn)機(jī)器人在真實(shí)場景中的穩(wěn)定表現(xiàn)——例如讓機(jī)器人連續(xù)13小時(shí)制作咖啡，這些模型如何在截然不同的任務(wù)中實(shí)現(xiàn)泛化（從手術(shù)機(jī)器人到無人機(jī)飛行），而其中的原理我們尚未完全掌握。我們還將探討π*0.6背后的技術(shù)洞察，這是Physical Intelligence最新推出的模型，能夠通過強(qiáng)化學(xué)習(xí)從經(jīng)驗(yàn)中持續(xù)學(xué)習(xí)。敬請收聽。Karol、Tobi，非常感謝你們今天的到來。

Karol Hausman/Tobi Springenberg：感謝邀請。

Sonya Huang：很期待與你們探討物理智能、通用機(jī)器人等相關(guān)話題。在深入交流前，能否先向觀眾簡要介紹一下物理智能的定義以及你們追求的使命？

Karol Hausman：好的。Physical Intelligence的核心是構(gòu)建機(jī)器人基礎(chǔ)模型。理論上，這類模型應(yīng)能讓任何機(jī)器人完成任何任務(wù)。在過去一年半左右的時(shí)間里，我們已搭建起支撐模型規(guī)?；瘧?yīng)用的核心組件。我們的研究表明，這些模型能夠控制多種形態(tài)、不同類型的機(jī)器人，并且具備泛化能力——可適配全新環(huán)境，我們也已明確其泛化所需的條件。

我們剛剛發(fā)布的π*0.6版本（后續(xù)會(huì)詳細(xì)介紹），其性能已達(dá)到可部署水平。這對我們而言意義重大：一方面，我們希望這項(xiàng)技術(shù)能真正落地到現(xiàn)實(shí)世界；另一方面，由于互聯(lián)網(wǎng)上缺乏現(xiàn)成的機(jī)器人動(dòng)作數(shù)據(jù)，我們必須自行構(gòu)建數(shù)據(jù)集。因此，我們聚焦于物理智能領(lǐng)域的核心挑戰(zhàn)，致力于打造機(jī)器人基礎(chǔ)模型，并已取得顯著進(jìn)展。

Sonya Huang：非常出色。我想追問一下，為何選擇構(gòu)建基礎(chǔ)模型，而非像其他公司那樣打造全垂直整合的機(jī)器人產(chǎn)品？比如我記得上個(gè)月的周日午餐話題——現(xiàn)在已有可購買的家用小型輔助機(jī)器人，還有公司在研發(fā)烹飪機(jī)器人，人形機(jī)器人領(lǐng)域也有不少參與者。你們?yōu)楹芜x擇專注于基礎(chǔ)模型，而非親自研發(fā)機(jī)器人？

Karol Hausman：回顧機(jī)器人技術(shù)的發(fā)展歷程，我和許多機(jī)器人專家都清晰地認(rèn)識到，智能始終是行業(yè)的瓶頸。無論是家用還是工業(yè)場景，機(jī)器人硬件早已具備完成復(fù)雜任務(wù)的能力。十多年前就有機(jī)器人在遠(yuǎn)程操控下完成全屋清潔的案例——關(guān)鍵在于遠(yuǎn)程操控：只要有人類智能介入，就能證明硬件具備多樣化任務(wù)執(zhí)行潛力。長期以來，多數(shù)機(jī)器人公司都采用你提到的模式：設(shè)計(jì)針對單一任務(wù)或應(yīng)用場景的專用機(jī)器人。

但我們認(rèn)為，推動(dòng)行業(yè)發(fā)展的關(guān)鍵是突破智能瓶頸。因此，我們成立公司專注于解決這一核心問題——只有突破智能限制，才能真正實(shí)現(xiàn)機(jī)器人技術(shù)的普及。若選擇其他路徑，很難在智能領(lǐng)域取得實(shí)質(zhì)性進(jìn)展。我們希望直面這一挑戰(zhàn)，聚焦智能技術(shù)研發(fā)，未來有望催生出各類垂直領(lǐng)域產(chǎn)品，讓機(jī)器人走進(jìn)家庭、工業(yè)等更多場景。

Sonya Huang：我想進(jìn)一步探討這個(gè)問題。硬件方面，我看到了最新的Optimus機(jī)械臂視頻，設(shè)計(jì)堪稱精湛，宛如藝術(shù)品。雖然我沒見過十年前遠(yuǎn)程操控機(jī)器人清潔房屋的視頻，但很好奇是否存在一些如今才剛具備實(shí)現(xiàn)條件的任務(wù)？例如烹飪，或是剝洋蔥、切洋蔥這類過去硬件無法完成的操作。你認(rèn)為當(dāng)前硬件水平對技術(shù)落地的推動(dòng)作用有多大？

Karol Hausman：硬件領(lǐng)域確實(shí)取得了長足進(jìn)步，尤其是人形機(jī)器人硬件，比如你提到的靈巧手，現(xiàn)在的性能比幾年前提升了很多。但這并未解決核心瓶頸。即便使用簡單的夾具，機(jī)器人理論上早就能完成切菜、烹飪等任務(wù)，問題的關(guān)鍵在于缺乏操控這些硬件的智能。而且硬件越復(fù)雜，反而越無法規(guī)避這一瓶頸——它或許能拓展任務(wù)邊界，但機(jī)器人智能不足的根本問題仍未解決。

Sonya Huang：明白了。也就是說，硬件可能提升了任務(wù)執(zhí)行的上限，但我們目前還未達(dá)到基礎(chǔ)能力的下限。

Karol Hausman：沒錯(cuò)。即便是簡單的機(jī)器人，其性能也尚未達(dá)到人類操作者的水平。

機(jī)器人技術(shù)發(fā)展演進(jìn)：從拆解式架構(gòu)到端到端學(xué)習(xí)革新

Alfred Lin：既然限制在于智能層面，那么研發(fā)智能的瓶頸又是什么？是數(shù)據(jù)收集嗎？還是低成本數(shù)據(jù)獲??？我們會(huì)不斷追問，深入核心。所以，解決智能問題的下一層瓶頸是什么？是泛化能力嗎？

Karol Hausman：這是個(gè)好問題。我們將其歸結(jié)為三個(gè)關(guān)鍵因素：能力、泛化性和性能。關(guān)于能力，我們的目標(biāo)是：只要能為某項(xiàng)任務(wù)或某類機(jī)器人收集數(shù)據(jù)，模型就能復(fù)現(xiàn)并自動(dòng)化該任務(wù)。這一點(diǎn)我們已快速實(shí)現(xiàn)——大約一年前發(fā)布的π0版本就證明了其可行性：任何任務(wù)、任何機(jī)器人，只要有數(shù)據(jù)支持，模型就能學(xué)習(xí)并自動(dòng)化執(zhí)行。下一個(gè)挑戰(zhàn)是泛化性，這仍是未完全解決的難題。我們希望機(jī)器人能實(shí)現(xiàn)零樣本學(xué)習(xí)，例如將其帶入全新的家庭環(huán)境，它就能自主適應(yīng)并開展工作。這難度極大——新環(huán)境中，物品擺放、臺面布局、光線條件都與訓(xùn)練數(shù)據(jù)存在差異。雖然這一問題尚未完全解決，但我們已摸索出可行的解決思路和規(guī)?；窂?。

機(jī)器學(xué)習(xí)中，泛化能力的核心在于數(shù)據(jù)多樣性——接觸足夠多的多樣化數(shù)據(jù)，模型就能適配相似的新場景。今年4月發(fā)布的π*0.6版本已實(shí)現(xiàn)這一突破：機(jī)器人能夠在從未去過的家庭環(huán)境中運(yùn)行，雖未臻完美，但已具備完成廚房清潔等簡單任務(wù)的常識。最后一個(gè)尚未完全解決的挑戰(zhàn)是性能：如何讓模型性能達(dá)到可部署標(biāo)準(zhǔn)？部署至關(guān)重要，正如我之前提到的，我們需要通過部署收集數(shù)據(jù)。這是最具規(guī)?；臄?shù)據(jù)收集方式——讓機(jī)器人在現(xiàn)實(shí)世界中執(zhí)行具有經(jīng)濟(jì)價(jià)值的任務(wù)，數(shù)據(jù)收集成本幾乎為負(fù)。技術(shù)部署范圍越廣，獲取的數(shù)據(jù)就越多，最終可能成為比互聯(lián)網(wǎng)數(shù)據(jù)更龐大的數(shù)據(jù)源。

Alfred Lin：你認(rèn)為我們距離實(shí)現(xiàn)泛化能力，或是達(dá)到可部署的性能水平還有多遠(yuǎn)？這里的場景可以是受控環(huán)境，也可以是家庭、辦公室等通用場景，不一定是整個(gè)世界。若限定場景，泛化能力和性能需要達(dá)到什么程度，這類機(jī)器人才能實(shí)現(xiàn)部署？

Karol Hausman：實(shí)際上，我們已非常接近部署階段，并且已經(jīng)開始自主部署。原本預(yù)計(jì)需要五年時(shí)間才能讓技術(shù)達(dá)到商業(yè)部署標(biāo)準(zhǔn)，具備實(shí)際應(yīng)用價(jià)值，但我們在兩個(gè)月前就已實(shí)現(xiàn)這一目標(biāo)。目前，模型的實(shí)用性、性能和任務(wù)覆蓋范圍都已達(dá)到臨界點(diǎn)，這是一個(gè)非常令人興奮的時(shí)刻。

不過，部署場景的廣度仍有待觀察。有些任務(wù)的失敗代價(jià)極高，目前并非最佳部署選擇；還有些任務(wù)對泛化能力要求極高，如家庭場景部署；或涉及隱私、安全問題，這些場景可能也暫不適合部署。但可以肯定的是，部署范圍正在不斷擴(kuò)大。隨著數(shù)據(jù)積累和模型優(yōu)化，我們將能把機(jī)器人部署到更多場景中，現(xiàn)在正處于這一進(jìn)程的起步階段。

Alfred Lin：目前你們的部署場景主要集中在哪些領(lǐng)域？

Karol Hausman：這是個(gè)很難準(zhǔn)確回答的問題。對于這些基礎(chǔ)模型，其能力邊界往往超出我們的預(yù)期，類似大型語言模型的發(fā)展——內(nèi)部訓(xùn)練優(yōu)化后，最終的模型效果難以預(yù)測，必須通過實(shí)際測試驗(yàn)證。因此，我們選擇開源模型，避免僅依靠內(nèi)部團(tuán)隊(duì)測試導(dǎo)致的認(rèn)知局限。通過開源，我們發(fā)現(xiàn)模型的應(yīng)用場景遠(yuǎn)超想象，涵蓋駕駛、手術(shù)機(jī)器人、農(nóng)業(yè)等多個(gè)領(lǐng)域。所以，我無法準(zhǔn)確界定當(dāng)前的部署范圍，但可以確定它比我們預(yù)期的更廣泛，且會(huì)隨著時(shí)間推移持續(xù)擴(kuò)大。模型獲取的數(shù)據(jù)越多、越成熟，部署場景就會(huì)越豐富。

Tobi Springenberg：我想補(bǔ)充一下性能層面的觀點(diǎn)。如你所說，模型的應(yīng)用起點(diǎn)比我們預(yù)想的更廣泛。但同時(shí)，要讓每個(gè)應(yīng)用場景都達(dá)到商業(yè)級日常使用標(biāo)準(zhǔn)——例如作為核心業(yè)務(wù)支撐，性能方面仍有很長的路要走。

即將詳細(xì)介紹的π*0.6版本，在利用經(jīng)驗(yàn)數(shù)據(jù)學(xué)習(xí)方面取得了突破——模型部署后，能通過數(shù)據(jù)反饋持續(xù)優(yōu)化。但坦率地說，許多場景中仍存在大量長尾問題和潛在故障點(diǎn)，我們尚未完全掌握解決方案。

核心技術(shù)架構(gòu)解析：VLM基礎(chǔ)與動(dòng)作模塊的融合設(shè)計(jì)

Sonya Huang：你們一直非常透明地公開研究成果，并選擇開源。如果方便的話，能否介紹一下你們的整體技術(shù)架構(gòu)？你認(rèn)為通往終極目標(biāo)的架構(gòu)是否已基本定型，未來只需在現(xiàn)有基礎(chǔ)上微調(diào)并積累大量數(shù)據(jù)？還是說，架構(gòu)仍處于探索階段？

Tobi Springenberg：我們可以先談?wù)劗?dāng)前的架構(gòu)，再探討其未來可能的變化。目前，我們的架構(gòu)與大家日常接觸的VLM非常相似——輸入文字和圖像，模型就能完成圖像內(nèi)容識別等任務(wù)。我們以同樣的思路為基礎(chǔ)：模型先在互聯(lián)網(wǎng)規(guī)模的數(shù)據(jù)上進(jìn)行預(yù)訓(xùn)練，吸收圖像和文本信息，再融入大量機(jī)器人數(shù)據(jù)。目前，訓(xùn)練數(shù)據(jù)以我們自行收集的機(jī)器人數(shù)據(jù)為主，僅包含少量互聯(lián)網(wǎng)數(shù)據(jù)。整體架構(gòu)基于視覺語言模型，同時(shí)增加了動(dòng)作模型（或稱動(dòng)作專家）模塊，這部分負(fù)責(zé)驅(qū)動(dòng)機(jī)器人——接收圖像輸入和任務(wù)指令后，生成并向機(jī)器人發(fā)送動(dòng)作指令。

從技術(shù)層面看，這是一個(gè)參數(shù)規(guī)模達(dá)十億級別的Transformer模型，通過機(jī)器人數(shù)據(jù)和互聯(lián)網(wǎng)數(shù)據(jù)進(jìn)行預(yù)訓(xùn)練，初始訓(xùn)練主要基于人類演示數(shù)據(jù)（Karol之前也提到過）——即人類遠(yuǎn)程操控機(jī)器人執(zhí)行任務(wù)的相關(guān)數(shù)據(jù)。目前，模型的性能提升主要依賴數(shù)據(jù)規(guī)模的擴(kuò)大，技術(shù)架構(gòu)與VLM領(lǐng)域的主流方案類似。至于未來的變化，這仍是一個(gè)開放性問題。我們正在探索為模型增加更多能力，例如拓展上下文理解范圍、支持更多攝像頭輸入、提升對物理世界的認(rèn)知——如識別房間內(nèi)的物品、判斷物品是否易碎、是否便于移動(dòng)等。

因此，無論是能力拓展還是架構(gòu)調(diào)整，都仍有很大的優(yōu)化空間。我預(yù)計(jì)，五六年后回顧現(xiàn)在，當(dāng)前基于VLM的模型基礎(chǔ)架構(gòu)可能會(huì)發(fā)生變化，我們或許會(huì)采用全新的技術(shù)方案。但核心的數(shù)據(jù)理念和輸入方式，大概率會(huì)保持不變。

Sonya Huang：明白了。是否可以理解為，模型的輸入是像素或信號，輸出是動(dòng)作？這是否屬于一個(gè)大型神經(jīng)網(wǎng)絡(luò)？

Tobi Springenberg：沒錯(cuò)，是一個(gè)大型模型。目前本質(zhì)上就是圖像輸入、文本輸入，然后輸出文本和動(dòng)作。

Sonya Huang：你們是否將移動(dòng)和操作模塊分開設(shè)計(jì)？或許現(xiàn)在可以聊聊機(jī)器人技術(shù)的歷史演進(jìn)，以及不同學(xué)習(xí)浪潮與你們技術(shù)架構(gòu)的關(guān)聯(lián)。

Karol Hausman：好的。在機(jī)器學(xué)習(xí)廣泛應(yīng)用之前，人們普遍認(rèn)為，只要投入足夠的人力和工程師，深入研究就能編寫代碼，讓機(jī)器人完成世界上任何任務(wù)。人們曾為此付出巨大努力，但最終發(fā)現(xiàn)，現(xiàn)實(shí)世界的復(fù)雜性遠(yuǎn)超想象——無法為所有可能出現(xiàn)的場景編寫規(guī)則。同時(shí)，在嘗試解決這一問題的過程中，人們習(xí)慣性地將機(jī)器人技術(shù)拆解為多個(gè)子問題：感知、控制、規(guī)劃。這甚至催生了不同的學(xué)術(shù)社群，每個(gè)社群都有自己的會(huì)議和研究重點(diǎn)。后來，人們意識到無法通過手寫規(guī)則覆蓋所有場景，于是轉(zhuǎn)向數(shù)據(jù)驅(qū)動(dòng)的學(xué)習(xí)方法——這與人類的學(xué)習(xí)方式相似，本是個(gè)不錯(cuò)的思路。但實(shí)際操作中，人們?nèi)匝永m(xù)了子問題拆解的模式，分別對感知層、控制層、規(guī)劃層進(jìn)行獨(dú)立的機(jī)器學(xué)習(xí)訓(xùn)練。這種方式確實(shí)取得了一定進(jìn)展，效果優(yōu)于傳統(tǒng)方法，但最終證明，子問題拆解的思路本身存在缺陷。例如，當(dāng)我試圖拿起這杯水時(shí)，不會(huì)刻意區(qū)分感知、規(guī)劃、控制等步驟，而是自然地完成動(dòng)作。

傳統(tǒng)的流水線式架構(gòu)——感知模塊輸出物體位置，規(guī)劃模塊生成軌跡，控制模塊執(zhí)行動(dòng)作中，各模塊間的接口設(shè)計(jì)是失敗的關(guān)鍵。我們原本對機(jī)器人工作原理的認(rèn)知，從根本上就是錯(cuò)誤的。于是，我們進(jìn)入了下一個(gè)發(fā)展階段：意識到子問題拆解可能從一開始就是錯(cuò)誤的，轉(zhuǎn)而采用端到端訓(xùn)練模式——將傳感器輸入直接作為網(wǎng)絡(luò)輸入，動(dòng)作作為輸出。我們稱之為端到端方法，即從像素直接映射到動(dòng)作，讓網(wǎng)絡(luò)或?qū)W習(xí)算法自行決定是否需要拆分模塊，如果可行的話。

但在實(shí)踐中，我們發(fā)現(xiàn)這種方法需要海量數(shù)據(jù)，且在需要常識判斷的場景中容易失效——通過第一人稱動(dòng)作數(shù)據(jù)集積累常識極其困難，因?yàn)樾枰采w世界上所有可能的場景。就在這時(shí)，我們發(fā)現(xiàn)了視覺語言動(dòng)作模型：利用在互聯(lián)網(wǎng)數(shù)據(jù)上預(yù)訓(xùn)練的模型，即已具備一定的世界認(rèn)知的，在其基礎(chǔ)上添加動(dòng)作模塊，將通用世界知識與物理世界的任務(wù)執(zhí)行能力相結(jié)合。這大致就是我們當(dāng)前的技術(shù)路線。

在Physical Intelligence，我們還解決了其他關(guān)鍵問題：如何實(shí)現(xiàn)模型規(guī)?；?？如何提升泛化能力？如何優(yōu)化性能和運(yùn)行速度？如何推進(jìn)部署落地？但總體而言，我們?nèi)蕴幱诶没ヂ?lián)網(wǎng)預(yù)訓(xùn)練模型的常識知識，構(gòu)建適用于各類機(jī)器人、具備通用動(dòng)作執(zhí)行能力的階段。

Sonya Huang：關(guān)于推理能力——大型語言模型在推理領(lǐng)域取得了諸多突破。你們的VLA基礎(chǔ)架構(gòu)是否能受益于這些進(jìn)展？端到端訓(xùn)練過程中，推理能力是否會(huì)自然涌現(xiàn)？或者說，大型語言模型領(lǐng)域的進(jìn)展對你們是否有幫助？

Tobi Springenberg：目前我們的模型已經(jīng)具備一定的動(dòng)作規(guī)劃能力，不僅能預(yù)測即時(shí)動(dòng)作，還能規(guī)劃后續(xù)約50個(gè)時(shí)間步的動(dòng)作（約1-2秒）。同時(shí)，模型已能在語言層面將任務(wù)分解為子任務(wù)。例如，當(dāng)指令為清潔廚房時(shí)，模型會(huì)自動(dòng)拆解出“移動(dòng)到臺面→拿起杯子→將杯子放入水槽”等子步驟。所以，一定程度的推理能力已經(jīng)存在，未來還會(huì)進(jìn)一步強(qiáng)化。

我完全預(yù)計(jì)，強(qiáng)化學(xué)習(xí)在推理領(lǐng)域的所有進(jìn)展，最終都會(huì)應(yīng)用到機(jī)器人技術(shù)中。這一過程很有趣，因?yàn)樗c人們針對數(shù)學(xué)問題的強(qiáng)化學(xué)習(xí)研究有所不同。數(shù)學(xué)問題對人類而言更像是文本類任務(wù)——可以在腦海中通過文本邏輯思考，例如調(diào)整公式以得到結(jié)果。但對于物理智能而言，推理過程會(huì)更復(fù)雜。例如，當(dāng)我最近學(xué)習(xí)打網(wǎng)球時(shí)，不會(huì)在腦海中刻意思考拿起球拍→移動(dòng)到某個(gè)位置→做出擊球動(dòng)作，而是專注于動(dòng)作本身——身體的移動(dòng)方式，以及對周圍物體軌跡的預(yù)判。這類推理能力，未來會(huì)越來越多地融入到模型中。

Karol Hausman：目前，我們確實(shí)從視覺語言模型中獲益良多。但這種受益關(guān)系未來很可能會(huì)逆轉(zhuǎn)。當(dāng)前大型語言模型的許多缺陷，本質(zhì)上是由于其聚焦于文本類任務(wù)，如數(shù)學(xué)、編程。而機(jī)器人技術(shù)將提供一個(gè)全新的視角，促使我們重新思考推理的本質(zhì)——推理可能需要在抽象空間中進(jìn)行，結(jié)合文本、圖像、軌跡等多種信息來源得出結(jié)論。機(jī)器人技術(shù)為這種新推理模式提供了絕佳的測試平臺：它扎根于物理世界，雖然目前數(shù)據(jù)有限，面臨諸多挑戰(zhàn)，但由此產(chǎn)生的新發(fā)現(xiàn)，未來很可能反哺大型語言模型領(lǐng)域。

數(shù)據(jù)與泛化能力：機(jī)器人技術(shù)落地的關(guān)鍵挑戰(zhàn)與突破路徑

Alfred Lin：談到數(shù)據(jù)，能否介紹一下你們目前已收集的數(shù)據(jù)規(guī)模，以及明年的收集目標(biāo)？當(dāng)然，數(shù)據(jù)越多越好，但具體量級是怎樣的？

Karol Hausman：這是一個(gè)相當(dāng)復(fù)雜的問題，不能僅以數(shù)量衡量。數(shù)據(jù)質(zhì)量和多樣性同樣重要，而機(jī)器人數(shù)據(jù)的質(zhì)量和多樣性目前尚無嚴(yán)格定義。例如，用10種不同方式完成同一任務(wù)，這是否屬于多樣化數(shù)據(jù)？與10種不同杯子相關(guān)的數(shù)據(jù)相比，哪種多樣性更高？

Alfred Lin：確實(shí)如此。

Karol Hausman：整個(gè)行業(yè)目前尚未完全搞清楚如何描述數(shù)據(jù)的特征、多樣性和質(zhì)量，也缺乏嚴(yán)謹(jǐn)?shù)脑u估標(biāo)準(zhǔn)。我們還發(fā)現(xiàn)，數(shù)據(jù)的某些特定屬性至關(guān)重要。例如，要在某項(xiàng)任務(wù)上達(dá)到特定性能，僅靠增加現(xiàn)有數(shù)據(jù)的數(shù)量是無法實(shí)現(xiàn)的。在π*0.6版本的研發(fā)過程中，我們針對三個(gè)不同任務(wù)進(jìn)行了測試，早期就發(fā)現(xiàn)：如果沿用現(xiàn)有數(shù)據(jù)收集方式持續(xù)積累數(shù)據(jù)，性能會(huì)進(jìn)入平臺期，無法進(jìn)一步提升。因此，我們需要尋找新的數(shù)據(jù)收集方法，或思考什么樣的數(shù)據(jù)能推動(dòng)性能提升。而強(qiáng)化學(xué)習(xí)等技術(shù)，正是解決這一問題的關(guān)鍵。

Sonya Huang：我們來談?wù)剰?qiáng)化學(xué)習(xí)和π*0.6。這個(gè)星號是在致敬π-star嗎？

Tobi Springenberg：沒錯(cuò)，本質(zhì)上是這樣。我們希望接近最優(yōu)策略。

Sonya Huang：最優(yōu)策略。好的，非常好。能否先簡要介紹一下π*0.6的核心內(nèi)容，然后再深入探討強(qiáng)化學(xué)習(xí)在你們領(lǐng)域的意義？

Tobi Springenberg：當(dāng)然可以。與我們之前的模型相比，核心區(qū)別在于：在此之前，我們所有的機(jī)器人基礎(chǔ)模型訓(xùn)練都基于演示數(shù)據(jù)，即遠(yuǎn)程操控?cái)?shù)據(jù)，模型的訓(xùn)練目標(biāo)本質(zhì)上是模仿這些數(shù)據(jù)。而新模型π*0.6采用了基于經(jīng)驗(yàn)的強(qiáng)化學(xué)習(xí)：機(jī)器人通過運(yùn)行初始策略——基于演示數(shù)據(jù)訓(xùn)練的策略——執(zhí)行任務(wù)，自行收集經(jīng)驗(yàn)數(shù)據(jù)。在這一過程中，人類會(huì)提供獎(jiǎng)勵(lì)信號，也會(huì)進(jìn)行干預(yù)修正，例如指出這樣做不對，應(yīng)該換種方式。這些數(shù)據(jù)會(huì)被回收，模型利用這些數(shù)據(jù)判斷哪些行為需要強(qiáng)化（多執(zhí)行），哪些需要弱化（少執(zhí)行），從而實(shí)現(xiàn)持續(xù)自我優(yōu)化。這就是核心差異。正如Karol之前提到的，這種真實(shí)數(shù)據(jù)的持續(xù)輸入，是幫助我們突破性能平臺期的關(guān)鍵。

Sonya Huang：我理解強(qiáng)化學(xué)習(xí)就像是在獎(jiǎng)勵(lì)信號的引導(dǎo)下“爬坡”。那么，在針對特定任務(wù)“爬坡”時(shí)，如何確保模型的泛化能力？

Tobi Springenberg：針對這個(gè)問題，我們的思路是：現(xiàn)有通用模型已具備一定性能（雖非最優(yōu)），初期目標(biāo)并非進(jìn)一步泛化，而是先攻克特定任務(wù)。我們選擇了三四個(gè)任務(wù)進(jìn)行部署，模型本身需要具備跨任務(wù)泛化能力，但強(qiáng)化學(xué)習(xí)過程的核心是確保在特定任務(wù)上的表現(xiàn)。部署并啟動(dòng)強(qiáng)化學(xué)習(xí)時(shí)，首要目標(biāo)是精準(zhǔn)完成該任務(wù)——例如，能從不同位置啟動(dòng)任務(wù)，能應(yīng)對各類長尾故障。從表面上看，專注于單一任務(wù)似乎與泛化能力相悖，但本質(zhì)上，我們采用相同的方法和流程應(yīng)對每個(gè)任務(wù)：提升單個(gè)任務(wù)的性能，收集所有任務(wù)的數(shù)據(jù)并回收，最終實(shí)現(xiàn)整體泛化能力的提升。所以，兩者并非對立關(guān)系。

強(qiáng)化學(xué)習(xí)的實(shí)踐探索：真實(shí)場景優(yōu)先與泛化能力的平衡

Sonya Huang：明白了。你們的強(qiáng)化學(xué)習(xí)是在真實(shí)場景中進(jìn)行的嗎？能否談?wù)勀銈冊诜抡姝h(huán)境和真實(shí)環(huán)境中強(qiáng)化學(xué)習(xí)的應(yīng)用比例？

Tobi Springenberg：我們采取了“真實(shí)世界優(yōu)先”的策略，而非依賴仿真。當(dāng)然，我們也將仿真作為研究工具進(jìn)行探索，但π*0.6論文中的所有強(qiáng)化學(xué)習(xí)實(shí)驗(yàn)均在真實(shí)系統(tǒng)中完成。原因在于，真實(shí)場景中的長尾故障極難通過仿真建模。以我們此次針對的任務(wù)為例，很多故障模式在仿真環(huán)境中完全無法預(yù)見。例如，其中一個(gè)任務(wù)是組裝盒子——這是一個(gè)實(shí)際部署場景，目標(biāo)是將紙板組裝成巧克力包裝盒，以便后續(xù)包裝和運(yùn)輸。初期，機(jī)器人組裝效果很好，但當(dāng)新一批紙板到貨后，問題出現(xiàn)了：這些扁平的紙板穿孔不夠規(guī)整，容易粘連在一起。機(jī)器人抓取紙板放置到臺面準(zhǔn)備組裝時(shí)，會(huì)發(fā)現(xiàn)臺面上有兩個(gè)粘連的紙板——這種情況在仿真環(huán)境中（假設(shè)紙板都是獨(dú)立的）是不會(huì)出現(xiàn)的。而我們的方法能夠讓機(jī)器人學(xué)會(huì)處理這種問題：識別粘連情況，將兩個(gè)紙板分開，再繼續(xù)組裝。如果僅在仿真環(huán)境中訓(xùn)練，機(jī)器人永遠(yuǎn)無法應(yīng)對這類真實(shí)場景中的突發(fā)狀況。

Karol Hausman：強(qiáng)化學(xué)習(xí)在仿真環(huán)境中應(yīng)用于移動(dòng)領(lǐng)域已取得不少成功，模型遷移到真實(shí)場景的效果也不錯(cuò)，但在操作領(lǐng)域尚未見到類似的成功案例。原因在于，移動(dòng)領(lǐng)域的核心問題是機(jī)器人對自身身體的建模——只要能精準(zhǔn)建模自身，就能較好地完成移動(dòng)任務(wù)。這種建模在仿真環(huán)境中只需進(jìn)行一次（針對特定機(jī)器人），若建模足夠精準(zhǔn)，就能實(shí)現(xiàn)有效遷移。但操作領(lǐng)域的核心并非機(jī)器人自身的移動(dòng)，而是與外部世界的交互——如何通過動(dòng)作影響物體。例如，將手從A點(diǎn)移動(dòng)到B點(diǎn)并不難，難的是預(yù)判這一動(dòng)作對所操作物體的影響。此時(shí)，問題就從“建模機(jī)器人自身”擴(kuò)展到“建模整個(gè)世界”——包括所有可能交互的物體和任務(wù)，這在仿真環(huán)境中幾乎無法實(shí)現(xiàn)規(guī)?；?，因此這類方法在操作領(lǐng)域的效果有限。

Sonya Huang：π*0.6的核心成果是什么？經(jīng)過強(qiáng)化學(xué)習(xí)后，模型在你們關(guān)注的測試任務(wù)上表現(xiàn)如何？這對你們未來的訓(xùn)練方案有何啟示？

Tobi Springenberg：對我而言，最令人印象深刻的是，這些模型能夠連續(xù)運(yùn)行數(shù)小時(shí)，從各類故障中自主恢復(fù)，并持續(xù)工作。同時(shí)，其運(yùn)行效率相比初始模型有了大幅提升。核心數(shù)據(jù)如下：在三個(gè)任務(wù)（之前提到的組裝巧克力盒、用工業(yè)級濃縮咖啡機(jī)制作咖啡、折疊衣物）中，模型的任務(wù)吞吐量提升了兩倍多。與僅基于演示數(shù)據(jù)訓(xùn)練的基礎(chǔ)模型相比，新模型不僅運(yùn)行速度更快，故障恢復(fù)能力也顯著增強(qiáng)。你可以在我們的官網(wǎng)查看相關(guān)視頻：機(jī)器人連續(xù)13小時(shí)制作咖啡，或連續(xù)4小時(shí)折疊衣物。親眼目睹這些場景，會(huì)徹底改變你對模型的認(rèn)知——它不再是僅能演示一次的“玩具”，而是具備實(shí)際部署價(jià)值、能持續(xù)完成真實(shí)任務(wù)的技術(shù)。

Karol Hausman：這正是機(jī)器人技術(shù)領(lǐng)域一個(gè)鮮為人知的巨大挑戰(zhàn)。你能在網(wǎng)上看到很多機(jī)器人完成酷炫任務(wù)的視頻（我們也會(huì)發(fā)布這類視頻），幾乎任何你能想到的任務(wù)，都能找到對應(yīng)的機(jī)器人演示視頻。但這些視頻往往是經(jīng)過多次拍攝、篩選出的完美片段。行業(yè)內(nèi)普遍面臨的問題是模型的可靠性、性能、運(yùn)行速度，以及長時(shí)間部署的穩(wěn)定性。這是機(jī)器人技術(shù)落地的最大瓶頸——如果模型每兩次嘗試就失敗一次，根本不具備實(shí)際部署價(jià)值。而π*0.6的最大突破，正是讓模型具備了可部署性：我們的辦公室里已有機(jī)器人為員工制作咖啡，公司員工也能將機(jī)器人帶回家折疊衣物，還有機(jī)器人在真實(shí)場景中組裝盒子。這真的非常令人興奮。

Sonya Huang：你們的強(qiáng)化學(xué)習(xí)是否主要聚焦于提升客戶部署場景中的可靠性？例如，確?？Х戎谱髂Ｐ驮诳蛻衄F(xiàn)場能夠穩(wěn)定運(yùn)行，速度足夠快，長時(shí)間無故障。這更像是客戶部署層面的創(chuàng)新，還是基礎(chǔ)能力層面的突破？或者兩者兼具？

Tobi Springenberg：兩者兼具。正如Karol之前所說，我們理想中的機(jī)器人（無論是家用的洗衣、洗碗、烹飪機(jī)器人，還是小型企業(yè)用于解決特定問題——如組裝巧克力盒——的機(jī)器人），既需要具備可靠性和高性能，也需要能夠應(yīng)對訓(xùn)練階段未見過的新任務(wù)。僅依靠擴(kuò)大人類演示數(shù)據(jù)規(guī)模，無法無限提升初始模型的性能和泛化能力——數(shù)據(jù)收集存在上限。因此，部署是必要的（這也是你提到的客戶部署層面的創(chuàng)新），但從長遠(yuǎn)來看，我預(yù)計(jì)未來幾年，部署過程中收集的數(shù)據(jù)將成為模型預(yù)訓(xùn)練的重要數(shù)據(jù)源，助力模型持續(xù)優(yōu)化。我們會(huì)越來越依賴自主數(shù)據(jù)收集，構(gòu)建覆蓋各類任務(wù)的龐大數(shù)據(jù)集。從這個(gè)角度來說，這也是一種新能力的突破。

Karol Hausman：此前，行業(yè)內(nèi)尚未實(shí)現(xiàn)模型從自身經(jīng)驗(yàn)中學(xué)習(xí)的規(guī)模化應(yīng)用——雖有諸多嘗試，但均未取得足以支撐部署的令人信服的成果。這正是π*0.6成果的重要性所在：我們首次實(shí)現(xiàn)了模型從自身經(jīng)驗(yàn)中學(xué)習(xí)。這與人類的學(xué)習(xí)方式相似：你可以通過觀看視頻或向他人學(xué)習(xí)獲得初步知識，但最終必須通過親身實(shí)踐才能真正掌握技能——嘗試、觀察動(dòng)作的結(jié)果、總結(jié)經(jīng)驗(yàn)、持續(xù)改進(jìn)。π*0.6正是朝著這個(gè)方向邁出的第一步。

Sonya Huang：這讓我想到了今年Rich Sutton的《經(jīng)驗(yàn)時(shí)代》論文，非常深刻。你們認(rèn)為這一技術(shù)會(huì)開啟機(jī)器人領(lǐng)域的持續(xù)學(xué)習(xí)時(shí)代嗎？它會(huì)成為持續(xù)學(xué)習(xí)的重要組成部分嗎？

Karol Hausman：這取決于人們對“持續(xù)學(xué)習(xí)”的定義。與過去的訓(xùn)練模式相比，它無疑更具持續(xù)性：過去，我們通常是進(jìn)行一次大規(guī)模預(yù)訓(xùn)練（可能加一次后續(xù)訓(xùn)練），然后輸出一個(gè)固定的模型，后續(xù)幾乎無法調(diào)整。而現(xiàn)在，模型部署后仍能持續(xù)學(xué)習(xí)——嘗試新動(dòng)作、從自身經(jīng)驗(yàn)中總結(jié)、不斷優(yōu)化。從這個(gè)角度來說，它更接近持續(xù)學(xué)習(xí)。但未來仍有很大的提升空間：例如，通過這種方式快速獲取新技能，或在學(xué)習(xí)過程中融入推理能力。持續(xù)學(xué)習(xí)是一個(gè)梯度光譜，我們目前的成果證明了其可行性，但還有很大的優(yōu)化潛力。

Tobi Springenberg：我同意。我們目前還處于起步階段。這并非傳統(tǒng)意義上的持續(xù)學(xué)習(xí)（例如通過數(shù)據(jù)流持續(xù)訓(xùn)練，最終走向通用人工智能等），但這是關(guān)鍵的第一步，方向是正確的，未來還有很多工作要做。僅從π*0.6的成果來看，我個(gè)人對模型從少量數(shù)據(jù)中學(xué)習(xí)的能力感到驚訝。例如，制作濃縮咖啡過程中有一個(gè)“壓粉”步驟——將咖啡粉放入濾杯后壓實(shí)。我們的機(jī)器人初期壓粉力度過大，甚至在壓粉時(shí)差點(diǎn)把自己抬離臺面。后來，人類僅進(jìn)行了30-50次修正，將這些數(shù)據(jù)反饋給模型后，機(jī)器人就學(xué)會(huì)了更輕柔、更準(zhǔn)確地壓粉。這讓我非常意外：模型已經(jīng)過數(shù)百萬次預(yù)訓(xùn)練，而少量的人類修正就能帶來顯著改進(jìn)。這正是持續(xù)學(xué)習(xí)的潛力所在，令人印象深刻。

Sonya Huang：我仍關(guān)心泛化能力。例如，我學(xué)會(huì)了更好地壓粉，這會(huì)讓我更擅長折疊盒子嗎？

Tobi Springenberg：在這個(gè)具體案例中，不會(huì)。但背后的學(xué)習(xí)機(jī)制是通用的——你可以用同樣的方式修正“盒子粘連時(shí)需要分開“盒子折疊不整齊”等問題。30次壓粉修正、30次盒子分離修正、30次折疊對齊修正，這些數(shù)據(jù)積累起來，就能帶來整體泛化能力的提升。

Sonya Huang：所以這是一種可重復(fù)的方案，但不同任務(wù)的學(xué)習(xí)成果不會(huì)直接交叉遷移？

Tobi Springenberg：是的。不過，隨著規(guī)模擴(kuò)大，如果不同任務(wù)存在相似的動(dòng)作模式，我預(yù)計(jì)會(huì)出現(xiàn)一定的遷移效應(yīng)。但目前來看，它更像是一種可重復(fù)應(yīng)用的通用方案。

Karol Hausman：我們發(fā)現(xiàn)，通過在更多任務(wù)、更多數(shù)據(jù)上進(jìn)行預(yù)訓(xùn)練，模型的泛化能力會(huì)顯著提升——新任務(wù)的適配難度降低，甚至?xí)霈F(xiàn)未預(yù)期的零樣本任務(wù)執(zhí)行能力。我們會(huì)定期開展預(yù)訓(xùn)練，每次都會(huì)發(fā)現(xiàn)模型性能因數(shù)據(jù)積累和預(yù)訓(xùn)練流程優(yōu)化而持續(xù)提升。我堅(jiān)信，隨著模型部署范圍擴(kuò)大、任務(wù)類型增多，回收的數(shù)據(jù)會(huì)進(jìn)一步推動(dòng)泛化能力提升，形成“部署→數(shù)據(jù)→優(yōu)化→更廣泛部署”的正向循環(huán)。

Tobi Springenberg：關(guān)于你提到的泛化能力，有一個(gè)關(guān)鍵細(xì)節(jié)值得補(bǔ)充。π*0.6的方案包含兩個(gè)核心部分：一是通過修正和強(qiáng)化學(xué)習(xí)反饋持續(xù)優(yōu)化的策略；二是強(qiáng)化學(xué)習(xí)反饋的獲取方式。我們之前提到了人類修正，而強(qiáng)化學(xué)習(xí)反饋的獲取方式本身就蘊(yùn)含泛化潛力。

具體來說，我們首先讓人類判斷機(jī)器人執(zhí)行任務(wù)（如制作咖啡、組裝盒子）的成功與否，為每個(gè)任務(wù)片段打上標(biāo)簽；然后訓(xùn)練一個(gè)價(jià)值函數(shù)，用于預(yù)測當(dāng)前任務(wù)狀態(tài)下成功或失敗的概率；最后，以這個(gè)價(jià)值函數(shù)為基準(zhǔn)，決定是否強(qiáng)化或弱化當(dāng)前數(shù)據(jù)。我們發(fā)現(xiàn)，當(dāng)價(jià)值函數(shù)在更多不同任務(wù)的數(shù)據(jù)上進(jìn)行訓(xùn)練時(shí)，其性能會(huì)顯著提升——例如，對于某些任務(wù)，模型能提前30-40個(gè)時(shí)間步預(yù)判失?。ㄉ踔猎缬谌祟愅ㄟ^視頻觀察到的失敗信號）。例如，機(jī)器人嘗試將濾杯插入咖啡機(jī)時(shí)，價(jià)值函數(shù)會(huì)提前預(yù)判角度不當(dāng)導(dǎo)致的失敗，并拒絕使用這類數(shù)據(jù)進(jìn)行訓(xùn)練。隨著數(shù)據(jù)和任務(wù)的增加，這種預(yù)判能力會(huì)不斷增強(qiáng)。

Sonya Huang：這很有趣。

Tobi Springenberg：而且數(shù)據(jù)和任務(wù)越多，效果越好。

Sonya Huang：這與Karpathy所說的“從末端獲取信號”形成了鮮明對比——你們并非等待最終結(jié)果，而是在過程中獲取大量信號。

Karol Hausman：強(qiáng)化學(xué)習(xí)是一個(gè)廣闊的領(lǐng)域，包含多種不同方法。人們通常會(huì)將強(qiáng)化學(xué)習(xí)與策略梯度法或特定的在線學(xué)習(xí)方法關(guān)聯(lián)，但對我而言，強(qiáng)化學(xué)習(xí)更像是一種問題定義。針對你提到的“僅能在任務(wù)末端獲取獎(jiǎng)勵(lì)”的問題，已有多種解決方案，例如價(jià)值函數(shù)、時(shí)序差分學(xué)習(xí)等——通過持續(xù)的序列預(yù)測來規(guī)避長時(shí)程任務(wù)的獎(jiǎng)勵(lì)信號稀疏問題。這或許是機(jī)器人技術(shù)能為整個(gè)AI社區(qū)帶來的重要貢獻(xiàn)：由于我們無法像語言模型那樣擁有完美的仿真環(huán)境（可進(jìn)行無限次模擬），必須在真實(shí)世界中高效學(xué)習(xí)，因此需要依賴價(jià)值函數(shù)等技術(shù)。這些技術(shù)將在更廣泛的AI領(lǐng)域發(fā)揮重要作用。

Sonya Huang：我想再深入探討一下——互聯(lián)網(wǎng)視頻似乎是你們訓(xùn)練方案的一部分，但目前并非重點(diǎn)。你認(rèn)為互聯(lián)網(wǎng)視頻中仍有未被挖掘的價(jià)值嗎？另外，當(dāng)前視頻模型、世界模型的發(fā)展，是否會(huì)為機(jī)器人模型能力帶來突破性提升，并成為你們技術(shù)pipeline的重要組成部分？

Karol Hausman：這其實(shí)包含兩個(gè)問題：一是數(shù)據(jù)層面，如何通過數(shù)據(jù)積累實(shí)現(xiàn)部署突破；二是視頻模型和世界模型的作用。關(guān)于數(shù)據(jù)，我們目前處于“啟動(dòng)階段”——任何有助于模型提升的數(shù)據(jù)源（仿真數(shù)據(jù)、人類視頻、手持設(shè)備數(shù)據(jù)、人類遠(yuǎn)程操控?cái)?shù)據(jù)等）都值得嘗試。我們需要通過各種方式積累數(shù)據(jù)，達(dá)到部署門檻。因?yàn)閺拈L遠(yuǎn)來看，啟動(dòng)階段的數(shù)據(jù)積累無論規(guī)模多大，都無法與部署階段獲取的海量真實(shí)數(shù)據(jù)相提并論。我們現(xiàn)在正全力沖刺部署階段，希望通過在更多任務(wù)、更多環(huán)境中的部署，構(gòu)建強(qiáng)大的數(shù)據(jù)引擎。

關(guān)于世界模型：世界模型和強(qiáng)化學(xué)習(xí)本質(zhì)上都在解決同一個(gè)問題——反事實(shí)推理或信用分配問題，即如何判斷哪些動(dòng)作對任務(wù)成功至關(guān)重要，以及若采取不同動(dòng)作，世界會(huì)如何演變。世界模型的解決思路是預(yù)測未來（例如，若濾杯插入角度不同，結(jié)果會(huì)是成功還是失敗，通過完整視頻序列呈現(xiàn)）；強(qiáng)化學(xué)習(xí)則通過更隱含的機(jī)制解決這一問題，但兩者的核心目標(biāo)一致。我們正在探索所有這些方法，試圖找到解決反事實(shí)推理問題的最佳路徑。目前尚無明確答案，但π*0.6的成果表明強(qiáng)化學(xué)習(xí)已取得顯著進(jìn)展，未來也可能有更多其他方法涌現(xiàn)。

行業(yè)洞察與技術(shù)反思：從拆解到通用，數(shù)據(jù)驅(qū)動(dòng)的智能本質(zhì)

Sonya Huang：非常精彩。能否談?wù)劊冗^啟動(dòng)階段后，你們的客戶部署模式會(huì)是怎樣的？你們會(huì)為客戶提供什么？如何收費(fèi)？未來會(huì)如何演變？例如，是提供全垂直整合的機(jī)器人解決方案，還是僅提供模型，由客戶自行整合到其業(yè)務(wù)流程中？具體又會(huì)如何運(yùn)作？

Karol Hausman：說實(shí)話，我們目前還不確定，仍在探索中。技術(shù)還處于早期階段，正如你所知，我們才剛剛達(dá)到部署的門檻。因此，我們認(rèn)為當(dāng)前應(yīng)優(yōu)先聚焦技術(shù)本身——提升模型的通用性和部署便捷性，擴(kuò)大之前提到的應(yīng)用場景范圍?；仡櫃C(jī)器人創(chuàng)業(yè)公司的歷史，很多公司都經(jīng)歷過這樣的階段：先研發(fā)技術(shù)，懷揣著通用化的宏偉愿景，但一旦選定某個(gè)應(yīng)用場景，就會(huì)陷入局限——為適配特定場景而妥協(xié)，開發(fā)專用解決方案，最終淪為專注于單一領(lǐng)域（如倉庫揀選機(jī)器人）的應(yīng)用公司。我們希望避免這種結(jié)局。解決物理智能問題的價(jià)值，遠(yuǎn)超過當(dāng)前任何單一應(yīng)用場景的商業(yè)價(jià)值。

因此，我們希望確保技術(shù)盡可能通用、易于部署，應(yīng)用場景盡可能廣泛，之后再考慮商業(yè)化模式。正如你所說，商業(yè)化可能有多種路徑，甚至包括一些我們目前無法預(yù)見的方式（取決于技術(shù)的發(fā)展方向）——例如提供模型服務(wù)、全垂直解決方案、機(jī)器人硬件銷售等。但現(xiàn)在回答這個(gè)問題還為時(shí)過早，雖然明確一個(gè)方向會(huì)讓人更安心，但現(xiàn)階段我們必須專注于技術(shù)本身。

Sonya Huang：Alfred肯定會(huì)希望有明確答案。

Karol Hausman：是的，Alfred會(huì)很高興，但確實(shí)還太早。

Alfred Lin：不，你們的愿景非常宏大。感謝你們致力于物理智能研究，這是一項(xiàng)非凡的進(jìn)步。僅π*0.6就堪稱重大突破。祝賀你們?nèi)〉玫乃谐删汀?/strong>

Tobi Springenberg：謝謝。

Alfred Lin：我能問一個(gè)尖銳的問題嗎？

Karol Hausman：當(dāng)然可以。

Alfred Lin：正如你們所說，你們的愿景宏大而廣泛，涉及多個(gè)領(lǐng)域。我相信你們研究過以往的機(jī)器人技術(shù)嘗試，正如你所說，它們大多最終聚焦于單一應(yīng)用，范圍越來越窄。自動(dòng)駕駛是其中最成功的大規(guī)模應(yīng)用案例之一，Waymo和特斯拉都取得了巨大成就。但回顧歷史，我在2009年、2010年左右聽Sebastian Thrun在TED演講時(shí)第一次了解到自動(dòng)駕駛——他提到了2007年贏得DARPA挑戰(zhàn)賽的經(jīng)歷。而現(xiàn)在已經(jīng)是2025年，自動(dòng)駕駛技術(shù)仍只能在舊金山等局部地區(qū)應(yīng)用，僅能行駛在普通道路上，甚至無法上高速公路。如果你們追求如此通用的目標(biāo)，那么在泛化能力和性能提升方面，你們設(shè)想的時(shí)間線是怎樣的？

Karol Hausman：這個(gè)問題很有價(jià)值。機(jī)器人技術(shù)的落地，有些方面比自動(dòng)駕駛更容易，有些方面則更難。更容易的一點(diǎn)是，我們不需要達(dá)到100%的可靠性才能部署。很多任務(wù)只要達(dá)到95%的可靠性就完全可行——例如，家用折疊衣物機(jī)器人，即使每100件衣物中有1件折疊不完美，用戶也能接受。

Alfred Lin：可以讓孩子去折疊那1件，這反而成了額外的好處。家務(wù)還是需要的。

Karol Hausman：沒錯(cuò)。但自動(dòng)駕駛完全不同——每100次行駛中出現(xiàn)1次災(zāi)難性故障，后果不堪設(shè)想。因此，機(jī)器人技術(shù)的部署門檻可能更低。同時(shí)，我們也受益于技術(shù)時(shí)代的進(jìn)步——現(xiàn)在已進(jìn)入視覺語言模型和基礎(chǔ)模型的時(shí)代，這些模型本身具備一定的常識，而且我們從2009年到2025年期間積累了大量經(jīng)驗(yàn)教訓(xùn)，這些都為我們提供了助力。我們的解決方案比以往更具通用性。

但另一方面，挑戰(zhàn)也同樣存在：機(jī)器人技術(shù)并非單一應(yīng)用，而是適用于駕駛、操作、移動(dòng)、飛行等多個(gè)領(lǐng)域的通用解決方案，其難度仍有待觀察。但根據(jù)我們目前的經(jīng)驗(yàn)，說實(shí)話，它并沒有想象中那么難。如果從一開始就以通用化為目標(biāo)進(jìn)行設(shè)計(jì)，模型的泛化能力其實(shí)相當(dāng)出色。物理智能中存在一些我們尚未完全理解的特性，使得模型能夠在駕駛、制作咖啡、無人機(jī)飛行、手術(shù)機(jī)器人操作等看似毫無關(guān)聯(lián)的任務(wù)中實(shí)現(xiàn)泛化。

盡管這些任務(wù)差異巨大，看似需要不同的模型和應(yīng)用方案，但我們的模型卻能從這些多樣化的數(shù)據(jù)中提煉出共性。這讓我充滿信心，或許這個(gè)問題并沒有那么難，甚至可能比自動(dòng)駕駛更容易解決。這是一個(gè)合理的質(zhì)疑，但我們不應(yīng)從自動(dòng)駕駛的發(fā)展歷程中得出錯(cuò)誤的結(jié)論。

Alfred Lin：非常精彩。祝賀你們。除了自己的成果，還有哪些領(lǐng)域的進(jìn)展讓你們印象最深刻？

Karol Hausman：我先來回答。你之前提到的視頻模型讓我印象深刻。幾年前我曾參與過相關(guān)研究，從未想過其發(fā)展速度會(huì)如此之快——現(xiàn)在的視頻模型生成的內(nèi)容幾乎與真實(shí)場景無異，能完成各種令人驚嘆的任務(wù)。這真的非常令人意外和震撼。

Tobi Springenberg：我至今仍對一個(gè)現(xiàn)象感到驚嘆：僅通過下一個(gè)Token預(yù)測，我們竟然能構(gòu)建出具備一定通用智能的模型。無論是模型在國際數(shù)學(xué)奧林匹克挑戰(zhàn)賽中獲勝，還是在科學(xué)研究中輔助發(fā)現(xiàn)新成果，每一個(gè)進(jìn)展都讓我感到意外。今年有很多這樣的案例，年初時(shí)我還以為大型語言模型的預(yù)訓(xùn)練可能已經(jīng)進(jìn)入瓶頸期，但沒想到會(huì)迎來如此強(qiáng)勁的“第二春”。

Karol Hausman：我想補(bǔ)充的是，這整套技術(shù)的可行性本身就令人難以置信。我們或許并未完全意識到這有多不可思議：構(gòu)建一個(gè)松散受大腦啟發(fā)、具備通用學(xué)習(xí)能力的算法，輸入數(shù)據(jù)后，它不僅能理解，而且表現(xiàn)遠(yuǎn)超以往任何技術(shù)。這一技術(shù)適用于機(jī)器人、計(jì)算機(jī)視覺、語言、聲音等多個(gè)領(lǐng)域。仔細(xì)想想，它的工作原理及其實(shí)際效果，確實(shí)令人嘆為觀止。例如，機(jī)器人能夠在從未去過的家庭環(huán)境中自主工作，能夠連續(xù)13小時(shí)制作咖啡——這些都是由一個(gè)端到端訓(xùn)練的通用模型完成的，我們雖未完全理解其原理，但它確實(shí)開始展現(xiàn)出強(qiáng)大的能力。這對我來說，簡直太神奇了。

Sonya Huang：我們是不是生活在一個(gè)模擬世界里？

Alfred Lin：Sonya就是這么認(rèn)為的，覺得我們身處模擬環(huán)境中。但這確實(shí)很有趣——科學(xué)研究中，人們通常會(huì)將大問題拆解為小問題，但最終發(fā)現(xiàn)，這種方法可能并不適用于機(jī)器或機(jī)器人的訓(xùn)練。

Tobi Springenberg：說實(shí)話，機(jī)器學(xué)習(xí)和AI領(lǐng)域在某種程度上也犯了同樣的錯(cuò)誤。長期以來，人們都在深入研究單個(gè)具體問題，后來才意識到，如果能將這些問題整合起來，實(shí)現(xiàn)多任務(wù)學(xué)習(xí)，效果可能會(huì)好得多。但令人意外的是，僅僅通過切換到通用預(yù)訓(xùn)練目標(biāo)，這一切就自然實(shí)現(xiàn)了——這正是最令人驚訝的地方。

Alfred Lin：你認(rèn)為這會(huì)不會(huì)像手風(fēng)琴一樣，在兩種框架之間來回切換？先將大問題拆解為小問題，在一段時(shí)間內(nèi)有效，然后失效；再回到大問題，嘗試更通用的解決方案。如此循環(huán)往復(fù)。

Tobi Springenberg：我們不會(huì)再回到拆解問題的老路上去。

Karol Hausman：我也這么認(rèn)為。有些人提出“兩全其美”的思路：將已知規(guī)則（如牛頓物理定律）融入模型，無需讓模型重新學(xué)習(xí)。但我們的經(jīng)驗(yàn)表明，這種方法行不通——強(qiáng)行融入已知規(guī)則會(huì)限制模型學(xué)習(xí)新事物的能力。所謂“兩全其美”可能并不存在，我們必須堅(jiān)持完全的數(shù)據(jù)驅(qū)動(dòng)學(xué)習(xí)。這很有趣，試想一下，如果存在一種預(yù)加載所有智能的方式，進(jìn)化過程應(yīng)該早已找到它——生物出生時(shí)就會(huì)具備所有知識。但我們觀察到，有些物種（如鹿）出生時(shí)就已具備成年個(gè)體的智能，終生無需學(xué)習(xí)；而人類、烏鴉等智能物種則有漫長的童年和青春期，初期并不聰慧，必須通過自身經(jīng)驗(yàn)持續(xù)學(xué)習(xí)。

這說明，通過親身體驗(yàn)世界并從中學(xué)習(xí)，是智能形成的關(guān)鍵。機(jī)器學(xué)習(xí)和AI領(lǐng)域也正在吸取這一教訓(xùn)：我們自以為了解人類的思考方式，但實(shí)際上并非如此。我們需要做的，是讓算法從數(shù)據(jù)中自行學(xué)習(xí)。

Alfred Lin：養(yǎng)育孩子也是如此。我以為自己了解兒子的想法，但其實(shí)并不完全了解。

Karol Hausman：我有一個(gè)小女兒，她的學(xué)習(xí)速度和認(rèn)知發(fā)展真的非常令人驚訝。

Alfred Lin：孩子學(xué)得太快了。

Karol Hausman：是的，而且你根本不知道他們的知識來自哪里。

Alfred Lin：希望是來自父母。

Karol Hausman：希望如此。但她確實(shí)知道一些我從未教過她的東西。

Alfred Lin：非常感謝你們。

Sonya Huang：你們追求的使命非常偉大。感謝你們的分享。

Karol Hausman/Tobi Springenberg：謝謝，感謝邀請。

原文：Training General Robots for Any Task: Physical Intelligence’s Karol Hausman and Tobi Springenberg

https://www.youtube.com/watch?v=OJCT-HGxPjk

編譯：Lingyun Xu