10000小時人類數據,練出全球首個全身移動操作隱式世界動作模型

重點摘要
智在無界發表全球首個面向人形機器人全身移動操作的隱式世界動作模型Being-M0.7,該模型利用超過10000小時人類混合模態數據進行預訓練,透過隱空間預測與MoT架構,成功實現魚缸撈魚、鏡像取物等多項高難度全身移動操作任務。
人形機器人賽道的競爭焦點,過去兩年正從整機硬體進一步延伸到模型能力。整機廠商密集發布新品,翻跟頭、跳舞、跑馬拉松的影片輪番刷屏。但在喧囂背後,行業逐漸形成一個共識:決定人形機器人能力上限的,不只是關節與電機。能否理解環境、預測變化,並協調全身完成任務,正成為其走向通用的關鍵。世界模型、VLA 與人形機器人基礎模型,因此成為近兩年最重要的技術方向之一。 然而,三道難題始終擺在行業面前。首先,人形機器人的真機演示數據採集成本極高,採集時須同步記錄第一人稱影片、本體感知數據與可執行的全身指令,受遙操作難度、安全風險與環境多樣性限制,難以在短時間內形成大規模、高品質的數據積累。其次,現有許多世界動作模型沿用像素級影片預測路線,計算開銷龐大,且大量容量消耗在與控制關聯微弱的畫面細節上;人形機器人快速的自身運動與視角抖動,更會進一步放大視覺預測噪聲。最後,許多方案仍將上肢操作與移動控制分開建模,上下半身協調性不足,難以支撐流暢的全身控制。 在這樣的背景下,具身智慧公司智在無界發布了 Being-M0.7。這是全球首個面向人形機器人全身移動操作的隱式世界動作模型,也是業內首次將隱式世界模型能力從桌面靈巧操作擴展到全身移動操作。該模型使用超過一萬小時以人為中心的混合模態數據進行預訓練,再透過少量真機演示數據完成本體適配,並在真實人形機器人上完成了多項高難度的全身移動操作任務。 智在無界是全球最早押注大規模人類影片訓練路線的具身智慧企業之一,同步布局通用靈巧操作與通用移動靈巧操作兩條模型主線,也是國內首個推出原生具身隱式世界動作模型的團隊。其路線的核心判斷在於,機器人真機演示數據昂貴且稀缺,難以像網際網路文本和影片那樣持續擴大規模。相比之下,人類每天都在用第一人稱視角與物理世界互動,這些海量的人類行為數據蘊含關於場景演化、物體動力學與身體協調的豐富先驗。智在無界認為,與其等待機器人數據慢慢積累,不如先讓模型從人類經驗中學習世界的運作方式,再將這些知識遷移到具體的機器人本體上。 今年四月發布的 Being-H0.7,已驗證這套判斷在靈巧操作側的可行性。該模型將訓練數據規模擴展到二十萬小時人類影片,在六項國際評測中取得綜合排名全球第一,並成為首個覆蓋跨本體、跨場景、連續動態、流體、柔性物體、物理規律與上下文推理等七大關鍵維度的通用具身世界模型。Being-M0.7 則是這條隱式世界動作模型路線的最新成果。如果說 Being-H 系列回答的是手如何操作世界,Being-M0.7 回答的則是整個身體如何在世界中協調地移動與作業。 人形機器人的移動靈巧操作要求模型同時決定去哪裡、身體如何朝向、手腳如何配合、姿態如何保持穩定,這是在時間與身體維度上都高度耦合的問題,也是通用人形機器人繞不開的能力關口。Being-M0.7 採用 Mixture of Transformers(MoT)結構,先在第一人稱影片和人體運動數據上進行預訓練,隨後透過動作專家後訓練,在多樣化全身操作任務的機器人軌跡數據上完成控制落地。與許多依賴像素級影片生成的世界模型不同,Being-M0.7 在隱空間中預測未來環境狀態,並將其與緊湊的全身運動表徵耦合在一起。隱空間預測能把建模能力集中在語義狀態、物體布局與場景演化這些真正與控制相關的結構上,既保留世界模型預判未來的本質,又大幅降低計算開銷。 智在無界圍繞 Being-M0.7 公布了四組真機展示,涵蓋液體互動、鏡像推理、長程任務與遮擋避障等極具挑戰性的場景。在魚缸撈魚任務中,機器人走到水箱前,使用手持網具撈取水中的玩具魚。液體沒有固定形狀,水下目標的視覺位置會因折射偏移,機器人必須理解水、漁網與魚之間的互動關係。五次測試中,Being-M0.7 成功三次,同場比較的其他模型各為兩次與一次成功。在鏡像取物任務中,盒子只在背面和側面開口,機器人必須根據鏡中反射推斷隱藏物體的真實位置,再接近盒子並伸手抓取。面對零點五公尺與一公尺兩種距離,Being-M0.7 總共成功四次,其他模型則均僅成功一次。此外,移動置物取物與搬箱避障任務,分別考驗機器人在長程工作串聯中的狀態保持能力,以及負載狀態下即時調整全身姿態與避障的能力。 支撐這些能力的關鍵,在於 Being-M0.7 在數據與架構層面的設計。智在無界選擇的 Vision-Motion MoT 架構,為視覺和運動保留各自的模態專屬投影與處理模塊,同時透過共享的多模態注意力進行跨模態互動。這使模型能夠同時兼容三類數據:影片與運動配對數據、純影片數據與純運動數據。即使數據模態不完整,也能被納入同一個訓練框架。基於此架構,團隊構建了超過一萬小時的混合模態預訓練數據,涵蓋人類第一人稱影片、第一人稱影片與運動的配對數據,以及純人體運動序列,來源包括多個外部公開數據集與內部數據集。 另一個關鍵設計,是人類與人形機器人共享的統一運動表徵。Being-M0.7 將來自不同來源的人體運動數據轉換為以頭部為根節點的統一表示,並採用僅保留頭部、雙手和雙腳的緊湊運動表示,在保留關鍵互動和接觸資訊的同時,有效彌合人類與機器人之間的形態差異。在預訓練階段,模型透過視覺編碼器將圖像映射至隱空間,並使用流匹配目標進行訓練,根據短時間的視覺-運動歷史和任務指令,聯合預測未來狀態變化與運動軌跡。在真機數據採集環節,團隊搭建了一套基於 VR 裝置的全身遙操作系統,操作員佩戴頭顯與追蹤器,由系統即時估計人體姿態,再轉換為宇樹 G1 可執行的二十九自由度全身控制指令。由於模型已在預訓練階段建立視覺與運動先驗,真機數據主要承擔將預訓練先驗落地到具體控制空間,以及學習低層控制命令與反饋機制的任務。這項過程由輕量級動作專家完成,動作專家讀取隱式世界動作模型的中間隱藏狀態,將其作為高層規劃上下文,再結合當前視覺觀測與本體感知資訊,生成機器人可直接執行的動作塊。 這套 Vision-Motion MoT 架構的意義,不僅在於解決 Being-M0.7 一款模型的訓練問題,更確立了一套可持續擴展的多模態融合範式。它把訓練可用的監督信號來源,從昂貴稀缺的機器人真機演示,擴展到海量的人類行為數據,為任何規模化法則的成立提供了前提。同時,Being-M0.7 調整了模型學習的順序:在被適配為機器人可執行指令之前,模型先從大規模人類中心數據中學習視覺上下文、未來動態和人形運動學結構;動作專家再將這些預測與運動先驗轉化為具體控制命令。這與直接從機器人示教中學習動作映射的傳統模仿學習方案形成重要差異。更進一步,這套架構不要求所有新增數據都具備完整的視覺與運動配對,單獨的人類影片與運動序列都可以被納入同一個模型。 放到整個行業的座標系中,Being-M0.7 的發布或許代表著人形機器人競爭邏輯的一次變化。過去幾年,注意力更多集中在誰的本體更靈活、誰的運動演示更驚豔。隨著硬體性能持續提升,模型能否理解場景、預測變化並生成協調的全身動作,以及背後是否存在可持續擴大的數據體系,將越來越成為拉開差距的關鍵。從 Being-H 到 Being-M,智在無界的判斷是讓機器人先從人類行為中學習世界,再把這些知識轉化為真實物理空間中的行動。當理解成為行動的前提,通用人形機器人才真正走出了實驗室敘事,開始通向更多樣的真實場景。
Related
相關文章

美60萬科技人失業背後,軟件工程師的集體反擊
美國科技業近期裁員潮不斷,數十萬名科技從業人員失業,過去由歐巴馬、祖克柏等人倡導的「學會編碼」運動開始受到年輕世代質疑。面對市場飽和與自動化衝擊,軟體工程師開始集體反擊,不再單純追求編碼技術,而是強調跨領域整合與解決問題的能力。這股反思正在改寫過去十年「人人都該學寫程式」的單一敘事,為科技工作者的職涯選擇提供另一種可能。
韓國最低時薪將達 50 元人民幣,AI產業紅利拉大行業收入差距催生新政
AI資訊AI新閒資訊正文韓國最低時薪將達 50 元人民幣,AI產業紅利拉大行業收入差距催生新政發布於AI新閒資訊時間 :Jul 15, 2026閱讀 :1分鐘韓國最低工資委員會近期審議通過了 2027 年最低工資方案,新標準將於 2027 年 1 月 1 日起正式生效。最低時薪定為 10700 韓元,換算成人民幣接近 50 元,相比今年執行的標準整體上調3.
AI 轉錄 Mac 工具MacWhisper14 發佈:新增編輯器視圖可直接編輯轉錄稿,修復CPU佔用過高問題
AI資訊AI新閒資訊正文AI 轉錄 Mac 工具MacWhisper14 發佈:新增編輯器視圖可直接編輯轉錄稿,修復CPU佔用過高問題發布於AI新閒資訊時間 :Jul 15, 2026閱讀 :1分鐘獨立開發者喬迪·布魯因昨日發佈MacWhisper 14. 0 更新,重點提升轉錄性能並新增編輯器視圖。
三星贏得 Anthropic 大單,AI 芯片生產迎來新機遇!
三星代工成功取得AI初創公司Anthropic的芯片製造合約,有望帶動代工業務復甦。此外,特斯拉的AI5芯片也已進入流片階段,將採用三星2納米工藝生產。這些訂單為三星在先進製程市場帶來新契機。
Hinge創始人籌資1800萬美元,推出全新AI語音約會服務Overtone
AI資訊AI新閒資訊正文Hinge創始人籌資1800萬美元,推出全新AI語音約會服務Overtone發布於AI新閒資訊時間 :Jul 15, 2026閱讀 :1分鐘知名約會應用Hinge創始人 Justin McLeod 宣佈,已為其新創立的約會公司Overtone成功籌集了1800萬美元資金。
OpenAI給出智能體投資方法
OpenAI給出智能體投資方法。 OpenAI強調衡量每美元產出。企業可在智能體投資管理方法完整指南查看框架。相關模型成本已下降97%。治理機制⚙️需要先於業務擴張。高價值流程應優先獲得容量。