何夕2077機器人技術

機器人學會視覺想象

2026年7月12日 00:00

重點摘要

機器人學會視覺想象。 APIVOT面向長程機器人規劃。系統交織語言思考與視覺推演。機器人規劃論文原文展示廚房實驗。模型���提前驗證空間幾何可行性。複雜任務成功率因此獲得提升。

站內 AI 整理稿

機器人不再只是被動接收外界資訊,而是開始學會「想像」未來場景。近期一項名為 APIVOT 的系統正式問世,讓機器人首次具備視覺想像能力,在長程任務規劃領域取得關鍵突破。這套系統的核心創新在於將語言思考與視覺推演深度整合,使機器人不再僅限於處理當下看到的畫面,而是在規劃過程中預先「想像」出未來每一步的空間樣貌,進而實現更全面的任務預判。過去機器人執行複雜任務時,往往只能根據即時感測資料做出反應,面對多步驟、長時程的作業經常束手無策。例如,要機器人從廚房走到冰箱、拿出食材、放到流理臺、再打開抽屜取出工具,傳統方法容易因為環境變化或順序錯誤而中斷。

APIVOT 系統的出現,正好補足了這塊關鍵缺口:它讓機器人在實際行動之前,先透過內部模型模擬每一步的視覺結果,如同人類在動手前先在腦中演練一遍。這套系統的運作原理,是將自然語言指令轉換成一系列抽象動作規劃,再將每個動作對應的空間幾何關係以視覺想像的方式生成預覽影像。機器人會比對這些想像中的畫面與當前環境的可行性,若發現某個步驟會導致碰撞或無法執行的情況,就會重新調整規劃,直到所有步驟都通過虛擬驗證才開始實際動作。這種「先想後做」的機制,大幅降低了執行過程中的意外與修正成本。研究團隊選擇在真實廚房環境中進行實驗,測試 APIVOT 模型在烹飪相關任務上的表現。

廚房充滿了抽屜、櫥櫃、餐具、食材等各種物體,空間幾何關係複雜,且任務往往需要多個步驟依序完成,是檢驗長程規劃能力的理想場域。實驗結果顯示,APIVOT 能在實際執行動作之前,自主驗證空間幾何的可行性,例如判斷手臂是否能順利伸入抽屜而不撞到旁邊的碗盤、或確認拿取高處物品時不會阻擋後續移動路徑。透過這項「視覺想像」能力,機器人的任務成功率獲得顯著提升。過去因規劃疏漏而導致的失敗,像是抓取失誤、路徑卡住或步驟順序顛倒等問題,都能在想像階段就被過濾掉。不僅如此,這套系統還能根據想像結果動態調整規劃,例如發現原本計畫的路徑有障礙物,就自動繞道或改變抓取姿勢,展現出更高的適應性。

APIVOT 這項進展為機器人自主決策開闢了全新的路徑,也讓外界看見人工智慧從感知走向推理的具體可能。傳統機器人主要依賴感測器收集數據、進行模式識別,但缺乏對未來狀態的預測能力。如今,透過語言與視覺的雙重表徵,機器人開始擁有類似人類的「心智模擬」機制,能夠在腦中預演多種可能情境,再選擇最穩妥的方案執行。研究人員指出,這項技術的關鍵在於如何讓機器人同時理解語義指令與空間幾何,並把兩者整合到同一個推理框架中。APIVOT 正是在這個交會點上找到了突破口,讓語言規劃與視覺想像相互驗證、互相補充。

當機器人接收到「先拿鍋子再開火」這類指令時,它不僅能分解步驟,還能想像鍋子的位置、爐臺的高度以及手臂移動的軌跡,確保每一步都符合現實環境的限制。這項成果對未來機器人應用的影響深遠。在家庭服務方面,機器人將能更可靠地完成煮飯、打掃、整理等長流程任務;在工業製造領域,也能支援需要多工協作的組裝作業;甚至在醫療照護、災難救援等動態環境中,具備視覺想像能力的機器人可望大幅提升應變能力與安全性。專家認為,這代表機器人正從單純的「感知行動迴路」進化到「感知-想像-行動」的新階段。當然,目前 APIVOT 仍處於實驗驗證階段,距離廣泛部署還有不少挑戰需要克服。

如何提升視覺想像的精細度、如何處理更複雜的動態環境、如何降低計算資源需求,都是後續研究的方向。不過,這項技術已經證明了「讓機器人學會想像」並非遙不可及的科幻情節,而是正在發生的技術變革。從被動感知到主動想像,機器人的認知能力正在跨越一道重要的門檻。APIVOT 的成功不僅是一項技術突破,更為人工智慧與機器人領域提供了一個嶄新的思考方向:當機器人能像人類一樣在腦中建構未來場景,它們的決策品質與自主性將迎來質的飛躍。未來,廚房裡幫忙做菜的機器人或許再也不會因為拿錯東西而手忙腳亂,因為它們早在行動之前,就已經在腦海中預演過一遍完美的流程。

Related

相關文章

100微米與10微米之間,眼科手術機器人的“極限運動”

眼科手術機器人旨在協助醫生在100微米至10微米的極細微尺度上進行精準操作,克服人類手部顫抖與反應延遲的生理極限。目前主要發展遠端操控與共操控兩條技術路線,在視網膜下注射、白內障手術等領域展現優勢,但面臨體積大、成本高、學習曲線陡峭等挑戰。隨著人工智慧導入,機器人正從被動輔助邁向主動決策支援,有望成為未來常規眼科手術的關鍵工具。

2 小時前

A股人形機器人第一股來了,宇樹IPO倒計時,誰將成最大贏家?

宇樹科技正式啟動科創板IPO初步詢價,預計8月10日開放申購,計劃募資42.02億元,發行估值約420億元,將成為A股首檔純正人形機器人概念股。這家成立於2016年的公司,從四足機器人跨足人形機器人領域,此次上市不僅為早期投資者帶來可觀回報,也象徵人形機器人賽道在資本市場獲得正式認可。市場關注其上市後能否維持技術優勢並實現商業化量產,股價表現將為整個行業提供重要參考。

5 小時前

王興興:宇樹科技將積極探索人形機器人、機甲等更多產品形態

首頁 > 智能時代>具身智能 王興興:宇樹科技將積極探索人形機器人、機甲等更多產品形態 2026/8/7 14:56:22 來源:IT之家 作者:潞源 責編:潞源 評論: IT之家 8 月 7 日消息,據澎湃新聞消息,宇樹科技董事長、總經理兼首席技術官王興興今天在網上路演時表示,本次登陸資本市場,是宇樹科技全新的起點。

6 小時前

衝刺全球首個100萬小時具身數據!三家國產公司,聯手了

三家國產機器人公司宣布聯手,目標累積全球首個一百萬小時的具身數據,以強化機器人從感知到執行的全鏈路訓練基礎。此次合作整合本體製造、感測器與數據平台等優勢,試圖打通數據獲取到模型訓練的完整閉環,並建立共享數據標準與交換機制。若目標達成,不僅將刷新全球具身數據規模紀錄,也可能為中國在AI競爭中搶下機器人學習基礎設施的定義權。

12 小時前

宇樹科技王興興:將持續攻堅具身智能技術,探索人形機器人等新產品

AI資訊AI新閒資訊正文宇樹科技王興興:將持續攻堅具身智能技術,探索人形機器人等新產品發布於AI新閒資訊時間 :Aug 7, 2026閱讀 :1分鐘8月7日,宇樹科技創始人兼CEO王興興在網上路演中表示,公司登陸資本市場是新的起點,未來將持續深耕通用具身智能機器人核心技術研發與產業應用,推動智能機器人更早進入社會服務場景。

13 小時前6300

IJCAI 2026 專訪:機器人想學會人類動作,還差一座橋 | GAIR Paper 118

進群傳送門: 掃碼進群或添加微信Qvv0909777,備註:IJCAI + 單位/學校+姓名+方向。搞科研/搞技術,信息差很重要。來,一起快人一步!上車,帶你看遍全球 AI 頂會精華可獨家暢覽:專家演講PPT大會報告全文熱門論文解讀學術新星訪談掃描上方二維碼或點擊「閱讀原文」關注專區。

15 小時前