StreamPI補上時序

2026年8月28日 00:00
站內 AI 整理稿

近年來,機器人模型在視覺語言動作(Vision-Language-Action,簡稱VLA)領域的發展可謂一日千里,相關研究與應用成果層出不窮。然而,一個長期存在的結構性瓶頸也逐漸浮上檯面:目前大多數主流模型皆以單一靜態幀(single frame)作為處理單位,這使得它們在面對需要連續判斷與動態回應的真實世界操作時,往往顯得力不從心。單幀模型缺乏對時間序列的有效掌握,成為橫亙在實驗室完美示範與實際場域可靠部署之間的一道關鍵鴻溝。為了補上這塊至關重要的缺口,業界近期流傳出一項名為「StreamPI」的新框架,正試圖從根本的架構設計層面提出解方。

據了解,StreamPI的核心概念在於引入完整的機器人時序框架,讓原本只能處理單一畫面的VLA模型,也能夠在此框架的輔助下,逐步建構所謂的「流式記憶」(streaming memory)。換句話說,模型在進行動作決策時,不再只是機械式地參考當前瞬間的視覺輸入,而是能夠同時回顧並整合過去一段時間內的觀察與狀態變化,藉此做出更符合連續情境的判斷。這項突破之所以受到關注,正是因為它精準地命中了當前VLA模型在實際應用中的痛點。過去,單幀模型在面對動態環境時,由於缺乏時間脈絡的支撐,動作輸出往往會出現不連貫、甚至是前後矛盾的狀況。

舉例來說,在執行抓取移動物體的任務時,機器人若僅能看見物體在某一瞬間的靜止影像,便難以估算其運動軌跡與速度,導致抓取時機與位置的判斷失準;而在需要多步驟連續操作的組裝任務中,缺乏歷史記憶的模型也可能會重複執行相同的動作,或是遺漏關鍵的工序銜接。過去為了緩解這類問題,研究人員與工程師通常必須採取「額外補丁」的策略,例如在模型外部加掛暫存模組,用來暫時儲存歷史的觀察資訊,再於推論時手動將這些資訊拼接回當前的判斷流程中。這種做法雖然能收到一定成效,卻也增加了系統的複雜度與延遲,並非長久之計。而StreamPI的作法則是完全跳脫這種外掛式的思維,直接將時序的概念內化、整合進框架的核心之中。

如此一來,模型在推論過程中,便能自然而然地沿著時間軸累積記憶,無須外部模組的介入,即可有效提升動作輸出的穩定度與連貫性。從技術發展的脈絡來看,這類時序補強方向的出现,某種程度上也揭示了機器人AI研究正歷經一場典範轉移。過去階段,模型能力的競賽主要集中在「單一感知判斷」的準確度上,即模型能否正確辨識出眼前的物體、理解人類的語言指令,或是規劃出合理的動作路徑;然而,這些能力都建立在「當下瞬間」的靜態切片之上。如今,StreamPI這類框架的探索,則意味著研究視野開始從靜態理解,逐步擴展至更貼近真實操作需求的「時間感知模式」。

機器人不再被視為一個只會對單一畫面做出反應的感應器,而是被期待成為一個能夠理解變化、預期下一步的自主行動主體。對於以視覺作為主要輸入來源的機器人系統而言,流式記憶的導入,更是扮演著銜接「靜態理解」與「動態執行」的關鍵樞紐。沒有時間維度的資訊,視覺系統所能提供的僅是一幀又一幀孤立的快照;相對地,一旦注入了流式記憶,這些快照便能串聯成一部完整且連續的故事。機器人得以理解物體是如何移動的、流程是如何推進的,進而在此基礎上,規劃出真正流暢且符合物理世界邏輯的操作序列。這不僅是演算法層次的改良,更代表了機器人從「看得見」朝向「看得懂」邁進的重要一步。

儘管目前消息人士尚未透露StreamPI具體的模型架構細節、參數量或是實驗數據,但光是這樣一個明確的技術方向被提出,就已經在業界引發了相當程度的討論。許多人認為,這類將時間序列直接融入模型本體的設計思維,很可能會在不久的將來成為VLA領域的新標配。隨著機器人逐漸走出受控的實驗環境,進入工廠、家庭、醫院等高度動態且不可預測的真實場域,單純依賴靜態幀的模型勢必遭遇極限;而像StreamPI這樣具備時間感知能力的框架,或許正是讓機器人真正具備「連續思考」與「流暢行動」能力的關鍵拼圖。展望未來,隨著這類時序框架持續演進,機器人AI的發展可望迎來另一波質變。

從靜態到動態,從單點到連續,從被動感知到主動預測,這些轉變都將讓機器人更貼近人類對於「智慧行動」的想像。當然,流式記憶的具體實現仍存在諸多工程挑戰,包括記憶的儲存方式、衰減機制、以及如何與現有的視覺編碼器有效融合等問題,仍有待進一步的研究與實證。但可以確定的是,時間這個維度,正逐漸成為機器人AI競賽中不可或缺的核心賽道。

Related

相關文章

全球首發:萬拿NOVA21靈巧手,拓展靈巧操作研究邊界

10月15日,在2026香港秋季電子產品展上,萬拿機器人全球首發NOVA21靈巧手。面向機器人科研與開發團隊,萬拿NOVA21採用21自由度全主動旋轉直驅設計,集靈巧、力量、精準與觸覺感知於一體,為多指協同、物品姿態調整與複雜操作策略研究提供執行與感知能力。21自由度全主動旋轉直驅,支持多指協同NOVA21採用擬人化佈局,整手尺寸為195×105×71mm,接近人手大小。拇指擁有5個主動自由度,其餘四指各擁有4個主動自由度。NOVA21的21個主動自由度均採用旋轉直驅,支持全手各指的主動控制與姿態調整。

3 天前

首款韜定律邏輯摺疊芯片量產,麒麟9050讓華為旗艦手機玩出什麼新花樣?

電路折起來,旗艦手機的創新空間也被打開。三年前,麒麟芯片迴歸。三年後,問題已經變成回來之後,還能走多遠?全新基於韜定律的麒麟9050系列給出了一個新的工程答案。作為華為首款採用邏輯摺疊技術的麒麟芯片,麒麟9050 Pro通過跨層重新設計電路,縮短數據傳輸距離,尋找芯片持續升級的空間,也為搭載韜定律芯片的華為手機提供了更強大的算力基礎。

3 天前

賓大茅佳源:從單次演示到 83% 真機泛化,破解具身智能數據困局|IROS 2026

剖析視覺與動作脫節,引入 TR 指標與自適應引導,重構具身泛化機制。作者丨張璐 編輯丨岑峰 在機械臂的實機測試中,不少團隊都遇到過類似的困擾:為了讓機器人學會抓取某個馬克杯,往往需要人類抓著機械臂錄入上百條示範軌跡。然而只要把杯子換成未見過的款式,或者稍微改變物體的擺放位置,策略的成功率就會急劇下降。

4 天前
何夕2077研究與前沿

AFCE把未來物理效果當成預測目標

Computer Science > Robotics arXiv:2610.13212 (cs) [Submitted on 9 Oct 2026 (v1), last revised 12 Oct 2026 (this version, v2)] Title:Beyond Actions: Learning Future Operation Targets for Vision-Language-Action Models Auth。

4 天前

45分鐘小定8000臺,智己LS6這次成了?

這一次,智己能走出「叫好不叫座」嗎?作者 | 王瑞昊編輯 | 李雨晨9月10日,全新一代智己LS6正式開啟預售,預售價20.99萬元起,並將於9月23日正式上市。預售開啟45分鐘,小訂突破8000臺。這是智己“Next·2028戰略”下的首款20萬級純電SUV,也是LS6迭代到第四代的產品。

1 週前