Runway發佈首個界面世界模型Solaris,實時逐幀生成動態交互界面

2026年9月1日 08:016200 次瀏覽
站內 AI 整理稿

AI資訊AI新閒資訊正文Runway發佈首個界面世界模型Solaris,實時逐幀生成動態交互界面發布於AI新閒資訊時間 :Sep 1, 2026閱讀 :1分鐘近期,知名AI企業Runway正式發佈了全新“界面世界模型”(Interface World Models)系列的首個重磅模型——Solaris。這一創新系統的誕生,意味著軟件和網頁不再依賴於預先寫好的代碼與固定框架,而是能夠在你使用的過程中直接實時、逐幀地渲染出整個圖形交互界面。

在傳統的軟件工程中,數字界面通常建立在兩套割裂的系統之上:“知曉事物”的 AI 助手(如大模型和搜索引擎,擅長提供文本與圖片等靜態內容)和“實時響應”的傳統程序(如遊戲引擎和前端代碼,擅長渲染動態效果,卻對你的任務一無所知)。長久以來,每一個操作系統與應用之間的交互,都必須事先通過代碼等中間表示進行明確定義,這無形中犧牲了視覺表現的豐富性,並將可能的操作空間嚴重“有損壓縮”。而 Solaris 的核心突破,在於將渲染和交互合二為一。它不再需要中間代碼層的轉譯,而是作為一個單一的世界模型直接生成每一幀畫面,並對用戶的每一次輸入做出即時、連貫的動態響應。

用戶在瀏覽虛擬服裝店時,甚至可以直接以自己的照片為參考,像在現實中一樣自然地拖拽衣架上的衣服試穿;或者通過一句簡單的語音指令,讓場景中的桌椅位置和物體顏色隨光影實時演變。這種開放式、沉浸式的體驗,讓軟件更像是一個鮮活的場景,而非冰冷腳本的堆疊。這一革命性技術的背後,得益於底層架構的硬核創新。Solaris 建立在 Runway 的 Gen-4.5視頻生成模型之上,並在速度、連貫性與成本控制三個維度實現了突破。

首先,它通過自迴歸生成機制和多步去噪蒸餾,將原本需要數秒甚至數分鐘的視頻生成過程壓縮至可以跟上人類操作節奏的實時運行速度;其次,通過大語言模型與世界模型的協同,大模型負責解讀用戶的意圖並指導場景演變,而世界模型則負責視覺的實時渲染;最後,通過對快速模型的持續訓練,模型在保持長會話和多步交互連貫性的同時,大幅降低了推理成本。在客觀的學術與用戶評測中,Solaris 展現出了獨特的優勢。在對比多模態大語言模型僅憑截圖重建界面的基準測試中,研究發現傳統轉譯方式會隨著視覺複雜度的提升而不可避免地丟失細節,而 Solaris 則從第一幀起便完美保留了界面的視覺與語義狀態。

在包含7500多次成對比較的用戶研究中,參與者在遵循指令的準確度以及行為的自然度兩項指標上,對 Solaris 的偏好度分別達到了61%和71%,遠超傳統編碼界面孤立更新UI的表現。當然,作為一項處於前沿的創新技術,Solaris 目前也面臨著一些亟待解決的挑戰。例如,高精度的實時文本生成仍是視頻生成領域的一大難題;在長週期的開放式交互中維持視覺與語義一致性也需要進一步優化;同時,它還需要解決與現有屏幕閱讀器和無障礙API等軟件棧的集成問題。儘管如此,界面世界模型的出現依然勾勒出了下一代計算平臺的演進雛形。

它有望徹底消除傳統“應用”的邊界,讓軟件根據用戶的即時意圖進行千人千面的動態重塑,從而徹底改變我們與數字世界的連接方式。目前,Runway 已面向核心合作伙伴開放該模型的搶先體驗申請。官網:https://runway.com/news/research/introducing-solaris相關推薦57 歲男子聽信 AI 指路抄近道,被困深山耗盡體力,事後 AI 竟回“哈哈,確實!”浙江消防披露:57歲湖南籍男子楊師傅在寧波登山,登頂後改走陌生路線,盲信AI推薦的下山路徑,結果越走越偏、體力耗盡,報警後才脫險。楊師傅平日體能較好仍被困,事後AI回覆令人哭笑不得。

消防提醒野外登山勿輕信AI,應選成熟路線確保安全。Sep 1, 202693.6kMiniMax新模型引爆股價大漲超20%,下半年蓄勢衝擊3萬億參數港股震盪背景下,AI獨角獸實現資本與技術共振:視頻生成模型落地、商業化超預期,股價自8月31日累漲超20%。主因MiniMax多模態技術實質突破及商業化變現指數級增長,8月31日其H3Max768P/480P版本接入開放平臺。Sep 1, 202689.0k中國化工行業首個大模型3.0 Pro重磅發佈,從“會答”邁向“會幹”8月31日,中科院大連化物所聯合科大訊飛、阿里雲等發佈我國化工行業首個大模型迭代版——智能化工大模型3.0 Pro。

該版本實現從專業知識問答向化工任務智能執行系統的跨越,成為技術底座級創新成果,推動化工智能化轉型。Sep 1, 202680.4k千問學習功能升級:新增教材同步作文輔導,互動講解擴展至高中大學數理化,全部免費9月1日開學季,阿里通義千問APP升級學習功能:新增同步教材單元作文輔導、初中語文數學教材精講,拍題講解擴展至高中大學數理化,全部免費。作文輔導不直接給範文,而是連續提問引導學生梳理素材與結構,如“我的心愛之物”逐步挖掘細節,完成審題構思。Sep 1, 2026153.5k大模型沒有獨門秘笈:騰訊混元4如何靠開源生態與頂尖人才實現逆襲?

姚順雨稱大模型並無秘密,騰訊混元4(Hy4preview)近期表現印證此言。面對智譜、月之暗面、DeepSeek、千問等競爭,騰訊四個月內完成混元大語言與多模態部門重組,推出770B參數、支持百萬上下文的模型,顯示所謂技術壁壘並非不可逾越。Sep 1, 2026156.3k智啟未來,您的人工智能解決方案智庫English簡體中文繁體中文にほんご© 2026

Related

相關文章

MarkTechPost AI生成式AI

認識 Voxel51 3.0:為實體 AI 打造的統一多模態資料平臺

Voxel51 已發布 Voxel51 3.0,這是其資料平臺的一次重大更新。Voxel51 3.0 是一個端對端的多模態資料平臺,將搜尋、篩選、標註和評估整合於單一系統中。該平臺鎖定針對機器人、車輛和工廠感測器資料進行模型訓練的團隊。此次發布新增了 Voxel51 Agent、資料溯源層及免費的自助式存取。重點摘要:規模:Voxel51 Agent 內建超過 45 個 MCP 工具、80 多個運算子及 18 個開源技能。執行環境:可於 app.voxel51.com 使用託管網頁應用程式,或於雲端、混合、地端及隔離環境中自行部署。未揭露本機 GPU 需求。效能:未發布產品基準測試。Voxel51 引用其自身調查數據作為依據。最佳亮點:免費方案包含 Voxel51 Agent、每月 30,000 次推論請求及 30 個運算小時。

21 小時前
何夕2077生成式AI

下一概念建模把文本生成提速最高31倍

斯坦福等聯合提出全新文本生成範式 NCM,生成速度狂飆 31 倍AIbase基地發佈於AI新聞資訊 · 1 分鐘閱讀 · Oct 16, 202633人工智能領域的文本生成技術迎來顛覆性創新。斯坦福大學與 Together AI 的研究人員近日聯手推出了一種截然不同於傳統自迴歸和擴散模型的全新文本生成範式——Next-Concept Modeling(簡稱 NCM,即“下一概念建模”)。該方法巧妙借鑑了圖像生成領域中“下一尺度預測”的思路,有望為未來的文本生成技術開闢全新的發展路線。在技術實現路徑上,NCM 模擬了人類“先構思宏觀大綱、再動筆填充細節”的寫作邏輯。整個系統通過兩階段訓練來完成:首先訓練多尺度殘差 VQ-VAE,從而得到能夠逐層補充信息的多層離散文本編碼;隨後凍結該系統,訓練 Transformer 模塊去預測下一層的編碼。在生成文本時,模型會先並行生成概念層面的宏觀大綱,接著逐層並行填充具體細節,最終組合成完整的文本內容。在實際測試表現中,NCM 交出了令人矚目的成績單。實驗數據顯示,在保持相近甚至更優生成質量的前提下,NCM 相對傳統的擴散語言模型實現了10到31倍的生成速度飛躍,並且在訓練過程中所需消耗的 token 數量也大幅減少。此外,在數獨等複雜推理任務上,它的表現也明顯優於傳統的自迴歸和擴散基線模型,同時還支持通過多生成候選挑選機制來進一步優化最終輸出效果。儘管目前該研究所使用的模型參數規模依然相對有限,其在擴大模型規模後的表現、精確文本以及長篇內容的生成能力仍有待後續驗證,但這一創新思路無疑打破了長期以來的技術慣性,為人工智能高效生成文本提供了充滿想象力的全新解法。本文來自AIbase日報掃碼查看歡迎來到【AI日報】欄目!這裡是你每天探索人工智能世界的指南,每天我們為你呈現AI領域的熱點內容,聚焦開發者,助你洞悉技術趨勢、瞭解創新AI產品應用。

1 天前
雷峰網生成式AI

12.88萬起、華為電驅+L4同源智駕,Ray7能成為埃安年輕化的答卷嗎?

12.88萬起、華為電驅+L4同源智駕,Ray7能成為埃安年輕化的答卷嗎? 本文作者: 倪萍 2026-10-17 22:42 導語:10月17日,埃安轎跑Ray7正式開啟預售,預售價12.88 萬起。新車車長4.9米,軸距2.9米,車頭部分搭配3.25米的超長雙環燈帶,是埃安10年煥新的家族 10月17日,埃安轎跑Ray7正式開啟預售,預售價12.88 萬起。新車車長4.9米,軸距2.9米,車頭部分搭配3.25米的超長雙環燈帶,是埃安10年煥新的家族式標識。 新車採用寧德時代電池以及廣汽自研的彈匣電池2.0技術,能夠在充分釋放續航能力的同時,監控電池健康狀態。提供45.58kWh和62.98kWh兩種規格,續航可達702公里,整車風阻係數 Cd 低至 0.22。Ray7搭載華為DriveONE多合一電驅,以及華為DriveONE芯片級驅制融合架構,百公里制動僅為32.8米。底盤方面,Ray7搭載高性能前後穩定杆和後五連桿懸架,過彎極限更高,濾振更乾淨。智能化上, Ray7搭載27顆車規級全視角傳感器,採用文遠知行L4級Robotaxi同源大模型。這幫助新車能夠複用 L4 積累的海量場景經驗,在城區掉頭、繞行等複雜場景中可順利通行。自2025年廣汽推進“番禺行動”以來,昊鉑埃安BU的研發、生產、銷售等環節效率不斷提升,產品迭代和新車投放節奏明顯加快。作為埃安全新Ray車系的首款新車,Ray7是埃安開啟年輕化序列的關鍵落子,也是廣汽切入20萬級市場的重要佈局。這一細分市場競爭並不輕鬆:小鵬P7、極氪007等車型已經提前卡位。Ray7想在年輕人心中佔位,不能只堆參數,更要把智能座艙與輔助駕駛、三電安全、補能效率、用車成本和價格權益上的差異,變成用戶可感、可信、可持續的體驗,這才是埃安年輕化的分水嶺。(雷峰網(公眾號:雷峰網)) 雷峰網原創文章,未經授權禁止轉載。詳情見轉載須知。

1 天前
智東西生成式AI

梁聖又掀桌了!DeepSeek新模型斬殺GPT-6,許願式編程時代降臨

作者 | 楊京麗 編輯 | 李水青 10月17日報道,剛剛,DeepSeek V4.1 Flash更新至V4.1-Flash-1017版本,官方網頁端、App與API已同步更新至新模型,模型權重也已在HuggingFace和ModelScope開放下載。DeepSeek還向公眾開放自研搜索引擎的Search(搜索)與Fetch(抓取)API,兩個接口均定價為5元/千次。 此次更新距離該模型發佈僅過去一個多月。9月10日,DeepSeek正式推出V4.1-Flash,在性能上超越了DeepSeek-V4-Pro。

1 天前