Transformer開始構建三維世界:開源模型幾張圖片秒級生成可探索3D場景

重點摘要
賬號設置我的關注我的收藏申請的項目退出登錄登錄搜索36氪Auto數字時氪未來消費智能湧現未來城市啟動Power on36氪出海36氪研究院潮生TIDE36氪企服點評36氪財經職場bonus36碳後浪研究所暗湧Waves硬氪氪睿研究院媒體品牌企業號企服點評36Kr研究院36Kr創新諮詢企業服務核心服務城市之窗政府服務創投發佈LP源計劃VClubVClub投資機。
圍著桌上的小擺件隨手拍幾張照片,幾秒後,這些二維影像竟從螢幕中「立」了起來,變成一個可以自由旋轉、探索的三維場景。沒有複雜的掃描設備,也幾乎不需要等待,只要幾聲快門,就能把現實世界瞬間轉化為數位空間。這項技術來自一個名為「影溯」的開源模型,它正嘗試用Transformer架構打開三維內容生產的新入口,讓原本需要大量運算與專業軟體的工作,變得像拍照一樣簡單。 影溯的核心突破在於,它不再依賴傳統的多視角重建或深度估計流程,而是直接從少量二維圖像中學習場景的立體結構。無論是桌上的小擺件、咖啡店的角落,還是家中的臥室,只要用手機從不同角度拍攝六張左右照片,模型就能在數秒內生成一個可自由探索的3D場景。這項能力的背後,是從二維像素到三維場景查詢(Query)的技術架構轉變,讓Transformer能夠理解不同視角之間的空間關係,並即時補全視覺盲區。 實際體驗令人印象深刻。記者用手機對著樓下咖啡店的外圍拍了六張照片,上傳到影溯模型後,幾乎沒有等待時間,一個立體的咖啡店場景便出現在畫面上。你可以拖曳視角,從側面觀察招牌的細節,或者繞到後方看看小巷的模樣。同樣的過程也應用在臥室中——幾張隨手拍下的床鋪、書桌與窗簾,立刻重組成一個可以走進去的虛擬空間,連光線的明暗與物品的相對位置都相當自然。 這項技術的應用場景遠不止於此。聚餐時記錄下歡樂的餐桌佈置,桌搭愛好者展示自己精心整理的電腦桌面,畢業生在校園角落留下最後的紀念,搬家前把舊房間的模樣保存下來,甚至婚禮現場的溫馨瞬間——這些原本只能以平面照片保存的回憶,現在都能轉化為可以自由探索的3D場景,並分享給遠方的朋友。影溯讓「把場景發給朋友」這件事,從一張靜態圖片升級為一個可互動的立體世界。 從技術層面來看,影溯的開源特性意味著開發者與創作者都能自由使用這套模型,進一步推動三維內容的規模化生產。過去,建立一個高品質的3D場景往往需要專業掃描器、數十張照片與漫長的運算時間,而影溯將這個過程壓縮到秒級,同時保持場景的幾何結構與視覺真實度。這對於電商展示、虛擬旅遊、遊戲資產製作、建築可視化等領域,都具有潛在的變革價值。 Transformer架構的引入,是三維重建領域的一個重要轉折點。傳統方法通常依賴卷積神經網路或光流演算法,需要大量標註數據與顯式深度資訊。而Transformer的自注意力機制,讓模型能夠在缺乏先驗的情況下,從多張圖像中自動學習場景的全局結構與局部細節。影溯正是利用這種能力,在二維圖像與三維空間之間建立直接映射,從而實現「幾張照片生成可探索場景」的即時體驗。 值得一提的是,影溯並非只是學術研究的成果,它已經以開源形式釋出,任何人都可以下載使用。這意味著,即便沒有專業的電腦視覺背景,普通用戶也能透過簡單的拍照步驟,創造出屬於自己的3D內容。社群中也開始出現各種創意應用:有人用它記錄寵物的活動空間,有人用它製作虛擬展覽,甚至有人嘗試將多個場景拼接成一個連續的空間地圖。 當然,目前的模型仍有其限制。例如,對於透明物體、鏡面反射或極度複雜的場景,影溯的重建效果可能不夠理想;另外,場景的探索範圍也受限於輸入照片的覆蓋角度。但隨著更多開發者參與調校與數據貢獻,這些問題有望在後續版本中得到改善。影溯的開源生態,正在為三維內容的民主化鋪平道路。 從2D像素到3D場景查詢,影溯不僅是技術上的創新,更代表一種新的內容生產思維。當每個人都能用手機輕鬆創造可探索的立體世界,社交分享、遠距協作、數位保存的方式都將隨之改變。未來,或許我們不再需要文字描述或平面照片來回憶一個地方,只要幾張照片,就能把那個瞬間完整地「打包」發送給任何人。 這個由Transformer驅動的三維世界入口,剛剛打開。而影溯,正是那個讓一切變得簡單又神奇的開端。
Related
相關文章

還沒把英偉達送上天,SpaceX股價先跌入地了
還沒把英偉達送上天,SpaceX股價先跌入地了字母AI2026.08.05 16:35 · 來自北京全文4200字00:00 / 12:40營收大漲92%,但SpaceX正進入新一輪燒錢週期。文 | 字母AISpaceX上市後的第一份財報,揭開了馬斯克為下一場競爭付出的成本。當地時間8月4日,SpaceX公佈2026年第二季度財報,也是SpaceX上市以來首份財報。公司季度營收達到78億美元,同比增長92%,淨虧損收窄至5.41億美元。然而,受AI基礎設施和星艦項目投入推動,公司季度資本開支飆升至184億美元。財報公佈後,SpaceX盤後股價一度下跌超過8%,市場開始重新審視這家太空公司的鉅額投入。幾乎是同一時間,SpaceX又宣佈將與英偉達合作,共同設計Starmind AI1衛星的計算系統。該衛星將搭載英偉達Rubin GPU和Vera CPU,使其具備數據中心級別的太空計算能力。一邊是季度接近184億美元的資本投入,另一邊是把AI計算能力部署到太空。財報中的鉅額開支,開始對應到SpaceX正在建設的新基礎設施。SpaceX的高估值正在接受檢驗SpaceX上市後的第一份財報,並沒有像上市初期那樣繼續獲得市場追捧。財報公佈後,公司股價盤後一度下跌超過8%,最低一度接近118美元附近,相比上市後的高點225.64美元,SpaceX股價一度回落近50%。按當時估值計算,公司市值一度縮水約1.4萬億美元——相當於半個微軟的市值。但從經營數據來看,SpaceX交出了一份強勁的成績單,公司公佈的第二季度業績整體超過預期。財報顯示,公司季度營收達到78億美元,同比增長92%;調整後EBITDA達到35億美元,淨虧損收窄至5.41億美元。在財報中,SpaceX強調,公司依靠覆蓋航天(Space)、連接(Connectivity)和AI三大領域的垂直整合能力,實現了高速增長。其中,Sta

微軟叫停Tokenmaxxing,預算卡死,超限自負
微軟內部叫停「Tokenmaxxing」機制,未來超出額度的token用量需由相關團隊自行吸收成本,不再由中央預算兜底。此舉反映出微軟在AI基礎設施支出上開始採取更嚴格的財務紀律,並要求內部更精準規劃token用量。

世界銀行:新興經濟體應儘快擁抱 AI,但沒必要與富裕國家比拼數據中心、大模型
世界銀行報告建議新興經濟體無須追趕富裕國家在大型數據中心與大語言模型上的巨額投資,應優先發展經本地化調整的小型低成本AI工具,以提升醫療與教育服務。報告強調,這類輕量級應用能更快讓民眾有感,同時各國政府需建立配套數據治理框架,確保隱私與公平性。

微軟叫停Tokenmaxxing!預算卡死,超限自負
< img id="wx_img" src="https://www.qbitai.com/wp-content/uploads/imgs/qbitai-logo-1.png" width="400" height="400"> 微軟叫停Tokenmaxxing!預算卡死,超限自負 聽雨 2026-08-05 14:33:40 來源:量子位 內部默認用GPT-5.

AI 監考效果不佳,導致約 5.8 萬名墨西哥國立自治大學考生需重考
首頁 > 智能時代>人工智能 AI 監考效果不佳,導致約 5.8 萬名墨西哥國立自治大學考生需重考 2026/8/5 14:14:46 來源:IT之家 作者:故淵 責編:故淵 評論: IT之家 8 月 5 日消息,科技媒體 Ars Technica 昨日(8 月 4 日)發佈博文,墨西哥國立自治大學(UNAM)首次採用遠程考試與人工智能監考系統後,發現最終運行效果是“災難級”,並導致約 5.8 萬名考生重新考試。

震撼,馬斯克聯手老黃扔出星際大腦!AI算力中心射上天
SpaceX近日交出首份公開財報,營收表現亮眼,但真正震撼業界的,是馬斯克在財報中正式宣佈與英偉達聯手,推出名為Starmind(星際大腦)的軌道AI計算網絡。這項計畫打算將AI的算力底座從地表搬到大氣層之外,透過鋪天蓋地的衛星矩陣,打造一個具備無限擴展潛力、可持續獲取太陽能、並能利用真空環境散熱的太空AI運算中心。馬斯克此舉被視為要徹底解決當前AI發展所面臨的耗電與散熱焦慮,也讓外界驚嘆,在通往火星的路上,他正順手重塑整個人類AI算力的版圖。