當年「字節投毒實習生」田柯宇,估值 2 億美元,要挑戰李飛飛做世界模型
2026 年 10 月,AI 創投圈迎來一筆頗具戲劇感的融資。一家 10 人規模的神秘實驗室,沒產品、沒名字,成了資本市場冰火兩重天的風暴眼。一方面,業內進行著道德審判,“人品不行的公司絕對不能投”,另一方面,頂級 VC 機構五源資本和 IDG 卻暗中追捧,偷偷塞了 3000 萬美金,把估值推到 2 億美元。而這家公司的創始人,正是 2024 年震動國內 AI 圈、被稱作 “字節投毒實習生” 的北大博士生田柯宇。彼時,他身陷字節跳動索賠 800 萬元的訴訟風波,卻同時以第一作者身份拿到 NeurIPS 2024 最佳論文獎。
這樣一個爭議與天才並存的人,如今又拿到了頂級 VC 的鉅額押注,要在世界模型領域另闢蹊徑,與李飛飛較量。在世界模型熱的當下,路線之爭加速分化且日趨複雜,資本押注技術團隊時,也在技術爆發力和歷史汙點中重新權衡。01田柯宇的公司在做什麼?田柯宇切入世界模型賽道的角度確實獨特,他想讓 AI 發明一套自己的語言,重新理解現實世界。在他看來,人類語言並不適合完整描述物理世界,它的信息維度太低,會丟失了海量物理信息,也會白白消耗算力。比如,一段橘貓從桌上跳下的五分鐘視頻,很難用文字準確描述物體的位置、運動軌跡、光影和物理變化。因此,他的思路是創造一套 AI 專屬的符號語言。
目前,團隊已經搭建了一套包含 20 萬個符號的“視覺詞典”。這些符號人類看不懂,但 AI 可以用它們表示、壓縮和預測視頻。據他介紹,這種方法能將生成一秒鐘視頻的成本降低至少一個數量級。然後,他們準備喂進去大約 1 億小時的視頻,讓模型通過這套自己的語言去學習現實世界。最終,田柯宇希望打造一個機器人、自動駕駛和交互式視頻等領域的基座模型,計劃於 2027 年正式發佈。他透露,團隊目前不急於商業化,重心仍放在基座模型研發上。有網友指出,這個想法並無新意,本質上就是把圖像和動作換成了機器自己的符號。
不過,這套“新語言”對視覺模型有一個實打實的用處,能徹底解決“指代不清”的混亂,讓 AI 在長時間模擬物理世界時保持絕對的穩定,從而真正改良視覺模型的底層架構。這個想法並非憑空誕生,如果溯源,其實繞不開兩年前,他以第一作者身份拿下的那篇 NeurIPS 2024 最佳論文,《Visual Autoregressive Modeling: Scalable Image Generation via Next-Scale Prediction》,這篇論文正是他在字節參與的項目,開發新一代的視覺生成模型 VAR。
在當年 NeurIPS 上萬篇投稿中,這篇論文能殺出重圍,關鍵在於它讓視覺生成像 LLM 一樣,可以依靠 Scaling Law 持續提升能力,同時降低生成成本和實現複雜度。在 VAR 出現之前,視覺生成一直在兩條彎路上內卷。最早的一派是模仿 LLM 的自迴歸的路線,以 VQ-VAE、VQGAN 為代表。它採用光柵掃描,把 2D 圖像強行展平成 1D 長序列,像老式打印機一樣,從左上角到右下角一個一個 Token 地預測。這帶來的問題,一個是像素間的二維空間聯繫被切割,AI 並沒有真正獲得原生的視覺能力;另一個是圖像 Token 數量遠多於文本,為了重新理解像素間的關係,注意力計算量直接爆炸。
另一條路線是以 Midjourney、Sora 為代表的擴散模型,它們的邏輯更符合人類的視覺體驗,“先畫出模糊的全局輪廓,再精心修飾”。在畫面質量上,擴散模型擊敗了早期自迴歸模型,統治了視覺生成。但擴散模型也有自己的問題,生成速度太慢,算力消耗巨大,很難用在自動駕駛、實時交互等需要實時響應的場景。而且它和 LLM 的自迴歸架構根本不是一套體系,做不了原生的多模態統一。田柯宇和當時的團隊沒有沿襲擴散模型,而是重新回到自迴歸這條老路,提出了一套叫“下一尺度預測”的新玩法。具體來說,VAR 不再把圖像拉成一維,而是保留圖像原本的二維結構。
它靠多尺度殘差 VQ-VAE,把圖像拆成一層比一層清晰的分辨率圖,從 1×1 的模糊全局輪廓開始,接著是 2×2、4×4、8×8……模型像人類畫畫一樣,由粗到細,一層一層地並行預測出下一級的所有細節。這個思路讓生成速度直接漲了 20 倍。更關鍵的是,它用純正的 GPT 架構搞定高質量的視覺生成,給多模態大一統鋪了路。VAR 也是第一次在視覺生成裡跑通了近乎完美的 Scaling Law。當模型參數從 3 億擴大到 23 億時,不僅性能跟著提升,還自動“湧現”出了零樣本的圖像修復、畫面外擴和指令編輯能力。
然而,就在這篇頂會獲獎論文發佈的同時,田柯宇個人的爭議事件爆發,VAR 項目的代碼倉庫裡出現了大量關於學術倫理和誠信的質疑。字節的起訴、後續法院判決,也讓國內外高校、大廠研究機構短期內不敢和他開展公開學術合作,算力支持也成了問題。面對這種局面,田柯宇主動退出傳統學術賽道,轉身創業,把 VAR 的思路套在更復雜的視頻和世界模型上。02當年投毒事件更多細節離開字節後,田柯宇近乎兩年銷聲匿跡,沒有再發表過什麼令人矚目的論文。在最新接受彭博社的獨家專訪時,他主動揭開了當年那場“投毒事件”的更多內幕。
關於這個爭議事件,當年在互聯網上版本眾多,且充斥不少誇張細節:某實習生摧毀 8000 張 GPU,造成上千萬美元損失,直接讓字節大模型訓練癱瘓。但結合字節官方聲明、法院裁決文件,這件事折射出的問題更像是大廠內部算力資源爭奪的真實困境。2024 年 6 月到 7 月期間,田柯宇作為北大在讀博士生,在字節商業化技術部門實習,做 VAR 項目。他不滿團隊算力分配,於是,他編寫篡改代碼,干擾同事模型訓練任務。他採用的技術手段並不複雜,是利用了 Hugging Face 加載模型存檔時的一個安全漏洞,在權重文件裡偷偷塞進了惡意代碼。
其他同事只要加載這份文件繼續訓練,惡意代碼會動態改寫對方訓練用的優化器,讓模型朝著錯誤的方向去優化。另一方面隨機插入延時指令,拖慢訓練速度。結果就是整整一個季度裡,團隊 30 多位研究者白乾。2024 年 8 月,字節完成內部調查後,解除田柯宇的實習協議,將事件同步北京大學、陽光誠信聯盟與企業反舞弊聯盟。最初,字節最初考慮到田柯宇博士生身份,並沒有把這事鬧大,而是交由校方內部處理。2024 年 10 月中旬,“字節實習生給大模型投毒、涉及 8000 多張卡、損失上千萬美元”的聊天截圖在微信群裡病毒式擴散。
10 月 18 日,字節公開聲明確認有實習生被辭退,同時澄清“涉及 8000 多卡、損失千萬美元”言論是嚴重誇大,受影響的只是內部研究項目,並非字節對外商用大模型。在事件曝光後,田柯宇多次對外否認作案,聲稱自己遭到嫁禍,甚至報警維權。字節認為對方沒有認識到行為問題,11 月 25 日,一紙訴狀,把他告到了北京市海淀區人民法院,要求索賠 800 萬元,以及 2 萬元合理支出,要求田柯宇公開賠禮道歉。隨後,戲劇性一幕出現:2024 年 12 月 4 日,NeurIPS 2024 公佈最佳論文,田柯宇作為一作的 VAR 上榜,這項成果正是他在字節實習期間和團隊共同完成。
在人工智能領域的學術殿堂中,NeurIPS 的地位堪比文學界的諾貝爾獎,而這篇論文是第一篇來自中國大陸的 NIPS 最佳論文。天才成就與職場違紀,集中在一人身上,整個國內 AI 圈譁然。後續經過審理,法院最終判決田柯宇違反實習合同,賠償字節 50 萬元,同時返還全部實習工資。在 2026 年彭博社的專訪中,田柯宇補充了更多細節。他當時叫停了另一名實習生的項目,是因為他認為對方超額佔用算力,所以他用干擾的方式去對抗。回顧這件事,他承認自己做錯了,“當時我的做法無異於以暴制暴,”田柯宇說道。“如果能以今天的眼光重新來過,我一定會採取更明智的做法。”不少人指出,技術天賦不能作為突破職業底線的理由。
也有媒體認為,這件事暴露出大廠 AI 實驗室殘酷的算力內卷。在 AI 實驗室裡,所有人都在排隊等 GPU,如何合理分配資源,是當前大廠面臨的組織困境。田柯宇的做法固然極端,同時也折射出天才個體和組織規則的激烈碰撞。在創投界,唯人品論還是唯技術論的爭議,至今是難解的議題。一方面不少投資人表示“人品有問題的絕對不能再用,越聰明越危險”。另一方面,在世界模型賽道,能夠提出底層範式創新的頂尖人才極度稀缺。而田柯宇在視覺自迴歸、模型壓縮上的工程能力,正是賽道剛需。而田柯宇的融資透露了一個賽道新風向,資本開始押注效率。03世界模型熱潮中,資本為什麼押注效率路線2026 年的世界模型,融資消息不斷傳來。
李飛飛創立 World Labs,連續多輪融資累計超 10 億美元,估值 54 億美元,近期被 AMD 82 億美元收購;楊立昆離開 Meta 創辦 AMI Labs,種子輪拿到 10.3 億美元,投後估值 45.3 億美元;前阿里通義負責人林俊暘的語用科技,首輪拿到高榕、紅杉、騰訊等 2.2 億美元,估值 20 億美元。作為連接機器人、自動駕駛、具身智能體、交互式虛擬場景的底層物理引擎,世界模型正展現出巨大的產業前景並加速分化,衍生出一些具體的流派。
比如,以 Sora、PixVerse 為主的像素渲染派,畫面越像現實越好;以 DeepMind Genie3 為代表的幾何物理模擬派,能生成可持續幾分鐘交互一致的 3D 環境;李飛飛 World Labs 屬於空間重構派,核心是空間智能,從 2D 還原 3D;還有具身規劃派,以宇樹、Pragmatik Labs、Momenta 為代表,把世界模型直接當成機器人小腦。五源資本等機構把錢砸給田柯宇,賭的就是“純自迴歸路線(VAR)在效率上能降維打擊李飛飛的路線”。李飛飛團隊走的是“學院派”的優雅路線,重建三維世界,再去理解物理。但重建三維幾何工程成本極高,算力消耗是個無底洞。
而且這裡有個邏輯盲區,AI 知道物體長什麼樣,不代表懂物理規律。比如一張拱橋的照片,AI 能完美畫出每一塊磚,但它可能根本不知道,如果抽掉最底下的一塊磚,整座橋會塌。田柯宇的思路,完全繞開顯式三維重建。用極致壓縮的符號去猜下一個畫面,憑藉 Scaling Law,自己悟出物理規則。兩者最大差異,落在壓縮效率和算力成本上。AI 圈一直有個共識,智能的本質就是信息壓縮。視頻數據存在巨量冗餘,靜止的背景、無意義噪點,佔據絕大多數像素。田柯宇的符號系統,本質上就是一個超級壓縮包,只留核心動作。壓縮效率越高,模型就越容易捕捉到深層的物理因果,推理成本也會成倍下降。
在世界模型商業落地的進程中,算力成本是難以逾越的門檻。有的高階模型算一秒鐘的物理模擬,要燒掉十幾美金。田柯宇對外披露能將生成一秒鐘視頻的成本降低至少一個數量級,正是打動投資人的關鍵。李飛飛 World Labs 被 AMD 收購,證明空間重構路線有巨大產業價值,但不代表這就是唯一答案。田柯宇的純自迴歸符號世界模型,代表了另一條更適配硬件、更容易跑通 Scaling Law 的技術敘事。但這條路線,同樣有巨大不確定性。僅靠 20 萬個符號進行視頻的時空壓縮,能否在長時序、複雜物理交互中穩定湧現出可靠的物理因果,目前尚未經過大規模的公開驗證。
1 億小時高質量視頻數據的清洗、去重與質量篩選,本身就是一項龐大的工程。團隊規模僅有 10 人,在世界模型賽道,算力調度、基礎設施、數據治理的工程壓力極大。過往的爭議會持續影響人才招募、學術合作、行業信任,一旦技術進展不及預期,資本會快速失去耐心。在商業與科技的絞肉機裡,道德審判往往會讓位於工程奇蹟。田柯宇能否用一次技術的核爆,來洗刷掉職業生涯的汙點?這不僅是對 Scaling Law 的一場豪賭,更是對人性的極限測試。▼推薦閱讀▼Jev 火遍全網後,我們解答了幾個疑問2026-09-21當流量稅被 API 拿走,字節和谷歌的護城河還剩什麼?2026-08-12
Related
相關文章
Google 開源 Harness²:遞迴代理程式框架,無需新模型也能提升效能
Google Cloud AI Research 開源了 Harness²,這是一個遞迴代理程式框架,透過改良凍結模型周圍的程式碼與檔案來增強效能。對開發者而言,重點很簡單:你的代理程式無需更強大的模型也能進步。重點摘要:規模為框架而非模型,訓練參數為0,包含8個可編輯的框架元件,版本0.1.0。執行環境為Linux、Python 3.12或3.13搭配uv,模型呼叫則透過Vertex AI。GPU需求未公開。效能方面:一次改良步驟即可在3個基準測試中,提升所有4個模型與框架組合的表現。最佳成果:GLM-5搭配OpenCode在WorkBuddy-Bench上從64.2提升至75.7(+11.5點);最差表現:GLM-5搭配Codex在JobBench上僅提升1.2點(23.6至24.8)。什麼是Harness²?它是Google研究推出的即插即用框架。
如何利用NVIDIA結構化資料模型進行零訓練表格預測
In this tutorial, we implement Structured Data Models, NVIDIA’s new library that puts several pretrained foundation models for tables behind one PyTorch interface, and use it to make predictions without training.
認識 Kyutai REKI:2.4B VLA 模型為機器人操控帶來高效記憶
Kyutai 與 Inria 及 École des Ponts 合作,推出了 REKI——一個用於機器人操控的 2.4B 參數視覺-語言-動作模型(VLA)。該模型僅使用公開數據進行預訓練,並配備了輕量級的近期記憶功能。在三個分佈外基準測試中,僅有規模約為其兩倍的模型能超越它。所有模型權重已於今日在 Hugging Face 上公開。核心資訊:規模:2.4B 參數(2.2B Qwen3.5-2B VLM + 0.2B 流匹配動作專家)。記憶涵蓋最近 3 幀,間隔 1 秒。運行環境:在 1 張 NVIDIA H100 上進行基準測試。從兩個 256×256 攝像頭輸入,編譯後每個動作區塊耗時 21.8 毫秒。權重以 BF16 格式提供,暫無量化版本。性能:在 LIBERO-Plus 和 RoboTwin Clean2Rand 基準測試中,為公開數據預訓練的 VLA 模型中最優;在 LIBERO-Plus 上達到 90.4% 的最高分。
DeepSeek 發布 V4.1-Flash-1017,DeepSWE 得分 77.0,並開放搜尋 API
DeepSeek 剛發布 DeepSeek-V4.1-Flash-1017,這是其 V4.1-Flash 模型的新檢查點,現已在 DeepSeek 網站、應用程式及 API 上線。DeepSeek 宣稱該版本在性能、任務完成速度與輸出簡潔度上均優於 9 月發布的 V4.1-Flash,並稱之為性能與成本的帕累託改進。同時,DeepSeek 也向所有開發者開放了搜尋與擷取 API。對代理建構者而言,這意味著更便宜的編碼模型加上單一 API 金鑰即可使用的第一方網路層。重點摘要:骨架參數 552B,另加 196B 的 Engram 參數;預填充階段每 token 啟用 8B 參數,解碼階段啟用 16B 參數;上下文長度達 1M tokens,最大輸出 384K tokens。運行於 DeepSeek API 的 deepseek-flash 模型。9 月版的 V4.1-Flash 權重(763B 參數,FP8)採 MIT 授權。
2026年20款Jev替代方案:挑戰TypeSafe的決策模型
TypeSafe於2026年9月15日推出Jev,這是一款決策模型而非聊天機器人。使用者可定義允許的答案,Jev將回傳標籤、分數或是否的機率。約4週內,至少20款Jev替代方案相繼問世,來自Cloudflare、OpenAI、Perplexity、Liquid AI、AWS的Strands Labs及獨立開發者。本指南比較各方案在規模、授權、硬體、價格、Jev API相容性及已發布基準測試的表現。重點摘要:規模範圍從287M(GLiNER2.5-multi-Decide)到35B-A3B(Mapika Decider),Jev規模未公開。執行環境:Von和Laya等編碼器可在CPU上運行,4B適配器適用24 GB GPU或32 GB Mac。效能:多數開源模型在困難推理上落後Jev,但在狹窄分類任務上數款與之匹敵或超越。最佳表現:Cloudflare Clef在BANKING7取得94.20分。
長鑫科技市值兩月內跌去1萬億;阿里加碼AI硬件品牌,天貓、速賣通聯動;國行版蘋果AI有望12月上線,百度、阿里參與合作丨雷峰早報
要聞提示1.長鑫科技市值兩月內跌去1萬億2.年內已至少18次故障!DeepSeek發放宕機補償,有人拿到3000元3.阿里加碼AI硬件品牌,天貓、速賣通聯動4.國行版蘋果AI有望12月上線,百度、阿里參與合作5.可靈AI新一代模型Kling 4.