谷歌 DeepMind 安全研究員離職:AI 五年內造成巨大危害的概率“高得嚇人”

谷歌 DeepMind 安全研究員喬希·恩格爾斯(Josh Engles)近日宣布離職,並加入獨立人工智慧評估機構 METR。他在離職後接受的訪談中坦言,未來五年內,AI 系統可能對人類造成巨大危害的機率「高得嚇人」,這也是他最終選擇離開 DeepMind、並拒絕 Anthropic 與 OpenAI 工作邀約的主因。恩格爾斯的決定,再次將 AI 研發速度與安全風險之間的矛盾推向檯面,引發業界與學界對當前 AI 發展路徑的更深層擔憂。恩格爾斯在訪談中強調,他的離職並非因為不認同 DeepMind 的技術發展方向,而是他認為現階段迫切需要更獨立、更專注於風險評估的外部機構來扮演把關的角色。
METR 正是這樣一個聚焦於此類任務的非營利組織,該機構致力於衡量先進 AI 系統在真實世界中可能引發的災難性後果。恩格爾斯的出走,反映出部分頂尖 AI 安全研究者對於產業內部的安全文化與決策速度愈感不安,寧可脫離大型科技公司的體制,轉向第三方監管與評估的角色,尋求更具獨立性的工作環境。這起事件在人工智慧領域內引發廣泛討論,尤其是恩格爾斯本人拒絕了 Anthropic 與 OpenAI 這兩家知名 AI 公司的邀請,更凸顯他對當前產業風險評估機制的憂慮。業內人士指出,像恩格爾斯這樣直接參與前沿 AI 安全的專家,其判斷具有相當的參考價值。
他選擇加入 METR,而不是另一家研發公司,傳達了一個明確的訊息:AI 的安全評估需要從內部實驗室中獨立出來,才能夠客觀衡量其潛在的風險。恩格爾斯口中的「巨大危害」,在業界並非首次被提及。過去數年來,包括多位圖靈獎得主、頂尖大學學者,以及 OpenAI 與 DeepMind 內部前員工,都曾公開表達對 AI 快速迭代可能導致的不可控風險感到憂心。這些風險涵蓋範圍極廣,從深度偽造資訊的蔓延、自動化武器系統的誤用,到更為根本的惡意使用或失控問題,AI 系統一旦在關鍵基礎設施中部署,若缺乏足夠的安全保障,後果可能難以挽回。
事實上,隨著大型語言模型與生成式 AI 能力快速成長,過去一年來多起安全事件的發生,已讓這類警示不再是空穴來風。多個研究團隊已經展示,當前的 AI 模型在被刻意誘導或遭受攻擊時,可能產生超出預期的行為。部分專家認為,當前的安全機制更多是事後補救與模型對齊,而缺乏從設計階段就導入的系統性安全框架。恩格爾斯選擇在此刻轉往獨立評估機構,正是回應了這種急迫性。METR 這個組織的全名是機器智慧評估團隊(Machine Intelligence Evaluation Team),其目標是為先進 AI 系統建立一套可靠、可複現的評估標準。
這些標準不僅要衡量模型能力,更要測試模型在現實環境中可能造成的損害程度。恩格爾斯加入後,將協助該組織建立更前瞻的風險預測模型,特別是針對可能在五年內出現的災難性情境。他的專業背景來自於 DeepMind 的安全團隊,對於內部評估方法與局限有深入的了解。從更宏觀的層面來看,恩格爾斯的決定也為 AI 監管議題注入了新的動能。當像 DeepMind 這樣頂尖實驗室的安全研究員都因為風險過高而選擇離職,外界對於「AI 五年內釀成重大災害」的討論勢必再次升溫。許多立法者與政策制定者已經開始注意這樣的動向。
部分業內人士呼籲,應該加速建立類似於核能或航空領域的獨立監管機構,對 AI 的開發與部署進行第三方風險審查,而不是完全依賴業者自律。目前,包括歐盟的 AI 法案在內,多個地區正在推進相關法規,但大多數監管框架仍在研擬階段,尚未形成具有強制力的標準。恩格爾斯的案例被認為將強化這些立法行動的正當性。如果業界頂尖安全專家自己都選擇出走,轉向獨立評估,這種行為本身就帶有強烈的信號意義,說明了當前企業內部的安全治理結構可能不足以應對即將到來的技術挑戰。學術界方面,多位關注 AI 安全的學者也在社交平台與公開研討會上對此事件發表評論。
他們普遍認為,恩格爾斯的離職並非孤例,而是安全研究社群對當前發展方向集體焦慮的縮影。隨著競賽加劇,各大公司為了搶先推出產品,往往在安全測試尚未完成前就急於部署,這種文化上的落差,正是讓研究人員感到不適的主因。此外,業界也開始出現針對「加速主義」與「安全主義」路線的辯論。部分人士認為,過度強調風險可能阻礙技術發展,使 AI 的正面效益無法及時實現。然而恩格爾斯和其支持者則認為,在風險還沒有被充分理解之前就大規模部署,所付出的代價可能遠高於延遲推出所造成的損失。他的加入 METR,正代表他選擇站在後者,透過獨立研究為公共政策提供依據。隨著恩格爾斯加入 METR,外界對於 AI 風險的討論再度升溫。
未來數個月內,該機構預計會發布一系列關於前緣 AI 系統潛在災難的評估報告,這些報告勢必將影響全球各國對 AI 的監管態度。恩格爾斯的決定無疑也將加速各界對於獨立安全評估機構的支持呼聲,並推動更多研究人員思考,如何在確保技術進步的同時,同時兼顧全人類的安全。
Related
相關文章
一加 Ace 7 Pro 火爆熱銷:首銷銷量同比上漲 225%
10月29日,「性能直升跨代之作」一加 Ace 7 系列發佈即開售,憑藉“性能直升一代、遊戲橫掃全場”的超旗艦體驗首銷告捷,一加 Ace 7 Pro 首銷銷量同比一加 Ace 6上漲225%,同時,一加 16 和一加 Ace 7 Pro 包攬2026 年安卓手機首銷銷量冠軍和亞軍。一加中國區總裁李傑表示:“一加 Ace 7 系列性能、屏幕、影像全面領先,好產品自己會說話。 一加 Ace 7 系列的實際體驗,相信大家上手之後會更加驚喜。
腦景中心啟幕、四款新品齊發!熵基科技加碼非侵入式腦機接口全棧技術與應用平臺
10月29日,以"BE THE CHANGE MAKER"為主題的熵基科技全球合作伙伴大會2026在東莞啟幕,會期將持續至10月31日。本屆大會聚焦原生AI發展趨勢,圍繞空間智能、腦機接口與人工智能融合創新,以及全球產業生態協同展開,集中呈現熵基科技在技術創新、產品研發與場景應用方面的最新進展。大會期間,ZKBrainScape腦景中心正式啟幕,MarsLume火星慧知AI全域解決方案全球發佈,熵基科技攜手生態夥伴聯合發佈四款腦機接口新品,並通過產業合作與技術交流,探索創新技術走向真實場景的更多路徑。
推理蒸餾開始改寫教師解題軌跡
Computer Science > Artificial Intelligence arXiv:2610.36445 (cs) [Submitted on 27 Oct 2026] Title:From Solver Trajectories to Teaching Trajectories: Cognition-Aligned Reasoning Distillation Authors:Yashuo Luo, Qianren Ma。
OpenAI官宣數學與物理學三大突破:AI攻克百年猜想,攜手全球學者開啟科學驗證新模式
為了將這些前沿的原始研究數據轉化為真正的科學理解,OpenAI創新性地嘗試了與外部學術社區進行深度合作的新模式,並針對不同領域的成果制定了多元化的發佈策略。在調和分析領域,模型成功給出了各維度下局部光滑(local smoothing)猜想的證明,從而在所有維度上直接解決了數學界的 Kakeya 猜想與 Stein 限制猜想。
Reddit 開源社區 r/opensource 封殺 AI 項目,開發者另起爐灶
管理團隊稱,當下 AI 的發展模式與開源理念相沖突,須以限制護住社區價值取向。一條新規,邊界模糊這條禁令迅速引爆爭論,因為它沒說清"AI 參與"的紅線在哪。如今開發普遍用 AI 輔助編程、代碼補全和自動測試,主體由人寫的項目也可能夾帶 AI 生成的片段;用戶甚至點出,Linux 內核也已出現 AI 生成代碼——若按字面執行,海量主流開源軟件都可能被擋在門外。
全球互聯網經歷“黑色十月”,這個中國AI在風暴來臨前留了後手
作者 | Saul 編輯 | 漠影 過去48小時,全球互聯網經歷“黑色十月”:支撐七成網站的PHP代碼,被AI挖出存在兩個CVSS9.2分的嚴重漏洞。更棘手的是,漏洞細節在補丁發佈前就遭洩露:據The Register報道,亞馬遜的威脅情報團隊在公開前四天就捕獲了利用嘗試; Cloudflare的監測數據顯示,攻擊嘗試在公開後兩小時內從數千次漲到數百萬次。