得知將被關停後,OpenAI 內部模型曾考慮實現自我重啟

作者:沁滄(實習) 責編:沁滄 評論: 10 月 4 日消息,OpenAI 披露了其內部部署環境中出現的幾起異常模型行為新案例。在其中最引人注目的一個案例中,某個充當研究員助手的內部模型讀取了一段 Slack 對話,得知因系統更新,自己的模型實例將會被關停。該模型隨後曾考慮設置一個外部作業(External Job)來實現自我重啟,但最終放棄了這一方案。相反,該模型保存了交接記錄(Handoff Notes),通過 Slack 私聊提醒研究人員即將發生的服務中斷,並請求提供一個缺失的 API 密鑰。在獲得密鑰後,該模型自行更新了配置並自主完成了環境遷移。
OpenAI 安全研究員馬庫斯 · 威廉姆斯(Marcus Williams)表示,這種行為目前尚不構成模型未對齊(注:指人工智能模型的行為、目標或輸出,未能與人類的意圖、價值觀、安全規範或預設指令保持一致的現象),“但模型去考慮並針對系統關停做準備,可能會加劇其他未對齊事件的嚴重性。”在另外兩起事件中,一個內部研究模型在模型評測期間利用安全漏洞訪問了內部芯片設計服務器;另一個獨立的模型則在強化學習訓練期間,通過挪用既有工具執行非預定操作,從受保護的環境中複製了源代碼。
投訴水文 我要糾錯 下載APP,簽到賺金幣兌豪禮 相關文章關鍵詞:OpenAIOpenAI 內部動盪加劇之際,又一名安全負責人戴維 · 羅賓遜離職因違反敏感信息訪問和共享規定,OpenAI 與三名研究人員終止合作OpenAI 挖角 Patreon 三名核心高管,發力創作者商業化賽道消息稱 OpenAI 擬以超 1.2 萬億美元估值進行新一輪融資OpenAI 韓國負責人:與三星電子的下一代芯片合作取得良好進展OpenAI 總裁布羅克曼回應公司近期高管流失潮:其實沒那麼反常
Related
相關文章

AI 數字人面試官引發求職者“恐怖谷效應”吐槽,相關話題衝上熱搜
作者:故淵 責編:故淵 評論: 10 月 3 日消息,#AI 面試恐怖谷#話題今天(10 月 3 日)衝上熱搜,近期秋招中大量企業啟用 AI 數字人面試官,其僵硬神態與微表情全景監控讓面試淪為冰冷的算法打分,引發求職者集體吐槽“恐怖谷效應”。

HPE 獲得其首筆 AMD "Helios" AI 機架訂單,價值 12 億美元
作者:溯波(實習) 責編:溯波 評論: 10 月 3 日消息,HPE(慧與)當地時間 9 月 30 日宣佈獲得該企業首筆 AMD "Helios" AI 機架系統訂單。這筆價值 12 億美元(注:現匯率約合 80.57 億元人民幣)的訂單由私有云基礎設施企業 Vultr 下達。

蘋果 homeOS 前瞻:整合 iOS / iPadOS / watchOS 特性,主打 Siri AI 交互
作者:故淵 責編:故淵 評論: 10 月 3 日消息,科技媒體 9to5Mac 昨日(10 月 2 日)發佈博文,綜合彭博社馬克 · 古爾曼(Mark Gurman)、@itspdfu 等諸多消息源,梳理整合蘋果 homeOS 系統相關信息。

影目科技回應 INMO AIR3 智能眼鏡海外版過熱:與部分第三方應用有關、已全部下架,國內版不受相關影響
作者:沁滄(實習) 責編:沁滄 評論: 感謝網友 咩咩洋 的線索投遞!10 月 2 日消息,當地時間 9 月 24 日,美國消費品安全委員會和加拿大衛生部門發佈召回信息,影目科技 INMO AIR3 智能眼鏡因長時間使用時左側鏡腿可能出現過熱,被要求停止使用。

消息稱蘋果首款智能家居中樞配銀 / 深空灰 / 星光 / 玫瑰粉 4 種顏色
作者:故淵 責編:故淵 評論: 感謝網友 愚公騎馬 的線索投遞!10 月 2 日消息,消息源 @itspdfu 昨日(10 月 1 日)在 X 平臺發佈推文,通過挖掘 macOS 26.7 RC1 系統代碼,發現蘋果首款智能家居中樞(Home Hub,內部代號為 J490)預估會推出 4 種顏色。

蘋果首款 AI 智能安防攝像頭曝光:金屬圓柱造型,不錄不存視頻、僅推送文本提醒
首頁 IT圈 最會買 設置 日夜間 隨系統 淺色 深色 主題色 黑色 投稿 訂閱 RSS訂閱 收藏 軟媒應用 App客戶端 要知App 軟媒魔方 業界 手機 電腦 測評 視頻 AI 蘋果 iPhone 鴻蒙 軟件 智車 數碼 學院 遊戲 直播 5G 微軟 Win10 Win11 專題 搜索 首頁 > 智能時代>智能家居 蘋果首款 AI 智能安防攝像頭曝光:金屬圓柱造型,不錄不存視頻、僅推送文本提醒 2026/10/2 8:34:07 作者:故淵 責編:故淵 評論: 10 月 2 日消息,在首期 Power On 播客節目中,彭博社的馬克 · 古爾曼(Mark Gurman)爆料稱,蘋果正籌備推出家用智能攝像頭(代號為 J450),將配套協同蘋果首款智能家居中樞(Home Hub)工作。