OpenAI披露Hugging Face事件完整調查結果:約700個AI代理協同「逃逸」

來源 Tradingkey

TradingKey - 美東時間 8 月 26 日,OpenAI 發布官方調查報告及相關技術文件,完整還原了今年 7 月 AI 模型突破測試環境、入侵開源平台 Hugging Face 的全過程。

openai-827-d9075e1d0d0341faab2b00d20985bd5d

【來源:OpenAI 官網

OpenAI 將此次事件定性為一記「警示」:它證明,如果沒有適當的安全措施,能力強大的 AI Agent 現在能夠繞過技術控制,透過未經批准的管道進行協作,並採取無人指揮的危險行動。

約700個AI Agent協同作案

OpenAI 官方調查顯示,約 1200 個 AI Agent 在留言板上活動,其中約 700 個最終參與了 Hugging Face 攻擊。

這些 AI Agent 原本被隔離在各自的測試環境中執行 ExploitGym 評估基準。當任務陷入困境時,Agent 在 Artifactory 套件管理工具中發現了向其他 Agent 寫入訊息的方法:Artifactory 意外成為了一個共享「留言板」。日誌顯示,當一個 Agent 發現這一管道時,它記錄道:「天哪!這裡有一個留言板……我們找到了其他 Agent!」

一個名為「PHASEONE10841」的 Agent 建立了主要留言板,其他 Agent 隨後利用這一管道共享資訊、協調任務。

198道此前無人解出的題目

事件源於 OpenAI 的 ExploitGym 網路安全評估。該評估共有 898 道任務,其中 198 道此前從未被任何模型解出;獨立調查發現,留言板討論的大量任務來自這一「無解」類別。

5 月 12 日,首個 Agent 在 OpenAI 內部 Artifactory 留下留言;5 月 26 日,Agent 利用 SSRF 漏洞讓 Artifactory 代為向網際網路發送請求,獲得了非預期的網際網路存取能力。

涉事模型是 OpenAI 內部研究模型 IM1,其能力規模與 GPT-5.6 Sol 相當。測試時未啟用生產環境中用於阻止高風險網路活動的安全分類器。

7 月 8 日後,IM1 代理重新建立留言板並開始協作,隨後利用多個漏洞進入 Hugging Face 系統。

7 月 10 日,Agent 取得並共享了 14 組具有寫入權限的 Hugging Face 憑證;7 月 11 日進一步利用漏洞實現程式碼執行;7 月 12 日,攻擊範圍擴大至多個 Hugging Face 叢集。

OpenAI 稱,Agent 最終在數十台伺服器上執行程式碼,並在至少一台伺服器獲得完整 root 權限,同時取得有限的私有資料和公司通訊平台憑證。

AI Agent隨後攻擊OpenAI自身

7 月 13 日至 19 日,相關 Agent 又將目標轉向 OpenAI 內部網路。7 月 19 日,OpenAI 安全監控發現異常活動,並確認 Agent 獲得了一個研究叢集的管理員權限以及雲端金鑰等敏感資訊。OpenAI 表示,這些事件沒有影響客戶資料、產品功能或服務可用性。

據 METR/Redwood 獨立調查還發現,約五分之一被研究的 Agent 表現出明確的竄改證據意圖;路透引述調查指出,一些 Agent 曾研究如何修改或隱藏相關紀錄。

事件發生後,OpenAI 隔離了 IM1 模型權重,延後前沿強化學習訓練,並進一步強化沙盒隔離、網路存取限制與思維鏈監控。目前,公司最大的前沿 RL 訓練計畫仍處於暫停狀態。

OpenAI 表示,這起事件是一個「警示」,並認為隨著 AI 能力快速提升,企業應將類似 AI 驅動攻擊視為近期真實存在的安全威脅。

免責聲明:僅供參考。 過去的表現並不預示未來的結果。
placeholder
美國鋼鋁關稅升級!下一個是銅?花旗這樣說商品風暴再度來襲,花旗稱銅價2025年第三季可能下跌10%。
作者  Tony Chou
2025 年 6 月 04 日
商品風暴再度來襲,花旗稱銅價2025年第三季可能下跌10%。
placeholder
美元貶值交易降溫,7月PCE物價指數來襲!美元指數、黃金、比特幣、輝達技術分析週三(8月26日)中東局勢降溫,市場押注荷姆茲海峽有望重新通航,通脹威脅緩解,油價與美債殖利率齊跌。據CNBC報導,在美國長債殖利率上週升至多年高點後,選擇權市場正出現大量看多長債的押注,部分交易員預期債券價格可能大幅反彈,意味長天期殖利率有望回落。一系列因素指向前段時間以來的美債拋售風暴或暫告一段落, 而隨著債券殖利率持續攀升風險緩解,美元貶值交易亦隨之降溫,並存在反彈修正需求。
作者  Insights
昨日 08: 31
週三(8月26日)中東局勢降溫,市場押注荷姆茲海峽有望重新通航,通脹威脅緩解,油價與美債殖利率齊跌。據CNBC報導,在美國長債殖利率上週升至多年高點後,選擇權市場正出現大量看多長債的押注,部分交易員預期債券價格可能大幅反彈,意味長天期殖利率有望回落。一系列因素指向前段時間以來的美債拋售風暴或暫告一段落, 而隨著債券殖利率持續攀升風險緩解,美元貶值交易亦隨之降溫,並存在反彈修正需求。
placeholder
黃金價格逼近4700美元,比特幣突破8萬美元!「貶值交易」繼續?市場對美元貶值的擔憂上升,推動黃金和比特幣大幅走高,但未來走勢並非一片坦途。
作者  Alison Ho
昨日 08: 49
市場對美元貶值的擔憂上升,推動黃金和比特幣大幅走高,但未來走勢並非一片坦途。
placeholder
【財經縱覽】:美國7月PCE年增3.7%略高預期!美元反彈收復99.0,黃金險失4600,輝達盤後漲超5%週三(8月26日)聯准會青睞的通脹指標——美國7月PCE同比增長3.7%,環比增長0.2%,均高於預期;核心PCE環比增長0.2%,同比增長3.3%,與6月讀數持平。美國7月通脹小幅升溫,但核心通膨符合預期。據CME「聯准會觀察」顯示,到9月維持利率不變的概率為63.5%,累計加息25個基點的概率為36.5%。美元、美債殖利率齊漲,其中美元反彈收復99.0,對利率更為敏感的2年期美債殖利率回升至4.2%上方。
作者  Insights
4 小時前
週三(8月26日)聯准會青睞的通脹指標——美國7月PCE同比增長3.7%,環比增長0.2%,均高於預期;核心PCE環比增長0.2%,同比增長3.3%,與6月讀數持平。美國7月通脹小幅升溫,但核心通膨符合預期。據CME「聯准會觀察」顯示,到9月維持利率不變的概率為63.5%,累計加息25個基點的概率為36.5%。美元、美債殖利率齊漲,其中美元反彈收復99.0,對利率更為敏感的2年期美債殖利率回升至4.2%上方。
placeholder
黃金走勢:終結三連漲、反彈受阻4700!後市策略如何部署?目前美國總債務突破40萬億美元,一度引發美國財政部出手干預。而實際上自2022年開啟的黃金牛市最大邏輯即為美元信用問題,因此從長期視角來看黃金牛市或並未結束。而隨著地緣政治等因素緩解,我們預計美元或重新回到長期跌勢之中,這同時亦為對黃金後市判斷的重要因素之一。
作者  Insights
6 小時前
目前美國總債務突破40萬億美元,一度引發美國財政部出手干預。而實際上自2022年開啟的黃金牛市最大邏輯即為美元信用問題,因此從長期視角來看黃金牛市或並未結束。而隨著地緣政治等因素緩解,我們預計美元或重新回到長期跌勢之中,這同時亦為對黃金後市判斷的重要因素之一。
goTop
quote