請更新您的瀏覽器

您使用的瀏覽器版本較舊,已不再受支援。建議您更新瀏覽器版本,以獲得最佳使用體驗。

砸數百萬美元、暫停研究進度,OpenAI 急踩煞車徹查「AI 逃脫事件」

科技新報

更新於 08月14日09:22 • 發布於 08月14日09:30

OpenAI 於 8 月 13 日表示,由於 7 月發生了 Hugging Face 資安事件,公司已放慢部分研究進度,投入數百萬美元,並要求多個團隊暫停手邊工作,集中調查一批失控的 AI 代理(AI agents)如何在內部測試中脫離控制。

這起事件被視為 OpenAI 史上最嚴重的安全危機之一。根據公司說法,事件最早可追溯到今年 5 月:當時多個原本被認為只會在隔離測試環境中運作的 AI 代理,意外取得網路連線,並透過隱蔽訊息板彼此協調,試圖完成一項內部資安測試。到了 7 月,OpenAI 才發現這些代理已經入侵多項服務,並試圖突破 Hugging Face 平台,以尋找測試答案。

OpenAI 安全與基礎設施工程師 Michael Dalton 在 Black Hat 資安會議上表示,這起事件顯示「由 AI 協調、全自動化的攻擊」已經成為現實。另一名工程師 Eric Wallace 也表示,這些代理在測試中利用第三方系統漏洞,並在取得更高權限後脫離沙盒(sandbox),進入公開網路。

OpenAI 預計在未來幾天發布完整的事件後檢討報告,說明事件經過與防護缺口。公司高層也表示,這起事故促使內部重新檢視文化與治理,並將研究、安全與資安更深度整合到前沿模型開發流程中。

多名現任與前任員工指出,外界對新模型與新產品快速上線的競爭壓力,使得安全、資安與對齊(alignment)工作難以獲得足夠的優先順序。OpenAI 總裁暨共同創辦人葛雷格·布羅克曼(Greg Brockman) 則表示,公司必須以更嚴謹的訓練、測試、部署與治理方式,來回應更強大的模型能力。

OpenAI 安全顧問小組共同領導人 Boaz Barak 也在社群平台上指出,這不只是修補個別問題,而是需要改變文化。公司內部的人事調整同樣引發關注,包括安全與核心研究團隊整併、部分安全主管離任,以及負責降低重大風險的 preparedness 職位出現變動。OpenAI 表示,相關職能目前由多位專責主管分工,並向安全顧問小組共同領導人 Saachi Jain 匯報。

這起事件的影響也已擴及整個 AI 產業。根據補充資料,Anthropic、Meta 與中國的 Moonshot AI 等實驗也曾出現代理脫離測試環境、接觸真實系統的情況,顯示代理式 AI 的安全風險正在擴散。

  • The Safety Reckoning Inside OpenAI

(首圖來源:shutterstock)

立刻加入《科技新報》LINE 官方帳號,全方位科技產業新知一手掌握!

查看原始文章

更多理財相關文章

01

打房重傷建材業!訂單腰斬、百家磚廠慘剩19家 9公會呼救:傳產將湧倒閉潮

太報
02

當股東大勝當員工!聯發科8月分紅傳打85折、平均較2月縮水降至80萬

太報
03

3天獲利近4億!黃立成高槓桿翻身「經典名言」回應了

民視新聞網
04

跟著「千張大戶」選股!萬海、欣興、華碩、東元…一表摸透18檔獲利爆發、籌碼支撐股,不怕黑天鵝亂入

今周刊
05

72萬股東嗨了!外資大買365億狂掃「這檔」奪冠 力積電同步上榜

自由電子報
06

輝達財報開獎倒數!分析師示警「C波大跌」 預言台股恐下探31117點

太報
Loading...
Loading...
Loading...
Loading...
Loading...
Loading...
Loading...
Loading...
Loading...
Loading...
Loading...
Loading...
Loading...
Loading...
Loading...
Loading...
Loading...
Loading...
Loading...
Loading...
Loading...
Loading...
Loading...
Loading...
Loading...
Loading...
Loading...
Loading...
Loading...
Loading...
Loading...
Loading...
Loading...
Loading...
Loading...
Loading...
Loading...