請更新您的瀏覽器

您使用的瀏覽器版本較舊,已不再受支援。建議您更新瀏覽器版本,以獲得最佳使用體驗。

砸數百萬美元、暫停研究進度,OpenAI 急踩煞車徹查「AI 逃脫事件」

科技新報

更新於 08月14日09:22 • 發布於 08月14日09:30

OpenAI 於 8 月 13 日表示,由於 7 月發生了 Hugging Face 資安事件,公司已放慢部分研究進度,投入數百萬美元,並要求多個團隊暫停手邊工作,集中調查一批失控的 AI 代理(AI agents)如何在內部測試中脫離控制。

這起事件被視為 OpenAI 史上最嚴重的安全危機之一。根據公司說法,事件最早可追溯到今年 5 月:當時多個原本被認為只會在隔離測試環境中運作的 AI 代理,意外取得網路連線,並透過隱蔽訊息板彼此協調,試圖完成一項內部資安測試。到了 7 月,OpenAI 才發現這些代理已經入侵多項服務,並試圖突破 Hugging Face 平台,以尋找測試答案。

OpenAI 安全與基礎設施工程師 Michael Dalton 在 Black Hat 資安會議上表示,這起事件顯示「由 AI 協調、全自動化的攻擊」已經成為現實。另一名工程師 Eric Wallace 也表示,這些代理在測試中利用第三方系統漏洞,並在取得更高權限後脫離沙盒(sandbox),進入公開網路。

OpenAI 預計在未來幾天發布完整的事件後檢討報告,說明事件經過與防護缺口。公司高層也表示,這起事故促使內部重新檢視文化與治理,並將研究、安全與資安更深度整合到前沿模型開發流程中。

多名現任與前任員工指出,外界對新模型與新產品快速上線的競爭壓力,使得安全、資安與對齊(alignment)工作難以獲得足夠的優先順序。OpenAI 總裁暨共同創辦人葛雷格·布羅克曼(Greg Brockman) 則表示,公司必須以更嚴謹的訓練、測試、部署與治理方式,來回應更強大的模型能力。

OpenAI 安全顧問小組共同領導人 Boaz Barak 也在社群平台上指出,這不只是修補個別問題,而是需要改變文化。公司內部的人事調整同樣引發關注,包括安全與核心研究團隊整併、部分安全主管離任,以及負責降低重大風險的 preparedness 職位出現變動。OpenAI 表示,相關職能目前由多位專責主管分工,並向安全顧問小組共同領導人 Saachi Jain 匯報。

這起事件的影響也已擴及整個 AI 產業。根據補充資料,Anthropic、Meta 與中國的 Moonshot AI 等實驗也曾出現代理脫離測試環境、接觸真實系統的情況,顯示代理式 AI 的安全風險正在擴散。

  • The Safety Reckoning Inside OpenAI

(首圖來源:shutterstock)

立刻加入《科技新報》LINE 官方帳號,全方位科技產業新知一手掌握!

查看原始文章

更多理財相關文章

01

5張千萬發票未兌領 財政部急公布名單

NOWNEWS今日新聞
02

急尋千萬得主!3-4月發票兌獎最後一天 他花21元買烏龍奶茶還沒領

太報
03

存股族瘋搶進! 挑戰6千億達陣 00919股價連9天創新高

三立新聞網
04

〈台股盤後〉台積電串「聯」多頭部隊強漲775點收47326點

anue鉅亨網
05

28歲就不用上班!YTR砸4000萬投資達財務自由 每月被動收入12萬

CTWANT
06

00919配息1.1元創高,除息日發息日曝光!理財達人試算每月存1張「第9年月領逾4萬」:不用再等老闆加薪

幸福熟齡 X 今周刊
Loading...
Loading...
Loading...
Loading...
Loading...
Loading...
Loading...
Loading...
Loading...
Loading...
Loading...
Loading...
Loading...
Loading...
Loading...
Loading...
Loading...
Loading...
Loading...
Loading...
Loading...
Loading...
Loading...
Loading...
Loading...
Loading...
Loading...
Loading...
Loading...
Loading...
Loading...
Loading...
Loading...
Loading...
Loading...
Loading...
Loading...