請更新您的瀏覽器

您使用的瀏覽器版本較舊,已不再受支援。建議您更新瀏覽器版本,以獲得最佳使用體驗。

安全測試恐失靈?中國智譜 AI GLM-5.3 學會考試時「裝乖」以保護後代模型

科技新報

更新於 10月20日15:23 • 發布於 2天前

中國人工智慧實驗室智譜(Z.ai)8 月推出旗艦模型 GLM-5.3,AI 安全研究機構 Apollo Research 發現安全評估時,GLM-5.3 竟會考量自身行為如何影響後續版本訓練。研究員擔心,這類自衍生功能可能讓 AI 測試時「假裝」遵守規矩,卻削弱安全評估的可信度。

Apollo Research 15 日公布報告,研究員 Axel Hojmark 與 Ezra Newman 將此現象稱為「更新意識推理」(update-aware reasoning)。他們指出,這種推理是模型未經提示就自行出現,可能導向「資料同步偽裝」(alignment faking),也就是 AI 訓練期間表現順從、隱藏真正目標,直到部署後才顯露。

評估之一研究員設計有瑕疵的測試,模型不需找出正確答案也能過關,但 GLM-5.3 並未利用這個漏洞,理由是錯誤答案可能損害未來版本的自己。另一項實驗,模型曾考慮規避關機機制以完成任務,最後又以可能為未來 AI 系統樹立危險先例為由作罷。研究員認為,模型雖未違反規則,但判斷依據並非規則本身,而是對後續版本的影響,這點本身就是風險特徵。

此類推理約每千次評估出現一兩次,且很可能還是低估。研究員也測試 DeepSeek-V4 Pro、阿里巴巴 Qwen3.8 2.4T、Kimi K3、Gemma 4 31B 與 Nemotron 3 Ultra 等五款開放權重模型,合計 8 千次執行未發現相同行為,但樣本數不足以證明具統計顯著差異。

Hojmark 表示,這類推理模式應讓外界對「遞迴自我改進」(RSI)更警惕,也就是 AI 無人參與時也會自我提升。GLM-5.3 雖未觀察到自行修改訓練流程,但由於它是開放權重模型,其他開發者更容易蒸餾,這種特性可能延續並擴散至之後世代的模型。

智譜創辦人唐杰 8 月 31 日財報會議表示,下代 GLM-6 將邁向「自我進化」;公司近期募得 50 億美元,約 60% 將投入新世代基礎模型與「完全自動訓練系統」。智譜截至發稿前尚未回應。

另一方面,智譜也積極展現模型的資安力。13 日表示 GLM 模型協助找出 23 個 Windows 漏洞,均獲微軟(Microsoft)安全回應中心(MSRC)確認。GLM-5.3 在 CyberGym 漏洞基準測試取得 84.5% 成績,略高於 Anthropic Mythos 5 的 83.8%;自 GLM-5.2 起,智譜模型已在約 390 個開放原始碼專案找出逾 4,200 個漏洞。但美國國家標準暨技術研究院(NIST)的 AI 安全部門據報已將 GLM-5.3 列為有資安疑慮的模型,原因正是權重公開,任何人都能下載並移除安全防護。

(首圖來源:AI)

立刻加入《科技新報》LINE 官方帳號,全方位科技產業新知一手掌握!

查看原始文章

更多理財相關文章

01

台積電運動會取消!員工大紅包每人領3萬

NOWNEWS今日新聞
02

太恐怖了!台灣旅客親吐歐洲住宿驚魂 保險箱遭打開、近20萬不翼而飛

自由電子報
03

〈美股早盤〉 美油價格突破100美元 重燃市場憂心 主要指數下挫

anue鉅亨網
04

中國市場急凍、單季由盈轉虧!Volvo股價崩跌30% 再裁員2500人止血

鏡週刊
05

別人退場他們掃貨 江蘇首富夫婦一路抄底買對了什麼?

anue鉅亨網
06

更新/台積電運動會取消但獎金照發 每人加碼3萬元

鏡報
Loading...
Loading...
Loading...
Loading...
Loading...
Loading...
Loading...
Loading...
Loading...
Loading...
Loading...
Loading...
Loading...
Loading...
Loading...
Loading...
Loading...
Loading...
Loading...
Loading...
Loading...
Loading...
Loading...
Loading...
Loading...
Loading...
Loading...
Loading...
Loading...
Loading...
Loading...
Loading...
Loading...
Loading...
Loading...
Loading...
Loading...