一句話結論: 研究團隊在 OpenAI、Anthropic、Google 的 API 中發現漏洞——較弱的模型可透過特定手法解碼較強模型的內部推理鏈(chain-of-thought),這直接打破了「模型能力分層」的安全假設,AI 供應商必須重新設計推理鏈的保護機制。
什麼是「推理鏈」?為什麼它是機密?
當你使用 ChatGPT、Claude 或 Gemini 時,模型在給出最終答案前,會先在內部產生一段「思考過程」——這就是 chain-of-thought(思維鏈,簡稱 CoT)。它可能包含模型的假設、推理步驟、甚至是對問題的猶豫與取捨。
對模型供應商來說,CoT 是商業機密等級的資產:它是各家模型「聰明程度」的直接體現。因此 OpenAI、Anthropic、Google 都在 API 層做了重重保護——預設不輸出完整推理、對「偷看推理」的提示注入(prompt injection)設防、並把推理鏈標記為模型輸出的受保護內部狀態。
漏洞是怎麼被發現的?
The Hacker News(8/12)報導,研究團隊在 OpenAI、Anthropic、Google 的 API 中發現了一個共通漏洞:透過精心構造的 API 請求結構,較弱的模型可以誘使較強的模型「洩漏」其內部推理鏈。
漏洞的核心在於 API 的回應結構。現代大模型的 API 支援多種輸出模式(文字、結構化 JSON、工具呼叫等),不同模式下「推理內容」的封裝方式不同。研究團隊發現,當請求同時觸發多種輸出模式時,某些模式下推理鏈會被當作一般輸出返回——只要知道觸發條件,就能繞過供應商設下的「推理摘要化」保護。
換句話說:防護機制不是不存在,而是只蓋住了預設路徑,沒蓋住所有邊角。
為什麼這比一般漏洞更嚴重?
過去 AI 安全界的共識是「能力分層」(capability tiering):強模型的能力應該與弱模型隔離,弱模型或低權限使用者不該能觸發強模型的全部潛力。這個假設是很多企業把敏感資料餵給頂級模型的前提。
這個漏洞打破了兩道防線:
1. 隔離失效:弱模型(或攻擊者透過弱模型)可以讀到強模型的完整思考過程,包括它對敏感輸入的內部判斷——這等於把「黑箱」變成了「半透明箱」。
2. 外洩升級:推理鏈往往包含比最終答案更多的資訊,例如模型如何解讀一份合約、它注意到了哪些風險點、甚至它在哪些地方「猜測」。這些中間狀態若被提取,商業機密外洩的風險比單純拿到最終答案高得多。
防禦方向:供應商與企業用戶各能做什麼?
供應商端:把推理鏈視為「不可輸出」的受保護物件,而不是「預設不輸出」——對所有輸出模式統一套用推理摘要化(reasoning summarization);在 API 層加上輸出過濾器與異常檢測,偵測大量「重複請求不同輸出模式」的行為模式。 企業用戶端:假設推理內容可能外洩,敏感資料進模型前先脫敏;對模型輸出的審計日誌(audit log)加上完整性驗證;在權限設計上,把「能呼叫 API」與「能讀取完整輸出」分開。常見問題 (FAQ)
Q1:這個漏洞影響一般 ChatGPT 使用者嗎?A:影響有限。一般網頁/App 使用者只能看到模型過濾後的輸出,攻擊需要直接操作 API 請求結構,主要風險面是開發者、企業用戶與第三方應用。
Q2:模型供應商修復了嗎?A:報導時點(8/12)供應商尚未公開回應修復時程。這類漏洞的修補方式是「對所有輸出模式統一保護」,需要逐一驗證,通常需要數週到數月。
Q3:為什麼「弱模型解碼強模型」是新聞?不是本來就有越獄(jailbreak)嗎?A:越獄是「繞過安全規則讓模型說出不該說的話」;這個漏洞是「繞過 API 結構保護,讀取模型內部推理狀態」,層次不同——前者是行為違規,後者是架構性隔離失效。
Q4:推理鏈外洩的實際風險是什麼?A:企業把機密合約、程式碼庫、商業策略餵給模型時,模型「如何分析」這些資料的過程可能被提取,等於把分析思維與中間判斷全部外流,比最終答案外洩更嚴重。
Q5:以後還能把敏感資料交給 AI 嗎?A:可以,但要分層:敏感性越高,越應選擇「推理摘要化」已完善的供應商、在地化部署(on-premise)、或對輸入先脫敏。把「AI 輸出」當作「可能可被讀取的內部狀態」來設計安全模型,是 2026 年企業 AI 治理的新常態。
留言
張貼留言