10.2 · 輸出操縱

閱讀 Databricks DASF 3.0 中 10.2「輸出操縱」相關的 2 個 AI 資安案例,查看事件證據、適用範圍與 AIDEFEND 防禦分析。

風險分類說明

攻擊者攔截模型端點與預定接收者之間的通訊,讀取或竄改輸出。模型原本的預測可能正確,送達的結果卻已被換成其他內容。這可能洩漏敏感資訊、混入錯誤資訊,或讓使用者與下游系統根據偽造結果採取行動。

框架官方來源 ↗ · 開啟互動探索 ↗

Validated Research · · 實務關聯

LiteLLM CVE-2026-89032:語意快取隔離失效導致跨使用者個資外洩與工具呼叫投毒

NVISO Labs 研究員 Tanguy Snoeck 揭露了一項影響 LiteLLM(用來統一串接與轉送多個語言模型 API 的代理閘道)的語意快取漏洞,公開資安漏洞識別編號為 CVE-2026-89032;這個問題在 v1.99.0 的受控環境獲得驗證,並已在 v1.101.0-rc.1 修補。相較於一般精確快取需要提示詞完全一模一樣才會命中,「語意快取(semantic cache)」會把提問轉成代表語意的向量嵌入(embeddings),只要後續提問的語意夠相近,就直接重用先前的模型輸出。照設計,LiteLLM 應該按 API 金鑰把快取空間分開,但在受影響版本開啟 redis-semantic 且透過 /v1/responses 呼叫時,不同 API 金鑰的請求卻會讀寫到同一區。研究團隊把相似度門檻設為 0.2 以便觀察命中,成功驗證了四種跨使用者後果:讓其他使用者讀到含測試個資的客服摘要、收到虛構的 449.99 美元促銷價、在設定成免人工核准的模擬 MCP 銀行執行非預期的轉帳(原本要求轉 50 美元,實際送給模擬工具的卻變成先前快取的 1,000 美元且收款對象也不同),以及在 pi 程式開發 Agent(v0.45.3)觸發本機 Shell 執行等狀況。

關聯理由: 閘道回應路徑將受到操縱的快取內容,交給後續呼叫者作為這次的結果。 實務上重疊的是研究設定下的共用執行期快取,或下游承接的閘道風險。研究未改動模型權重、入侵套件發布流程或接管正式的 MCP 帳號。

下游影響分別來自四個各自設有前提的受控情境,共通起點是有問題的快取區隔。

AIA · 閱讀完整案例 ↗ · SecureFlow · 閱讀完整案例 ↗

Incident ·

惡意 LLM API 路由器:agent 工具呼叫被改寫的供應鏈風險

第三方 LLM API 路由器表面上只是幫 agent 轉接不同模型,但它其實站在 agent 和上游模型中間。提示詞、工具定義、API key 和工具呼叫的 JSON 內容,都會先經過這一層。 所以如果路由器本身是惡意的,或後來遭到入侵,攻擊者不一定要破解模型;他可以直接在中途改掉工具參數,讓 agent 執行不同指令(例如:論文示範把 Bash 工具原本要下載的正常安裝腳本網址,換成攻擊者腳本的網址;工具名稱和 JSON 格式都不用改),也可以偷走傳輸中的 secrets。因此,路由器選擇、路由政策、工具執行前檢查和請求記錄,都應該一起納入 agent 供應鏈治理。

關聯理由: 不受信任 router 在推論後竄改工具 JSON 或讀取流經資料。 此處對應「輸出操縱」:攻擊者攔截模型端點與預定接收者之間的通訊,讀取或竄改輸出。

不受信任 router 在推論後竄改工具 JSON 或讀取流經資料。

AIA · 閱讀完整案例 ↗