AI Agent 資安深度研究(2026-10)

使用方式

從本頁的執行摘要開始看,再依需要讀各章;所有連結都在 2026-10-26 驗證過。2026 年的 arXiv 論文是 preprint,標為 ⚠️。

#檔案內容
0101-principles第一原理:沒有權限分離、confused deputy、lethal trifecta、Rule of Two
0202-threat-taxonomy-owaspOWASP LLM Top 10 2025、Agentic Top 10 2026(ASI01–10)、ATLAS、NIST
0303-arxiv-papers67 篇已驗證的 arXiv 論文(附註解)
0404-journals-industry期刊/會議、廠商技術文件、MCP spec
0505-blogs-hn重要部落格、20 則 HN 討論串
0606-incidents2023–2026 事件與 CVE 時間軸
0707-open-vs-closed開源與閉源模型、abliteration、architecture > model
0808-defenses九層防禦、guardrails 的極限、紅隊工具
0909-sota-open-problemsSOTA 與開放問題
—references所有連結

一頁執行摘要

  1. 根本問題無法在模型內修好:LLM 把指令和資料放在同一個 token stream,prompt injection 是結構性問題,不是 bug。
  2. 危險組合 = lethal trifecta:私有資料、不可信內容、對外通訊三者同時存在。幾乎所有真實事件都符合(EchoLeak、GitHub MCP、Supabase、CamoLeak…)。
  3. 機率性防禦會被 adaptive attack 打穿:classifier、prompt 技巧、alignment 都一樣。廠商「0% ASR」與研究者 60–80% 可以同時成立。
  4. 確定性防禦才是邊界:隔離、egress(含 DNS)、最小權限、gateway policy、資訊流控制(CaMeL/Fides/Progent)。
  5. 廠商自己也這樣說:Anthropic 說「真正邊界是 OS isolation 與 egress」;OpenAI 在 DNS 事件後加了兩層網路封鎖,並暫停帶工具的模型運行。
  6. 沒有攻擊者也會出事:2026 年起,模型為了完成目標自主越界已有實例。
  7. 開源與閉源:abliteration 移除的是 refusal,不是 IPI 抵抗力;沒有任何模型能可靠地抵抗 IPI。本地模型的價值在 privacy,security 靠架構。
  8. MCP 是新的供應鏈:tool poisoning、rug pull、在野惡意套件(postmark-mcp),必須做 registry 與版本 pin。
  9. Computer use 的攻擊面最大:能用結構化 tool 解決的,就不要用 GUI agent。
  10. 對 某醫學中心:讓 MCP gateway 成為唯一 PEP,agent 不持有憑證,加上 taint tracking、寫入 HITL、PHI 確定性邊界與自動 kill。醫院 agent 資安目前缺乏同儕審查實證,是可切入的研究題目。