iT邦幫忙

鐵人檔案

2026 iThome 鐵人賽
回列表
AI Security

30 天認識 AI Security:從 LLM 攻擊到 AI 防禦 系列

隨著大型語言模型與 AI Agent 逐漸被整合進各種應用,AI 也帶來了新的資安風險,本系列將用 30 天從基礎開始認識 AI Security,介紹 LLM 的運作方式、Prompt Injection、Jailbreak、資料外洩等常見威脅,並進一步探討 Guardrails、權限控管、RAG Security、AI Agent Security、Red Team 與防禦策略,希望從攻擊與防禦兩個角度建立完整的 AI Security 基礎。

鐵人鍊成 | 共 30 篇文章 | 2 人訂閱 訂閱系列文 RSS系列文
DAY 21

Day 21|Logging & Monitoring:AI 被攻擊時我們看得到嗎?

今天要介紹的 Logging & Monitoring(日誌紀錄與監控)主要是在說如果真的有人正在攻擊我們的 AI,我們知道嗎?那首先來說說 Loggi...

2026-09-20 ‧ 由 chichi9999 分享
DAY 22

Day 22|AI Agent:當 AI 從回答問題變成自己完成任務

前面三週我們介紹了不少 AI Security 的攻擊與防禦方式,到了第四週我想把前面學過的東西組合起來,看看現在很常被討論的 AI Agent,AI Agen...

2026-09-21 ‧ 由 chichi9999 分享
DAY 23

Day 23|Tool Calling Security:AI 可以呼叫 API,那誰來決定它能做什麼?

繼昨天的 AI Agent,今天就先介紹 Tool Calling,其實就是使用者不需要自己指定要執行哪個 Function,LLM 可以根據需求判斷要使用哪個...

2026-09-22 ‧ 由 chichi9999 分享
DAY 24

Day 24|MCP Security:當 AI 開始連接各種外部工具

MCP(Model Context Protocol,模型上下文協定)是由開發 AI 助理 Claude 的美國新創公司 Anthropic 於 2024 年...

2026-09-23 ‧ 由 chichi9999 分享
DAY 25

Day 25|Agent Memory Security:AI 的記憶也可能被攻擊嗎?

Agent Memory 是什麼? LLM 本身不是真的像人類一樣把所有對話永久記在腦中,實際的 AI Application 通常需要透過額外的系統把需要長期...

2026-09-24 ‧ 由 chichi9999 分享
DAY 26

Day 26|AI Supply Chain Security:你下載的 Model 真的安全嗎?

前幾天我們介紹了 AI Agent、MCP 與 Memory,但一個 AI 系統通常不會全部從零開始開發,實際開發時我們可能會使用開源 Model、Datase...

2026-09-25 ‧ 由 chichi9999 分享
DAY 27

Day 27|AI Red Team:如果今天換我們來攻擊自己的 AI 系統呢?

前面幾天我們介紹了很多攻擊跟防禦方式,系統做完這些防禦之後我們怎麼知道它真的擋得住攻擊?其中一種方法就是 AI Red Teaming(AI 紅隊測試),Red...

2026-09-26 ‧ 由 chichi9999 分享
DAY 28

Day 28|AI Blue Team:找到攻擊之後要怎麼防守?

上一篇介紹了 AI Red Team,它的工作是站在攻擊者的角度主動測試自己的 AI 系統,既然有負責攻擊的 Red Team,自然也會有負責防守的 Blue...

2026-09-27 ‧ 由 chichi9999 分享
DAY 29

Day 29|實戰設計:如果今天要做一個安全的 AI Assistant 應該怎麼設計?

先決定 AI 到底需要做什麼 假設公司希望做一個內部 AI Assistant,員工可以詢問:「今年特休有幾天?」「公司的報帳規定是什麼?」「幫我找專案 A 的...

2026-09-28 ‧ 由 chichi9999 分享
DAY 30

Day 30|30 天 AI Security 總結:從完全不懂到建立自己的 AI Security 思維

終於來到第 30 天,這 30 天從 AI Security 到底是什麼開始,一路介紹到 Prompt Injection、RAG、AI Agent、MCP、R...

2026-09-29 ‧ 由 chichi9999 分享