大家好,昨天我們聊完了強制性的歐盟 AI 法案。今天我們要來看另一個在實務合規上極具權重、也是多數企業落地 AI 風險管理的事實標準:NIST AI RMF(N...
前言
今天終於要實際以 AgentDojo 進行測試攻擊產生、環境注入、模型執行以及最後的判定函式了。
通常一個評測單元正常結束後,我們會好奇紀錄中的 se...
做到 Day 19,Agent 已經能呼叫真實模型,也有輸入、檢索、工具和後端授權邊界。接下來最容易讓資料越積越多的功能,是記憶。
記住「這台測試筆電是 Win...
昨天把CaMeL跑起來之後replan迴圈失控把20次免費API額度全部燒光,今天來想辦法解決然後繼續做吧。
原本以為免費API根本撐不住benchmark,甚...
前言
Day 11 的工具呼叫不再直接由模型觸發,中間插了一層 CapabilityManager,runtime 先確認 agent 有沒有使用某個工具的能力...
兩個系列,一個閉環
8 月的主題一 Day4 介紹過數位發展部的《人工智慧風險分類框架》,Day29 做了 MODA × OWASP × SAIF 的三框架對照...