前面幾篇已經聊過 Prompt Injection、Jailbreak、間接注入和多模態注入,今天開始實際動手做,我們用的靶場是 Break The Promp...
在哈利波特的世界中,夜行巷(Knockturn Alley,或譯為翻倒巷)是個充滿黑魔法,既破舊又骯髒的小巷,同時也是專門販售各種邪惡與危險物品的波金與伯克氏商...
前言
昨天列了四項要做的事,今天做回傳給模型的內容,以及重擬的額度怎麼算,想辦法解決擋得住攻擊但任務跟著死的情境。
回傳什麼給模型
CaMeL原本遇到錯誤是把整...
談 AI Security 先別急著記名詞,要先知道兩個核心問題:保護誰?威脅來自誰?
Security of AI|保護 AI,抵禦外部攻擊包含 Prompt...
hihi,我是歐娜😺
昨天提到,AI 資安麻煩的地方之一,是模型要自己去「理解」文字。
那如果今天 AI 真的出事了呢?
例如它突然講出一段不該講的內容,我們第...
上一篇我們把 Agent 拆成模型、工具、記憶、設定檔與自主迴圈,但當工具越接越多,就碰到一個工程問題:不同的 AI 應用,能不能用一種共同語言去連這些東西?...