萬一 Agent 失敗時,該怎麼辦?今天我們要在 Streamlit 中展開 Agent 的每一步,並加入人工修正功能。
status == "error" 或未得出最終答案的紀錄。以下是我們將agent 輸出錯誤的用人工修正功能修正,並將原本失敗的軌跡打包成 rejected,修正過的軌跡打包成 chosen,並把這筆偏好資料加入訓練集。

這樣維護人員就可以直接在監控介面完成錯誤抓取與標註,省去在伺服器終端機翻找 Log 的痛苦!
明天我們要把這份得來不易的資料,進行資料飛輪與持續微調 (Continuous DPO)。