iT邦幫忙

鐵人檔案

2026 iThome 鐵人賽
回列表
AI Engineering

企業知識檢索與 RAG 工程:標註、微調、混合檢索、Rerank 與可重現評測 系列

RAG 真正困難的不是把文件放進向量資料庫,而是如何證明系統真的變好。本系列從 Query 設計、人工標註與 Qrels 建立開始,逐步比較 BM25、Dense Retrieval、Embedding 微調、Hybrid Search 與 Rerank,最後串接 RAG 並評估回答品質。透過 Hit@K、MRR、NDCG、Macro-F1、Faithfulness 等指標與 Ablation Study,建立一套可重現的企業知識檢索工程流程。

參賽天數 2 天 | 共 2 篇文章 | 0 人訂閱 訂閱系列文 RSS系列文
DAY 1

Day 01|先有評測,才有 RAG 工程:企業知識檢索不只是把文件丟進向量資料庫

做出一個 RAG Demo,其實已經不算困難。 準備文件、切 chunk、做 embedding、丟進 vector database,再把 Top-K con...

2026-09-15 ‧ 由 jackwu 分享
DAY 2

Day 02|先定義任務:企業知識檢索到底要回答什麼?

「我的 RAG 看起來答得不錯。」 這句話最大的問題不是「不錯」太主觀,而是我們根本不知道它在做哪一種任務。 使用者輸入「VPN 登入失敗怎麼處理」,系統可能需...

2026-09-16 ‧ 由 jackwu 分享