2024-12-24 15:17
用於評估 RAG 系統的 2 大指標 🚀
1️⃣ 命中率 (Hit Rate)
用來評估「相關結果有多容易出現在前 n 名」:
查詢「咖啡」,結果前 5 名中有相關內容,即算命中。
10 次查詢中有 8 次命中,命中率 = 0.8(越高越準確!)
2️⃣ MRR (平均倒數排名)
關鍵在「多快找到相關內容」:
排名越靠前,得分越高(如第 1 名 = 1,第 3 名 = 0.33)。
例如,3 次查詢排名為 1、3 和 2,MRR = 0.61。
這兩個指標是調整 RAG 系統超參數的利器! 🔧