RAG成敗不只取決於模型
文件品質、切分策略、權限和評測往往比更換大模型更影響最終效果。
識別有效版本、重複文件、格式和更新責任。
檢索結果不能突破原系統的存取邊界。
針對業務語料驗證召回率和答案依據。
答案提供來源,支援人工覆核和稽核。
驗收方法
用企業真實問題集驗證,而不是只展示幾個精心準備的示範問題。
按部門和場景建立標準測試題。
檢查正確文件是否進入候選與最終上下文。
評估準確性、完整性、拒答和引用。
驗證不同身份看不到無權限資料。
先確認業務目標,再決定模型與算力
告訴我們目標模型、使用者規模、資料邊界和現有環境,我們將梳理容量邊界、實施路線與驗收標準。