RAG成败不只取决于模型
文档质量、切分策略、权限和评测往往比更换大模型更影响最终效果。
识别有效版本、重复文件、格式和更新责任。
检索结果不能突破原系统的访问边界。
针对业务语料验证召回率和答案依据。
答案提供来源,支持人工复核和审计。
验收方法
用企业真实问题集验证,而不是只展示几个精心准备的演示问题。
按部门和场景建立标准测试题。
检查正确文档是否进入候选与最终上下文。
评估准确性、完整性、拒答和引用。
验证不同身份看不到无权限资料。
先确认业务目标,再决定模型和算力
告诉我们目标模型、用户规模、数据边界和现有环境,我们将梳理容量边界、实施路线与验收标准。