Yihui’s Blog

RAG系统的评测指标有哪些?如何评估检索质量和生成质量?

日期:2026-09-27
标签:#面试 #AI应用开发 #RAG #知识工程
难度:中等
来源:牛面题目详情

一句话答案

RAG评测要拆开看检索是否找到证据、生成是否忠于证据,以及端到端回答是否真正解决问题。

面试回答要点

  • 检索可看Recall@K、MRR、NDCG和相关片段覆盖率。
  • 生成可看忠实度、答案相关性、正确性和引用支撑率。
  • 用有标注的数据集结合人工复核,并监控延迟、成本和拒答表现。

自测

  • 不看笔记,用 60 秒回答:RAG系统的评测指标有哪些?如何评估检索质量和生成质量?
  • 结合自己的项目,补充一个具体场景、指标或取舍。
Maintained by · YihuiEdit on GitHub

Keep reading

View all posts

RAG 系统中如何处理多跳问答(Multi-hop QA)?

日期:2026-09-27 标签:#面试 #AI应用开发 #RAG #多跳问答 难度:困难 原题:牛面题目详情 一句话答案 多跳问答要找齐相互依赖的证据:把复杂问题拆成子问题,按依赖顺序检索并验证每一跳,再基于完整证据链作答和引用;证据不足时继续检索或拒答。 面试口语版(约 60 秒) 普通 RAG 用原问题检索…

Read article

题目模板:把用户提问写成面试与学习笔记

复制本文件的结构到对应题目文件,替换提示文字;没有解释价值的小节可以删去。不要把待填提示或未经核验的事实当作答案发布。 (填写题目原文) 日期:YYYY-MM-DD 标签:#面试 #AI应用开发 #RAG #知识工程 难度:(按题目实际难度填写) 来源:(若改写已有题目,填原题直达链接;自拟题写“用户提问”,不要…

Read article