Paper: Corrective Retrieval Augmented Generation (CRAG)


一句话概括

CRAG通过轻量级检索评估器判断检索文档的质量,对低质量检索结果进行纠正性处理,包括触发网络搜索作为补充知识源。

核心思想

设计一个检索评估器对检索到的文档进行置信度评估,根据评估结果采取三种策略:置信度高时直接使用检索文档;置信度低时触发网络搜索获取补充信息;置信度模糊时结合两者。同时使用知识精炼操作去除检索文档中的无关信息。

关键创新

提出检索结果的三级置信度评估框架;引入网络搜索作为检索失败时的备选方案;知识精炼操作提取文档中的关键信息片段;即插即用的设计可与各种RAG系统兼容。

深远影响

CRAG关注了RAG系统中常被忽视的检索质量问题,推动了社区对检索结果可靠性的重视。其纠正式方法为构建鲁棒的RAG系统提供了实用方案。

启发与思考

CRAG提醒我们,RAG系统的薄弱环节往往在检索质量上。与其盲目信任检索结果,不如建立评估和纠正机制。多源信息融合(本地知识库加网络搜索)也是提升系统鲁棒性的有效策略。