我要投稿

DR-RAG：将动态文档相关性应用于问答型RAG技术！

发布日期：2024-07-19 20:02:44 浏览次数： 1853

01。

概述

DR-RAG是一个两阶段的检索流程，专注于通过在问答数据集上执行多跳过程仅调用一次大型语言模型（LLM）。这种方法表明可以在答案的准确性上实现显著的提升。

研究发现，在检索过程中，需要选择对生成答案具有高度相关性和决定性影响的文档。这些文档被称为静态相关文档。

同时，还存在一些相关性较低但对答案生成过程至关重要的文档。这些文档被称为动态相关文档。

02。

DR-RAG

如下方图表所示，示例查询“彼得·安德烈亚斯·海伯格的孩子的配偶是谁？”

这个查询需要检索两个最相关的文档以提供准确的答案。由于静态相关文档与查询直接相关，例如“彼得·安德烈亚斯·海伯格”和“孩子/儿子”，因此相对容易检索。

然而，检索动态相关文档存在挑战，因为它们与查询只有间接关联，例如配偶/妻子。

此外，知识库中关于配偶的大量信息可能导致动态相关文档在检索过程中排名较低。

值得注意的是，静态和动态相关文档之间存在高度相关性，例如约翰·路德维希·海伯格和他的妻子。在查询时考虑“配偶/妻子”可以促进动态相关文档的检索，从而实现准确答案的提取。

研究指出，需要在多个文档之间创造协同效应，并确立上下文相关性，这不仅仅是从单一文档中获得，而是从所有相关且适用的文档中综合得出。

DR-RAG被描述为一种多跳问答框架。这一框架在很多方面都让人联想到此前在这方面的研究工作。

DR-RAG的不同之处可能在于研究者设计的分类器，该分类器通过设定预定义的阈值来确定检索到的文档是否对当前查询有所贡献。

这一机制旨在减少冗余文档，确保检索到的文档简洁高效。

参考下图，这是DR-RAG的概览：

步骤1：根据与查询的高度相关性，检索静态相关文档（SR-文档）。
步骤2：将SR-文档与查询连接，以检索多个动态相关文档（DR-文档）。
步骤3：单独选取每个DR-文档，并将其与查询和SR-文档结合。将这些组合输入到分类器中，以确定最相关的DR-文档。

随着RAG实现的普及，研究强调了优化与大型语言模型的交互以降低延迟和成本，以及通过代理型RAG过程综合多个文档以提供满意答案的必要性。

53AI，企业落地应用大模型首选服务商

产品：大模型应用平台+智能体定制开发+落地咨询服务

承诺：先做场景POC验证，看到效果再签署服务协议。零风险落地应用大模型，已交付160+中大型企业

160+中大型企业正在使用53AI

立即咨询预约演示

百度智能云邀53AI：共创AI新纪元，启航智能新时代

2024-05-27

钉钉恒星计划：53AI与百余位企业家及钉钉生态伙伴，共议“AI 浪潮下的新机遇”

2024-05-22

热点资讯

GraphRAG+Ollama 本地部署，保姆教程，踩坑无数，闭坑大法

2024-07-18

微软开源的GraphRAG解读

2024-07-09

RAGFlow：基于OCR和文档解析的下一代 RAG 引擎

2024-05-05

深入解析 Graph RAG：提升语言模型问答能力的创新策略

2024-07-09

基于Llama 3 构建RAG语音助手：将本地 RAG 与 Qdrant、Whisper 和 LangChain 集成

2024-05-19

RAG框架，都在这了!

2024-06-20

Prompt工程师必备：复旦重磅 | 最佳RAG实践长什么样的？

2024-07-07

下一代 RAG 技术来了！微软正式开源 GraphRAG：大模型行业将迎来新的升级？

2024-07-07

GraphRAG：终极 RAG 引擎 - 语义搜索、嵌入、矢量搜索等等！

2024-07-08

【文档智能 & RAG】RAG增强之路：增强PDF解析并结构化技术路线方案及思路

2024-07-09

大家都在问

RAG vs ICL：AI大模型的记忆术和临场发挥，谁才是最强辅助？

2024-11-06

企业如何从0到1构建RAG系统？

2024-11-06

RAG 系统的分块难题：小型语言模型如何找到最佳断点？

2024-11-05

实操｜如何优雅的实现RAG与GraphRAG应用中的知识文档增量更新？

2024-11-04

全网最全国内Agent平台深度测评：扣子、Dify、FastGPT，谁是你的Agent开发首选？

2024-10-27

微软研究院新突破：如何让AI在专业领域更靠谱？

2024-10-25

语义分块真的有效吗？

2024-10-21

突破传统RAG局限：GraphRAG如何提升大模型问答能力？

2024-10-21

开箱即用的企业大模型应用平台

工作+AI

业务+AI

AIx业务

大模型咨询

大模型定制

相关资讯

160+中大型企业正在使用53AI

百度智能云邀53AI：共创AI新纪元，启航智能新时代

钉钉恒星计划：53AI与百余位企业家及钉钉生态伙伴，共议“AI 浪潮下的新机遇”

热点资讯

GraphRAG+Ollama 本地部署，保姆教程，踩坑无数，闭坑大法

微软开源的GraphRAG解读

RAGFlow：基于OCR和文档解析的下一代 RAG 引擎

深入解析 Graph RAG：提升语言模型问答能力的创新策略

基于Llama 3 构建RAG语音助手：将本地 RAG 与 Qdrant、Whisper 和 LangChain 集成

RAG框架，都在这了!

Prompt工程师必备：复旦重磅 | 最佳RAG实践长什么样的？

下一代 RAG 技术来了！微软正式开源 GraphRAG：大模型行业将迎来新的升级？

GraphRAG：终极 RAG 引擎 - 语义搜索、嵌入、矢量搜索等等！

【文档智能 & RAG】RAG增强之路：增强PDF解析并结构化技术路线方案及思路

大家都在问

RAG vs ICL：AI大模型的记忆术和临场发挥，谁才是最强辅助？

企业如何从0到1构建RAG系统？

RAG 系统的分块难题：小型语言模型如何找到最佳断点？

实操｜如何优雅的实现RAG与GraphRAG应用中的知识文档增量更新？

全网最全国内Agent平台深度测评：扣子、Dify、FastGPT，谁是你的Agent开发首选？

微软研究院新突破：如何让AI在专业领域更靠谱？

语义分块真的有效吗？

突破传统RAG局限：GraphRAG如何提升大模型问答能力？

热门标签