我要投稿

KAG来了，RAG慌了！

发布日期：2024-10-31 12:19:20 浏览次数： 1977 来源：NLP前沿

上个周，OpenSPG 开源了KAG 框架，通过利用知识图谱和向量检索的优势，在四个方面双向增强LLM和知识图谱，以解决 RAG 存在的挑战（RAG 存在着向量相似度与知识推理相关性差距大、对知识逻辑（如数值、时间关系、专家规则等）不敏感等问题，这些都阻碍了专业知识服务的落地。）。

整个框架包括kg-builder和kg-solver两部分

kg-builder实现了对LLM友好的知识表示，支持无schema约束的信息提取和有schema约束的专业知识构建，并支持图结构与原始文本块之间的互索引表示。
kg-solver采用逻辑形式引导的混合求解和推理引擎，包括规划、推理和检索三种类型的运算符，将自然语言问题转化为结合语言和符号的问题求解过程。

知识表示：

KAG参考了DIKW（数据、信息、知识和智慧）的层次结构，将SPG升级为对LLM友好的版本，能够处理非结构化数据、结构化信息和业务专家经验。采用版面分析、知识抽取、属性标化、语义对齐等技术，将原始的业务数据&专家规则融合到统一的业务知识图谱中。

推理步骤：

将自然语言问题转换成可执行的逻辑表达式，此处依赖的是项目下的概念建模，可参考黑产挖掘文档。
将转换的逻辑表达式提交到 OpenSPG reasoner 执行，得到用户的分类结果。
将用户的分类结果进行答案生成。

效果如何？

KAG在多跳问答任务中表现优异，相较于其他方法如NaiveRAG、HippoRAG等，在hotpotQA上的F1分数提高了19.6%，在2wiki上的F1分数提高了33.5%。

53AI，企业落地应用大模型首选服务商

产品：大模型应用平台+智能体定制开发+落地咨询服务

承诺：先做场景POC验证，看到效果再签署服务协议。零风险落地应用大模型，已交付160+中大型企业

160+中大型企业正在使用53AI

立即咨询预约演示

百度智能云邀53AI：共创AI新纪元，启航智能新时代

2024-05-27

钉钉恒星计划：53AI与百余位企业家及钉钉生态伙伴，共议“AI 浪潮下的新机遇”

2024-05-22

热点资讯

GraphRAG+Ollama 本地部署，保姆教程，踩坑无数，闭坑大法

2024-07-18

一文彻底搞懂大模型 - RAG（检索、增强、生成）

2024-09-04

RAGFlow：基于OCR和文档解析的下一代 RAG 引擎

2024-05-05

RAG框架，都在这了!

2024-06-20

基于Llama 3 构建RAG语音助手：将本地 RAG 与 Qdrant、Whisper 和 LangChain 集成

2024-05-19

微软开源的GraphRAG解读

2024-07-09

深入解析 Graph RAG：提升语言模型问答能力的创新策略

2024-07-09

Prompt工程师必备：复旦重磅 | 最佳RAG实践长什么样的？

2024-07-07

RAG 高效应用指南：Embedding 模型的选择和微调

2024-06-13

下一代 RAG 技术来了！微软正式开源 GraphRAG：大模型行业将迎来新的升级？

2024-07-07

大家都在问

Zilliz落地垂直RAG：为什么说医疗场景中，LLM只是半成品？

2024-12-30

影响RAG检索效果的原因有那些？

2024-12-27

在推荐、RAG等业务中，如何完成亿级向量的快速检索？

2024-12-26

除了混合搜索，RAG 还需要哪些基础设施能力？

2024-12-24

构建行业RAG应用系统：金融、财务、保险、医疗等行业该怎么做？

2024-12-21

为什么分块在RAG技术中很重要？但又很没有存在感？

2024-12-14

比GraphRAG还好的LightRAG到底是何方神圣？

2024-12-01

企业级RAG应用的5大技术发展趋势，你准备好了吗？

2024-11-27

开箱即用的企业大模型应用平台

工作+AI

业务+AI

AIx业务

大模型咨询

大模型定制

相关资讯