我要投稿

清华开源LongCite，如何提高大模型的溯源能力？

发布日期：2024-09-07 10:03:27 浏览次数： 2867

作者：NLP前沿

微信搜一搜，关注“NLP前沿”

溯源/引用，工业界应用老板们最喜欢加的一个东西。总的来说，这个文章也没啥。做了一个评测基准，开源了一个用于溯源sft的45k数据集，开源了2个模型，介绍了他们的数据生成pipeline。

hf-dataset:https://huggingface.co/datasets/THUDM/LongCite-45k
model 1:https://huggingface.co/THUDM/LongCite-glm4-9b
model 2:https://huggingface.co/THUDM/LongCite-llama3.1-8b
github: https://github.com/THUDM/LongCite

主要看看数据生成的pipeline把，如下图：3步+1步过滤（为啥不一步到位了，说是这样更干净，先出答案，在生成引用）

QA数据生成：LLM生成与给定长文本相关的查询和答案。
块级引用生成：给chunk标上引用，结合问题，答案，生成带引用的chunk级别qa数据
句子级引用提取：从每个chunk引用中提取出支持每个陈述的相关句子，生成细粒度引用。
过滤，丢弃引用数量不足的样本。

数据比例，中文占比比较多。可以比较好的利用私有场景~

整体就是效果更好

53AI，企业落地大模型首选服务商

产品：场景落地咨询+大模型应用平台+行业解决方案

承诺：免费POC验证，效果达标后再合作。零风险落地应用大模型，已交付160+中大型企业

相关资讯

2025-12-22

Notesnook：一款完全开源、以隐私为核心的笔记应用

2025-12-22

一文彻底看懂 Google 最新开源 A2UI 协议：如何让 AI Agent “说出UI” ？

2025-12-22

火线解析MiniMax招股书！全球领先大模型成本只有OpenAI 1%，果然拳怕少壮

2025-12-21

Benotes：一款功能强大、易于安装和使用的开源笔记与书签一体化应用

2025-12-21

告别每月 AI 订阅费！这款开源笔记内置 Ollama，让你的电脑变身第二大脑

2025-12-20

开口跪！这款开源TTS让AI说话带“情绪”，还能多语言克隆！

2025-12-20

ollama v0.13.5 发布详解：新模型接入、引擎升级与工具能力增强

2025-12-19

小米大模型Mimo-V2-Flash本地部署

了解更多

了解更多

160+中大型企业正在使用53AI

立即咨询预约演示

把握AI发展的机遇，共同探索、共同进步

2025-01-22

如何打造基于GenAI的员工服务机器人

2025-01-22

热点资讯

全新AI编程工具 Google Antigravity 实测，特别适合产品经理

2025-11-19

DeepSeek又开源，这次是OCR模型！附论文解读！

2025-10-20

发现一个超神的Github开源OCR项目，国产多模态杀疯了

2025-10-27

MiniMax悄悄发布M2，8%价格打出Claude级性能

2025-10-27

如愿以偿！Qwen3-VL再开源30B-A3B，附实测！

2025-10-03

DeepSeek-V3.2背后的国产算子编程语言TileLang是什么？如何保持性能领先的同时减少6倍代码量？

2025-09-29

让白宫“破防”的阿里千问，我替你们测了...

2025-11-17

n8n如何调用最近爆火的deepseek OCR？

2025-10-29

DeepSeek-V3.2-Exp开源，附论文细节解读！

2025-09-29

最强开源0.9B级OCR模型！PaddleOCR-VL本地一键部署，私密性拉满【喂饭级教程】

2025-11-07

大家都在问

一文彻底看懂 Google 最新开源 A2UI 协议：如何让 AI Agent “说出UI” ？

2025-12-22

我们为什么选择 Spring AI 开发智能体，而不是 Dify？

2025-11-12

开源安全审核模型终极PK：Qwen3Guard、OpenAI-SafeGuard、Llama4-Guard谁才是王者？

2025-11-10

DeepSeek-OCR到底厉害在哪？

2025-11-03

n8n如何调用最近爆火的deepseek OCR？

2025-10-29

小红书入局AI智能体开源DeepAgent，在计划什么更新？

2025-10-28

埃森哲的大裁员，向市场发出了什么信号？

2025-10-13

DeepSeek-V3.2背后的国产算子编程语言TileLang是什么？如何保持性能领先的同时减少6倍代码量？

2025-09-29

热门标签

内容创作大模型技术个人提效 langchain llamaindex 多模态技术 RAG技术智能客服知识图谱模型微调 RAGFlow coze Dify Fastgpt Bisheng Qanything AI+汽车 AI+金融 AI+工业 AI+培训 AI+SaaS 提示词框架提示词技巧 AI+电商 AI面试数字员工 ChatBI AI知识库开源大模型智能营销智能硬件智能化改造 AI+医疗 MaxKB Palantir Glean

应聘简历请发送至： ceo@53ai.com

联系我们

售前咨询

预约演示

微信扫码

添加专属顾问

回到顶部