粤ICP备17114055号
微信扫码
与创始人交个朋友
支持私有云部署
我要投稿
检索增强思维（Retrieval Augmented Thoughts, RAT）通过迭代修订思维链来显著提高大型语言模型（LLMs）在长期生成任务（代码生成、数学推理、创意写作和具身任务规划等）中的推理和生成能力，同时大幅减轻幻觉现象。RAT方法通过检索与任务查询、当前和过去思维步骤相关的信息来逐个修订每个思维步骤，从而在初始零次CoT（链式思维）生成后进行修订。
RAT的提示策略包括以下几个步骤：
生成初始CoT：首先，LLM根据任务提示进行零次射击处理，生成一系列逐步的思考（CoT），这些思考代表了解决问题的中间步骤。
查询生成：然后，将任务提示和已经生成的CoT作为查询，用于从外部知识库中检索相关信息。
信息检索：使用检索到的信息，LLM对每个CoT步骤进行修订，以纠正可能存在的错误或幻觉。
逐步修订：LLM按照CoT的顺序逐步生成响应，每一步都基于检索到的信息和之前修订过的思考步骤进行。
最终生成：在所有CoT步骤都经过修订后，LLM将这些修订后的思考步骤整合起来，生成最终的输出。
不同大型语言模型（LLM）在创意生成任务中的推理方法示例。红色文本表示LLM生成文本中的错误或幻觉，而绿色文本代表正确的生成。没有使用RAG的方法通常会产生带有幻觉的错误信息，传统的RAG与检索到的内容高度相关但结构松散，而RAT生成的文本在准确性和完整性方面表现最佳。
53AI，企业落地应用大模型首选服务商
产品：大模型应用平台+智能体定制开发+落地咨询服务
承诺：先做场景POC验证，看到效果再签署服务协议。零风险落地应用大模型，已交付160+中大型企业
2024-03-30
2024-04-26
2024-05-14
2024-04-12
2024-05-10
2024-05-28
2024-07-18
2024-04-25
2024-05-22
2024-04-26
回到顶部