AI知识库

53AI知识库

学习大模型的前沿技术与行业应用场景


RecAI:开源AI推荐系统,用Agent来完成推荐的各环节,终于能刷到自己喜欢的内容了!
发布日期:2024-05-26 20:10:16 浏览次数: 2217 来源:开源AI项目落地


项目简介

RecAI是为了探索如何将大型语言模型(LLM)融入推荐系统,以增强推荐系统的交互性、可解释性和可控性。该项目通过采用全面的视角和方法,整合实际应用中的需求,发展出一系列技术,包括推荐AI代理、通过个性化提示注入知识、将语言模型作为推荐器进行微调、评估以及作为模型解释器。最终目标是创造一个更加复杂、互动和以用户为中心的推荐系统。




推荐人工智能代理

LLM(大型语言模型)提供自然交互并聪明地响应人类指令,但缺乏特定领域的专业知识。相比之下,传统推荐系统在领域数据训练方面表现出色,但仅限于结构化数据并缺乏交互性。InteRecAgent介绍了一种结合两者优势的AI代理:它使用LLM作为大脑,传统推荐模型作为工具。因此,传统模型如矩阵分解可以转化为对话式、交互式和可解释的推荐系统。



InteRecAgent(交互式推荐代理)是一个框架,用于利用预训练的特定领域推荐工具(如SQL工具、基于ID的推荐模型)和大型语言模型(LLM)来实现一个交互式的对话推荐代理。在此框架中,LLM主要负责与用户交互并解析用户兴趣作为输入给推荐工具,这些推荐工具负责寻找合适的项目。


在InteRecAgent框架中,推荐工具分为三个主要类别:查询、检索和排名。你需要提供LLM和预配置的特定领域推荐工具的API,以便使用InteRecAgent框架构建一个交互式推荐代理。在InteRecAgent中,既不更新LLM,也不修改推荐工具。



InteRecAgent包含的必要组件:


·LLM:一个大型语言模型,作为对话代理。


·物品信息表:一个包含物品信息的表格,其列包括id、标题、标签、描述、价格、发布日期、访问数量等。


·查询模块:一个SQL模块,用于在物品信息表中查询物品信息。


·检索模块:该模块旨在根据用户的意图(需求)从所有物品中检索物品候选者。注意,该模块不处理与用户个人资料相关的事务,如用户历史、用户年龄等。相反,它专注于用户所需,如“给我一些体育游戏”,“我想要一些受欢迎的游戏”。


·排名模块:根据模式(受欢迎度、相似性、偏好)优化物品候选者的排名。用户偏好包括喜好和不想要的。该模块可以是一个传统的推荐模型,输入用户和物品特征,输出相关分数。



选择性知识插件

如何在不对模型进行微调的情况下增强LLM的特定领域能力?关键在于提示。在这项工作中,我们引入了一种增强LLM的方法,使其能够注入大规模、持续演变和特定领域的数据模式。



嵌入式推荐语言模型

密集检索是推荐系统和检索增强生成(RAG)等场景中的关键组成部分。尽管生成语言模型如GPT是为顺序令牌生成而设计的,但它们并不适用于检索导向的嵌入。我们的项目RecLM-emb正是为此而生,它与文本嵌入模型如text-embedding-ada-002保持一致,但专门针对项目检索进行了优化。目前它仅支持文本模态,如搜索查询、项目描述和用户指令。



生成推荐语言模型

需要注意的是,不同领域的数据模式有显著差异,这意味着通用LLM可能无法在特定领域内提供优化性能。为适应特定领域数据模式、以领域项目目录为基础、增强指令执行能力,本项目讨论了为推荐系统微调生成语言模型的过程,称为RecLM-gen。技术包括监督式微调(SFT)和强化学习(RL)。此方法的潜在应用包括排名器、对话推荐器和用户模拟器。


推荐模型解释器

基于深度学习的推荐系统广泛用于各种在线服务,这归功于它们在有效性和效率上的优越性。然而,这些模型通常缺乏可解释性,这使得它们对用户和开发者来说都不够可靠和透明。在这项工作中,我们提出了一种新的推荐系统模型解释方法,称为RecExplainer,通过使用LLM作为替代模型,学习模仿和理解目标推荐模型。



推荐评估器

评估对于准确评估模型的真实能力和识别改进的弱点至关重要。在使用语言模型作为推荐器的时代,其评估方法已大幅偏离传统风格。本项目旨在为基于LM的推荐系统提供全面的评估服务。无论是提供了训练有素的LM还是API(如Azure OpenAI API),它都能从多个角度评估模型的性能,包括检索、排名、解释能力和一般AI能力。


项目链接

https://github.com/microsoft/RecAI


53AI,企业落地应用大模型首选服务商

产品:大模型应用平台+智能体定制开发+落地咨询服务

承诺:先做场景POC验证,看到效果再签署服务协议。零风险落地应用大模型,已交付160+中大型企业

联系我们

售前咨询
186 6662 7370
预约演示
185 8882 0121

微信扫码

与创始人交个朋友

回到顶部

 
扫码咨询