微信扫码
与创始人交个朋友
我要投稿
项目简介
RecAI是为了探索如何将大型语言模型(LLM)融入推荐系统,以增强推荐系统的交互性、可解释性和可控性。该项目通过采用全面的视角和方法,整合实际应用中的需求,发展出一系列技术,包括推荐AI代理、通过个性化提示注入知识、将语言模型作为推荐器进行微调、评估以及作为模型解释器。最终目标是创造一个更加复杂、互动和以用户为中心的推荐系统。
推荐人工智能代理
LLM(大型语言模型)提供自然交互并聪明地响应人类指令,但缺乏特定领域的专业知识。相比之下,传统推荐系统在领域数据训练方面表现出色,但仅限于结构化数据并缺乏交互性。InteRecAgent介绍了一种结合两者优势的AI代理:它使用LLM作为大脑,传统推荐模型作为工具。因此,传统模型如矩阵分解可以转化为对话式、交互式和可解释的推荐系统。
InteRecAgent(交互式推荐代理)是一个框架,用于利用预训练的特定领域推荐工具(如SQL工具、基于ID的推荐模型)和大型语言模型(LLM)来实现一个交互式的对话推荐代理。在此框架中,LLM主要负责与用户交互并解析用户兴趣作为输入给推荐工具,这些推荐工具负责寻找合适的项目。
在InteRecAgent框架中,推荐工具分为三个主要类别:查询、检索和排名。你需要提供LLM和预配置的特定领域推荐工具的API,以便使用InteRecAgent框架构建一个交互式推荐代理。在InteRecAgent中,既不更新LLM,也不修改推荐工具。
InteRecAgent包含的必要组件:
·LLM:一个大型语言模型,作为对话代理。
·物品信息表:一个包含物品信息的表格,其列包括id、标题、标签、描述、价格、发布日期、访问数量等。
·查询模块:一个SQL模块,用于在物品信息表中查询物品信息。
·检索模块:该模块旨在根据用户的意图(需求)从所有物品中检索物品候选者。注意,该模块不处理与用户个人资料相关的事务,如用户历史、用户年龄等。相反,它专注于用户所需,如“给我一些体育游戏”,“我想要一些受欢迎的游戏”。
·排名模块:根据模式(受欢迎度、相似性、偏好)优化物品候选者的排名。用户偏好包括喜好和不想要的。该模块可以是一个传统的推荐模型,输入用户和物品特征,输出相关分数。
选择性知识插件
如何在不对模型进行微调的情况下增强LLM的特定领域能力?关键在于提示。在这项工作中,我们引入了一种增强LLM的方法,使其能够注入大规模、持续演变和特定领域的数据模式。
嵌入式推荐语言模型
密集检索是推荐系统和检索增强生成(RAG)等场景中的关键组成部分。尽管生成语言模型如GPT是为顺序令牌生成而设计的,但它们并不适用于检索导向的嵌入。我们的项目RecLM-emb正是为此而生,它与文本嵌入模型如text-embedding-ada-002保持一致,但专门针对项目检索进行了优化。目前它仅支持文本模态,如搜索查询、项目描述和用户指令。
生成推荐语言模型
需要注意的是,不同领域的数据模式有显著差异,这意味着通用LLM可能无法在特定领域内提供优化性能。为适应特定领域数据模式、以领域项目目录为基础、增强指令执行能力,本项目讨论了为推荐系统微调生成语言模型的过程,称为RecLM-gen。技术包括监督式微调(SFT)和强化学习(RL)。此方法的潜在应用包括排名器、对话推荐器和用户模拟器。
推荐模型解释器
基于深度学习的推荐系统广泛用于各种在线服务,这归功于它们在有效性和效率上的优越性。然而,这些模型通常缺乏可解释性,这使得它们对用户和开发者来说都不够可靠和透明。在这项工作中,我们提出了一种新的推荐系统模型解释方法,称为RecExplainer,通过使用LLM作为替代模型,学习模仿和理解目标推荐模型。
推荐评估器
评估对于准确评估模型的真实能力和识别改进的弱点至关重要。在使用语言模型作为推荐器的时代,其评估方法已大幅偏离传统风格。本项目旨在为基于LM的推荐系统提供全面的评估服务。无论是提供了训练有素的LM还是API(如Azure OpenAI API),它都能从多个角度评估模型的性能,包括检索、排名、解释能力和一般AI能力。
项目链接
https://github.com/microsoft/RecAI
53AI,企业落地应用大模型首选服务商
产品:大模型应用平台+智能体定制开发+落地咨询服务
承诺:先做场景POC验证,看到效果再签署服务协议。零风险落地应用大模型,已交付160+中大型企业
2024-03-30
2024-04-26
2024-05-10
2024-04-12
2024-05-28
2024-04-25
2024-05-14
2024-07-18
2024-08-13
2024-04-26