微信扫码
添加专属顾问
我要投稿
用自然语言直接查询数据库,告别繁琐SQL语句,快速获取数据分析结果。 核心内容: 1. 利用LangChain框架实现自然语言到SQL的转换 2. 连接MySQL数据库并检索数据结构 3. 创建SQL生成链,自动生成并执行SQL查询
今天和大家聊一个超实用的AI应用场景——用自然语言直接查询数据库。想象一下,当你需要查"上季度谁写的线上故障最多"时,再也不用对着SQL语句抓耳挠腮,直接说人话就能得到答案,是不是很酷?
本项目使用 OpenAI的模型 以及 LangChain框架,将自然语言查询转换为SQL语句,并从MySQL数据库中获取相关数据。
你先可以提出像 “小王在哪个部门?” 这样的后续问题,并得到准确的答案,系统会确保在整个对话过程中都能保持上下文的记忆力。
下面我就详细和大家说说这个项目的几个关键部分。
首先呢,你得有个包含数据的 MySQL 数据库,然后就可以用 LangChain 的 SQLDatabase 工具,轻松连接到这个数据库,还能检索它的结构。代码如下:
from langchain_community.utilities import SQLDatabase
mysql_uri = "mysql+mysqlconnector://username:password@localhost:3306/yourdatabase"
db = SQLDatabase.from_uri(mysql_uri)
这样就在变量db
里创建了数据库的实例。之后,用下面这行代码就能检索数据格式,观察表结构:
schema = db.get_schema()
拿到数据库schema
后,接下来就要创建一个把自然语言查询转换成 SQL 查询的流程,也就是创建一个 SQL 生成链。
LangChain 给我们提供了构建这种链的框架,我们把自然语言问题和schema
一起传给大模型,它就能自动生成对应的 SQL,然后在数据库上执行。
下面是生成链的代码:
from langchain.prompts import ChatPromptTemplate
from langchain_openai import ChatOpenAI
from langchain_core.output_parsers import StrOutputParser
def generate_sql(question, schema):
# 定义提示模板,它将指导大语言模型生成SQL
template = f"""Based on the table schema below, write a SQL query that answers the user's question:
{schema}
Question: {question}
SQL Query:
"""
prompt = ChatPromptTemplate.from_template(template) # 从模板创建提示
# 创建OpenAI聊天模型的实例
llm = ChatOpenAI()
# 构建SQL生成链
sql_chain = (
prompt
| llm.bind(stop=["\nSQL Result:"]) # 这告诉模型在 'SQL Result:' 处停止
| StrOutputParser() # 将输出解析为字符串
)
# 使用schema和问题调用管道,并返回SQL查询
return sql_chain.invoke({"schema": schema, "question": question})
这里面的 template
是提示模板,它能指导大语言模型生成 SQL 查询,给模型提供结构和问题作为上下文,让它生成对应的 SQL 查询。
ChatPromptTemplate
类是根据结构和问题来定义大语言模型提示的模板。
StrOutputParser
能确保大语言模型的输出被解析成字符串,也就是我们要的 SQL 查询。
bind(stop=["\nSQL Result:"])
能让大语言模型知道在哪里停止生成过程,遇到 “SQL Result:” 就停止,这样输出的结果就很干净,能直接用于 SQL 执行。
用 generate_sql
函数生成 SQL 查询后,下一步就是在 MySQL 数据库上执行这个查询,把数据取出来。我们可以写一个简单的 run_query
函数来完成这个操作,代码如下:
def run_query(db,query):
return db.run(query)
这里的 db
就是我们一开始创建的数据库实例,query
是大语言模型链生成的 SQL 查询。
但要注意,GPT偶尔会生成错误语法,建议增加异常捕获机制(篇幅限制暂不展开)
从数据库里拿到原始数据后,我们得给用户生成一个人类能看懂的自然语言响应。这就得利用语言模型的能力,把原始数据转换成容易理解的内容。
我们可以写一个 get_response
函数,它接收 user_question
(用户问题)、schema
(结构)、sql
(SQL 查询)、data
(数据)作为参数,代码如下:
def get_response(question, schema, sql,data):
template = """根据表结构、问题、SQL 查询和 SQL 响应,提供一个结构化的、人类可读的响应。仅提取响应中可用的字段,并正确格式化它们。
{schema}
问题:{question}
SQL 查询:{query}
SQL 响应:{response}
---动态构建输出:---
名称:一个人或多个人的姓名,
对于响应中存在的其他字段也类似,并用句子将它们框起来给出一个摘要。
----------------------------------------
确保响应是直接的、结构化的,并带有清晰的标签。使用结构化数据组成句子。如果一个字段不存在,则不要包括它。
"""
prompt_response = ChatPromptTemplate.from_template(template)
prompt = ChatPromptTemplate.from_template(template)
llm = ChatOpenAI()
sql_chain = (
prompt
| llm
| StrOutputParser()
)
# 使用输入值调用管道
return sql_chain.invoke({"schema": schema, "question": question, "query": sql, "response": data})
这个函数确保我们能得到一个自然语言答案
53AI,企业落地大模型首选服务商
产品:场景落地咨询+大模型应用平台+行业解决方案
承诺:免费场景POC验证,效果验证后签署服务协议。零风险落地应用大模型,已交付160+中大型企业
2025-03-11
LangChainGo中的提示词工程(Prompt Engineering)
2025-03-11
LangChain实战 | ParentDocumentRetriever 优化长文档的向量搜索质量
2025-03-05
Agent 最全 Playbook:场景、记忆和交互创新
2025-03-05
基于LangGraph的智能文章生成Agent架构设计思路
2025-03-02
LangGraph全新4大预构建Agents框架登场
2025-03-01
极简LangChain智能体开发入门指南
2025-03-01
释放 Langflow 的力量:使用 Rag 构建多工具代理
2025-02-28
用 LangGraph 构建 Agent 逐步指南
2024-10-10
2024-04-08
2024-07-13
2024-06-03
2024-09-04
2024-08-18
2024-04-08
2024-06-24
2024-07-10
2024-03-28
2025-02-05
2024-12-02
2024-11-25
2024-10-30
2024-10-11
2024-08-18
2024-08-16
2024-08-04