我要投稿

使用自然语言生成SQL

发布日期：2025-01-22 19:02:46 浏览次数： 1534 来源：Sumslack团队

概述

在我们SDP软件里，有一个异构数据浏览器工具，主要是可以查包括mysql，clickhouse，doris等各类数据源，通过SQL语句查询数据，在AGI发展的今天，我们已经可以使用自然语言生成SQL了，而且能较好的支持多表关联，这主要取决于我们SDP可以提供如下基础信息：

完备的数据字典：包括字段说明，表说明，字段关联信息配置（类似外键信息），索引信息等
业务常见SQL的收藏库，可让AI更好的理解和生成SQL
同义词库：如表名的同义词等

做这件事的主要目的是：

非技术人员可以使用自然语言获取数据
开发人员可用自然语言生成SQL提高开发效率（避免记忆繁杂的字段名和表名），微调SQL即可

使用效果如下图：

实现思路

这个属于结构化RAG领域，相比一般RAG从文档中抽取结构化数据大同小异，我们主要做如下工作：

准备数据集，写程序对数据做预处理

DDL：根据数据字典信息生成，用于告知AI所有字段的类型，长度等
DB描述信息：描述字段和表的详细信息，如字段的外键，索引信息等
问答集：常见知识库，如曾经根据业务查询过的问题和生成SQL的键值对，便于让AI做更好理解
同义词库：建立如表名的同义词，便于更准确命中表名，或者特定领域术语

部署本地大模型：我们使用的是QWen 2.5，4090GPU显卡，支持上下文月9K，所以针对个别表特别多的字段超限的情况下，无法生成SQL，正常情况下足够了
微调大模型提示语，让SQL生成更精准
配置RAG流程，并整合到SDP

可使用ragflow建立如下流程：

调优思路：

促进用户反馈：可在界面实现针对用户自然语言输入后，用户调优后的SQL存入QA问答库，从而减少手动维护的需求，在界面可加入比如点赞功能；
管理特定领域同义词；
尽可能给DDL语句表述完整：如字段，表的注释，主键，唯一键等；

即可体验自然语言生成SQL。

欢迎关注我的公众号“Sumslack团队”，原创技术文章第一时间推送。

53AI，企业落地大模型首选服务商

产品：场景落地咨询+大模型应用平台+行业解决方案

承诺：免费场景POC验证，效果验证后签署服务协议。零风险落地应用大模型，已交付160+中大型企业

160+中大型企业正在使用53AI

立即咨询预约演示

把握AI发展的机遇，共同探索、共同进步

2025-01-22

如何打造基于GenAI的员工服务机器人

2025-01-22

热点资讯

重磅！Ilya创办人工智能公司SSI：直接迈向安全超级智能

2024-06-20

万字长文：你必须要读的瑞幸咖啡AI应用战略

2024-06-14

一文彻底搞懂大模型实战 - 文本到SQL（Text2SQL）

2024-10-14

【万字长文】AI智能体驱动未来商业，深度剖析11种AI Agent商业模式

2024-06-16

AIOps在小红书的探索与实践——故障定位与诊断

2024-10-09

行业探索｜AI在法律行业中的创新应用

2024-07-03

如何利用生成式AI优化制造企业的生产流程？

2024-06-14

WrenAI-Text-to-SQL：用智能技术解锁数据潜能，助力业务增长！

2024-05-31

腾讯音乐开源的 Chat BI 平台

2024-07-24

API调用大模型如此方便，为何企业还要私有化部署大模型？

2024-06-06

大家都在问

深度解析智能技术架构：AI是如何从数据到应用一步步实现的？

2025-01-22

我们需要什么样的AI搜索？

2025-01-13

腾讯OlaChat：LLM如何重塑智能数据分析新生态？

2025-01-07

数势科技智能分析AI Agent 何以在市场中脱颖而出？

2025-01-02

阿里内部观点：智能化研发一年复盘，我们离真正的 AI 开发还有多远？

2024-12-25

准确率高达99%，ChatBI如何做到？

2024-12-25

“百度搜索们”会被“Kimi们”取代吗？

2024-12-13

如何用用 Parent-Child 分割提升问答系统的准确性？

2024-11-19

开箱即用的企业大模型应用平台

工作+AI

业务+AI

AIx业务

大模型咨询

大模型定制

概述

实现思路

相关资讯

160+中大型企业正在使用53AI

把握AI发展的机遇，共同探索、共同进步

如何打造基于GenAI的员工服务机器人

热点资讯

重磅！Ilya创办人工智能公司SSI：直接迈向安全超级智能

万字长文：你必须要读的瑞幸咖啡AI应用战略

一文彻底搞懂大模型实战 - 文本到SQL（Text2SQL）

【万字长文】AI智能体驱动未来商业，深度剖析11种AI Agent商业模式

AIOps在小红书的探索与实践——故障定位与诊断

行业探索｜AI在法律行业中的创新应用

如何利用生成式AI优化制造企业的生产流程？

WrenAI-Text-to-SQL：用智能技术解锁数据潜能，助力业务增长！

腾讯音乐开源的 Chat BI 平台

API调用大模型如此方便，为何企业还要私有化部署大模型？

大家都在问

深度解析智能技术架构：AI是如何从数据到应用一步步实现的？

我们需要什么样的AI搜索？

腾讯OlaChat：LLM如何重塑智能数据分析新生态？

数势科技智能分析AI Agent 何以在市场中脱颖而出？

阿里内部观点：智能化研发一年复盘，我们离真正的 AI 开发还有多远？

准确率高达99%，ChatBI如何做到？

“百度搜索们”会被“Kimi们”取代吗？

如何用用 Parent-Child 分割提升问答系统的准确性？

热门标签