我要投稿

使用LM Studio一键部署本地AI大语言模型

发布日期：2024-04-28 08:56:19 浏览次数： 4486 作者：火星AIGC

现在如此多的开源AI模型，像Gemma、Mistral 7B、Llama等，如果想部署到本地个人电脑上，一般需要懂点python等编程知识，而现在出现了一些软件和开源工具，已经可以一键部署AI模型到本地了，很多都是傻瓜化操作，不需要有相应的编程知识。下面介绍的这个LM Studio就是一个傻瓜化一键部署开源AI模型的桌面软件。

1.什么是LM Studio？

LM Studio 是一个桌面应用程序，支持Windows、苹果macOS和Linux操作系统，用于在电脑上运行本地大语言模型。它通过在本地主机上运行的类似 OpenAI 的 HTTP 服务器使用本地大语言模型，这样使你有更多的控制权和隐私保护。

LM Studio的主要功能：

搜索并下载各种AI大语言模型；

在具有GPU的本地计算机上运行AI模型；

与 AnythingLLM 集成以创建聊天机器人界面。

官方网站：lmstudio.ai

2.电脑最低配置要求是什么？

• 配备 macOS 13.6 或更高版本的苹果电脑(M1/M2/M3)

• 具有支持 AVX2 处理器的 Windows/Linux PC

• 支持 NVIDIA/AMD GPU显卡，建议16GB 以上的显存。

• 对于电脑，建议6GB+内存

一般Intel和AMD的比较新的CPU都支持AVX2指令集，如果不确定，可以用CPUZ软件查看一下自己电脑CPU支持的指令集。

3.在Windows上安装LM Studio

进入官网页面，点相应的操作系统，下载。

打开下载的安装文件，点击运行。

它会自动安装在C盘上。

3.运行LM Studio

直接打开LM Studio，可以直接在软件主页下载推荐的各种模型。

也可以在搜索页搜索Hugging Face上的模型。并在页面的右上角显示估计需要的内存和显存容量。

5. 与你的AI聊天

进入聊天页面，加载您下载的模型，并输入提示词，等它给出回答。

还可以一次加载多个模型，以对比不同AI模型的不同响应。

LM Studio可以让你轻松的部署自己的私有AI大语言模型，不用再考虑网络、费用问题，随时随地与AI交互，唯一不完美的就是全英文界面，没有汉化功能。官方后续版本还会增加文本嵌入（POST /v1/embeddings）支持，实现更多的自定义功能。

53AI，企业落地大模型首选服务商

产品：场景落地咨询+大模型应用平台+行业解决方案

承诺：免费场景POC验证，效果验证后签署服务协议。零风险落地应用大模型，已交付160+中大型企业

相关资讯

2025-04-24

别只会聊天了！ChatGPT for Mac这波升级真不止亿点点，效率翻倍！

2025-04-23

谷歌科学家万字长文：17个AI用法，让打工人效率翻倍！

2025-04-23

5 个 Obsidian 命名方法，告别杂乱笔记，提高效率 200%！

2025-04-22

利用模型上下文协议提升您的 AI 生产力：解锁外部工具，实现 300% 效率提升

2025-04-22

麦肯锡解读AI智能体

2025-04-20

AI来了，高绩效员工反而不开心？

2025-04-20

一年半的深度实践，我整理了AI应用的6大方向

2025-04-17

AI越用越聪明？不，是你越来越会用了！

了解更多

了解更多

160+中大型企业正在使用53AI

立即咨询预约演示

把握AI发展的机遇，共同探索、共同进步

2025-01-22

如何打造基于GenAI的员工服务机器人

2025-01-22

热点资讯

万字长文：人人都能学会的提示词，揭秘18个prompt模版，8个秘诀，助你AIGC从入门到精通，从可用到好用

2024-04-02

可灵AI的网页版上线了

2024-07-07

办公新利器：DeepSeek+Word，让你的工作更高效

2025-02-02

千万别用可灵AI复活老照片！

2024-06-24

苹果Mac用户的福音：本地运行Meta Llama 3的终极指南

2024-04-27

xinference + dify + ollama 构建本地知识库

2024-05-08

一个叫李星玮的上海交大博士火了！GPT4-o通过数据分析出他100%的渣男属性！

2024-06-06

一种可复用的AI提效方案：AI点灯

2025-01-03

超全总结！大模型算法岗面试真题来了！

2024-04-02

国内20家公司大模型岗位面试经验汇总

2024-05-04

大家都在问

AI来了，高绩效员工反而不开心？

2025-04-20

Cursor 深度评测：革命性提效工具还是过誉的玩具？

2025-04-04

Flowith AI Agent，能否取代 Manus？

2025-03-24

现在的AI ，赋能软件开发，效能到底能提升多少？

2025-03-24

DeepSeek 越强大，我就越容易变蠢？

2025-02-15

AI正在如何重塑未来职业发展路径？

2025-01-13

为什么大多数人不愿意接受AI？

2024-12-26

AI知识泛滥的年代，“脑图+AI”=“埃迪+毒液”：未来工作流的黄金组合，你掌握了吗？

2024-11-12

热门标签

内容创作大模型技术个人提效 langchain llamaindex 多模态技术 RAG技术智能客服知识图谱模型微调 RAGFlow coze Dify Fastgpt Bisheng Qanything AI+汽车 AI+金融 AI+工业 AI+培训 AI+SaaS 提示词框架提示词技巧 AI+电商 AI面试数字员工 ChatBI 知识管理开源大模型智能营销智能硬件智能化改造 AI+医疗 MaxKB

应聘简历请发送至： ceo@53ai.com

友情链接：

CopyRight © 2012-2024 深圳市博思协创网络科技有限公司版权所有

粤ICP备17114055号

广州：广州市华景路37号(华景软件园)暨南大学科技大厦6楼（整层）

深圳：深圳市福田区泰然四路29号天安创新科技广场一期A座1204

上海：上海市浦东新区金新路58号1602室

微信扫码
和创始人交个朋友

联系我们

售前咨询

预约演示

微信扫码

添加专属顾问

回到顶部