我要投稿

ollama——如何快速搭建一个本地大语言模型

发布日期：2024-04-23 06:30:43 浏览次数： 2998 来源：进击的好哥

ollama是一个非常好用的本地运行大语言模型工具，让我们本地运行大语言模型变得非常简单。

访问ollama官网：https://ollama.com/
下载完安装ollama工具即可
打开命令行，运行大模型
```
ollama run llama2-chinese
```
和大模型通话
退出大模型
```
/bye 或者 Ctrl+d
```

搭建WebUI，此处使用OpenWebUI，有docker比较方便，搭建完注册第一个用户即为管理员，进入后上面选择模型，即可对话

docker run -d -p 3000:8080 --add-host=host.docker.internal:host-gateway -v open-webui:/app/backend/data --name open-webui --restart always ghcr.io/open-webui/open-webui:main

参考资源

可用的大模型列表，有适用于编程的coder，中文的，科学的，识图的，大家可根据自己需求选择和搭建：https://ollama.com/library
github地址：https://github.com/ollama/ollama

53AI，企业落地大模型首选服务商

产品：场景落地咨询+大模型应用平台+行业解决方案

承诺：免费场景POC验证，效果验证后签署服务协议。零风险落地应用大模型，已交付160+中大型企业

相关资讯

2024-07-10

科研助力神器：Scholar GPT，百倍提升你的研究效率！

2024-07-09

Doc2X：一款功能超级强大的文档解析与转换工具

2024-07-06

我对多智能体协作过程自动演化架构设计

2024-07-06

可穿戴AI，底层逻辑的变化

2024-07-06

一文彻底搞懂Transformer - Word Embedding（词嵌入）

2024-07-06

AI动态 | 腾讯元宝AI搜索能力升级：深度搜索模式上线

2024-07-06

智能手表 + AI ，都已经这么智能了？？

2024-07-06

死磕10万卡GPU算力集群，腾讯星脉网络2.0有什么秘密武器？

了解更多

160+中大型企业正在使用53AI

立即咨询预约演示

把握AI发展的机遇，共同探索、共同进步

2025-01-22

如何打造基于GenAI的员工服务机器人

2025-01-22

热点资讯

爆肝50小时，DeepSeek使用技巧，你收藏这一篇就够了！

2025-02-01

我把最近爆火的 DeepSeek-V3 接到了 Cursor！

2025-01-01

本地部署大模型？看这篇就够了，Ollama 部署和实战

2024-08-13

一文读懂DeepSeek-R1本地部署配置要求（建议收藏）

2025-02-04

Ollama 本地运行大模型(LLM)完全指南

2024-07-25

更改ollama模型存储路径

2024-04-25

16个具有“联网搜索”功能的AI：总有一个适合你！

2024-06-13

OpenAI o1与GPT4o的对比分析

2024-09-23

全民AI时代：手把手教你用Ollama & AnythingLLM搭建AI知识库，无需编程，跟着做就行！

2024-04-26

Cursor 一个真正让程序员产生危机感的 AI 编程工具

2024-08-21

大家都在问

强化学习(RL)是什么? 它和微调有什么区别?

2025-03-13

谷歌突然开源Gemma 3！128K长上下文+多模态，碾压Llama 405B？

2025-03-13

单卡跑出27B性能！谷歌Gemma 3开源模型如何重新定义AI开发边界？

2025-03-13

为什么RAG一定需要Rerank？

2025-03-13

如何提升RAG知识库文档的召回准确率？

2025-03-13

罗永浩的AI新战场，能否打破“行业冥灯”魔咒？

2025-03-13

Manus爆火的背后，Agentic AI产品如何构筑持久的竞争优势？

2025-03-12

快思考+慢思考+落地执行+组织学习，DeepSeek的下一步演化方向？

2025-03-12

热门标签

内容创作大模型技术个人提效 langchain llamaindex 多模态技术 RAG技术智能客服知识图谱模型微调 RAGFlow coze Dify Fastgpt Bisheng Qanything AI+汽车 AI+金融 AI+工业 AI+培训 AI+SaaS 提示词框架提示词技巧 AI+电商 AI面试数字员工 ChatBI 知识管理开源大模型智能营销智能硬件智能化改造 AI+医疗 MaxKB