微信扫码
与创始人交个朋友
我要投稿
Yi-Coder[1] 是一个开源的高性能代码语言大模型,为实现高效编程设计。它支持 52 种编程语言,擅长处理需要长上下文理解的任务,例如项目级代码理解和生成。该模型有两种大小(15亿 和 90亿 参数),并且提供基础版和聊天版。
本教程中,你将学习如何
Cursor 是最热门的 AI 代码编辑器之一。它可以用专门为编码任务训练的 LLM(如 Yi coder)来完成编码辅助任务。你可以将 Yi-coder-9B 配置为 Cursor 的私有 LLM 后端。
要获取 Cursor 所需的本地 Yi-coder-9B 的公共 HTTPs endpoint,请按照以下说明操作。
安装开源 Gaia 节点——一组轻量且可移植的 LLM 推理工具。
Gaia’s tech stack is built on top of WasmEdge[2], a WebAssembly-based runtime optimized for serverless computing and edge applications. This setup allows for efficient deployment of Yi-Coder in different environments, providing flexibility and scalability.
curl -sSfL 'https://github.com/GaiaNet-AI/gaianet-node/releases/latest/download/install.sh' | bash
然后,使用以下命令行下载并初始化模型。
gaianet init --config https://raw.githubusercontent.com/GaiaNet-AI/node-configs/main/yi-coder-9b-chat/config.json
最后,使用 gaianet start
来运行节点。
gaianet start
然后你会得到一个 HTTPS URL,像这样 https://NODE-ID.us.gaianet.network
.
同时,您可以打开浏览器为 `http://localhost:8080` 来问有关编程的问题。
我们以 8k 上下文窗口启动了 Yi Coder 9b 模型。如果你的机器有较大的 GPU RAM(例如 24GB),则可以将上下文大小一直增加到 128k。较大的上下文大小在编码中特别有用,因为我们可能需要将大量源代码文件塞入 LLM 提示中才能完成复杂的任务。
接下来,让我们使用在我们自己的机器上运行的 Yi-Coder-9B 配置 Cursor。
只需使用你的 Gaia 节点 URL 覆盖 Cursor 的默认 OpenAI URL,修复模型名称和“API 密钥”,就可以开始工作了!请参阅此处[3]的详细说明。
现在,让我们测试 Yi-coder-9b 来编写一个简单的搜索页面。
我提示模型生成了一个简单的搜索页面。
然后,我要求 Yi-coder-9b 修改按钮上的文字标签。Yi-coder-9b LLM LLM 解释了搜索按钮的工作原理。
网页如预期运行!
53AI,企业落地应用大模型首选服务商
产品:大模型应用平台+智能体定制开发+落地咨询服务
承诺:先做场景POC验证,看到效果再签署服务协议。零风险落地应用大模型,已交付160+中大型企业
2024-12-22
花60元,DIY了一个AI机器人,能聊天,会认人……
2024-12-21
基于AI智能助理的软件开源组件安全检查
2024-12-21
Llama2024年度要点总结
2024-12-21
重磅! Github Copilot 免费了
2024-12-20
万字长文帮你搞定AI Agent选型
2024-12-20
微软开源的 Markitdown 可将任意文件转换为 Markdown 格式,PDF 解析咋样?
2024-12-20
Claude的MCP(模型上下文协议)简介
2024-12-20
历时2年,华人团队力作,震撼开源生成式物理引擎Genesis,可模拟世界万物
2024-05-06
2024-07-25
2024-08-13
2024-06-12
2024-07-11
2024-06-16
2024-07-20
2024-09-20
2024-06-15
2024-07-25
2024-12-20
2024-12-19
2024-11-22
2024-11-19
2024-11-13
2024-11-13
2024-10-07
2024-09-22