微信扫码
与创始人交个朋友
我要投稿
前言 22 年配置了一套 X299 主板加双 3090 显卡服务器,发现除了显卡,其它性能都远远过剩,完全没有体现出性价比,加上最近大模型比较火,就想着配置一套能跑和微调通义千问的服务器玩玩。
目前配置一共花了 3400(双 P40 显卡),不追求完美 3000 应该也能配下来。p40 性能大约在 1080ti 左右,3090 的 1/2,4090 的 1/4。去年 23 年底大约 650 一张,现在(24 年初)涨到到900左右。
▲ 购买记录
注意事项:
机箱一定要买大板机箱,插7显卡槽的。
购买 e5 一定要看 CPU 能支持内存的频率。
cpu 够用就行,不用花大价钱,对模型训练和推理影响不大。
显卡需要两个 4p 转化成 8p 的转换线,需要购买转接线。
p40 是主动散热,不改水冷,可以加风扇。
p40 显卡不支持视频输出,需要购买亮机卡,后期 4 卡需要拆掉。
亮机器一般只支持 1080p,如果你显示器 2K,4K,就需要支持 2K,4K 的显示器。
华南金牌 X99-f8 支持 3 显卡,一定要提前计算显卡厚度和主板卡槽之间的宽度。
重新购买的电源风扇更换,更换流程,拆掉 8 个螺丝,去掉保护罩,断开风扇供电线,更换风扇,组装电源。
https://www.bilibili.com/video/BV1y34y1G7cq/?spm_id_from=333.337.search-card.all.click
优先:1358 卡槽,可以组成多通道。
具体接线方式见下图,转接线可以在淘宝购买。
开机按 del 键,选择 Advanced 选项,打开 above 4g,才能正常开机、识别显卡。
https://ubuntu.com/download/desktop
sudo lshw -C display
自带显卡驱动会和我们需要安装的驱动发生冲突,需要禁用 nouveau。
sudo gedit /etc/modprobe.d/blacklist_nouveau.conf
输入下面内容,保存重启:
blacklist nouveau
options nouveau modeset=0
sudo apt update
sudo apt-get install build-essential
https://zhuanlan.zhihu.com/p/496107394
展示
53AI,企业落地应用大模型首选服务商
产品:大模型应用平台+智能体定制开发+落地咨询服务
承诺:先做场景POC验证,看到效果再签署服务协议。零风险落地应用大模型,已交付160+中大型企业
2024-03-30
2024-05-09
2024-07-07
2024-07-01
2024-06-24
2024-06-08
2024-07-23
2024-06-05
2024-06-21
2024-07-11
2024-10-29
2024-10-22
2024-10-18
2024-10-16
2024-10-15
2024-10-10
2024-10-06
2024-10-01