找回密码
 加入我们
搜索
      
查看: 10820|回复: 48

[NAS] 分享一个高速网卡4盘位nvme全闪nas方案

[复制链接]
发表于 2024-1-3 09:45 | 显示全部楼层 |阅读模式
本帖最后由 sst7029 于 2024-1-3 13:42 编辑

白群辉用了很多年,最近种草nvme全闪nas,对4盘位、ecc内存、高速网卡有执念,一顿搜索后确定方案如下:

pcie3.0过渡方案:
机箱:Lzmod 2.7升 mini DC-RLY
主板:X570 I AORUS PRO WIFI
CPU:Ryzen pro 5000系 APU
内存:32G ecc DDR4*2
硬盘:pcie3.0 企业级 22110 nvme硬盘*4
网卡:mellanox cx314A 40G双口
电源:DC-ATX外置
其他配件:pcie拆分卡、nvme硬盘延长线若干

后期升级pcie4.0方案:
CPU:Ryzen 5000系
硬盘:pcie 4.0 硬盘*4
网卡:mellanox cx516A 100G双口

注:主板支持ecc内存、pcie拆分、无GPU启动
希望能给有同样需求的朋友一点借鉴。


发表于 2024-1-3 09:52 | 显示全部楼层
这一套下来得多少钱?
 楼主| 发表于 2024-1-3 09:54 | 显示全部楼层
lzkhome 发表于 2024-1-3 09:52
这一套下来得多少钱?

不含硬盘2500
发表于 2024-1-3 10:00 来自手机 | 显示全部楼层
如果再配一个雷电卡,是不是可以兼顾视频编辑用的那种硬盘阵列使用?笔记本电脑连接这个阵列爽歪歪。
 楼主| 发表于 2024-1-3 10:18 | 显示全部楼层
那就应该选本来就带雷电接口的主板,比如nuc9
发表于 2024-1-3 10:26 | 显示全部楼层
大佬有研究过泰安s8026这种epyc服务器方案吗?16盘u2,pcie通道还多
发表于 2024-1-3 11:35 | 显示全部楼层
唯独没说用啥系统
发表于 2024-1-3 11:42 | 显示全部楼层
cx416这张卡没记错应该是pcie3.0的一张卡就吃满*16通道了,还咋挂4张固态啊?5000系锐龙直连的通道也就16+4
发表于 2024-1-3 11:57 | 显示全部楼层
这个机箱我塞过3个u.2~
发表于 2024-1-3 12:57 来自手机 | 显示全部楼层
这网卡如果接交换机,成本也不低了吧……
 楼主| 发表于 2024-1-3 13:43 | 显示全部楼层
aixunxian 发表于 2024-1-3 11:42
cx416这张卡没记错应该是pcie3.0的一张卡就吃满*16通道了,还咋挂4张固态啊?5000系锐龙直连的通道也就16+4 ...

cx516A,支持pcie4.0,打错了
 楼主| 发表于 2024-1-3 13:44 | 显示全部楼层
pdvc 发表于 2024-1-3 12:57
这网卡如果接交换机,成本也不低了吧……

两个网口,准备其中一个40G直连pc,另外一个转10G连交换机。
发表于 2024-1-3 16:13 | 显示全部楼层
5000系pro 4650/5750/5650 g/ge?
 楼主| 发表于 2024-1-4 13:52 | 显示全部楼层
Falconraynor 发表于 2024-1-3 16:13
5000系pro 4650/5750/5650 g/ge?

嗯,还有4350
发表于 2024-1-4 13:55 | 显示全部楼层

PRO?这不是只有散片吗?
发表于 2024-1-4 13:56 | 显示全部楼层

再说了……ECC 16G都要千多了,你这咋可能硬件2500
发表于 2024-1-4 13:59 | 显示全部楼层
5000系带IOD的版本,实测比APU版待机功耗高15-20w,但是带IOD的可以拆出来4个PCIE 4.0

另外,AMD对群晖不是很友好,TrueNAS倒还可以

我现在折腾的就是5500+昂达的最便宜的那个主板+x8x4x4拆分卡+PCIE8X转4x4 switch,系统是ESXI+群晖+truenas+10g网卡,用起来还算稳定
 楼主| 发表于 2024-1-4 14:39 | 显示全部楼层
dcl2009 发表于 2024-1-4 13:59
5000系带IOD的版本,实测比APU版待机功耗高15-20w,但是带IOD的可以拆出来4个PCIE 4.0

另外,AMD对群晖不 ...

问下这个方案显卡是怎么解决的?无GPU启动吗?
 楼主| 发表于 2024-1-4 14:40 | 显示全部楼层
vva 发表于 2024-1-4 13:56
再说了……ECC 16G都要千多了,你这咋可能硬件2500

小黄鱼16g ecc内存200
发表于 2024-1-4 14:45 来自手机 | 显示全部楼层
sst7029 发表于 2024-1-4 14:40
小黄鱼16g ecc内存200

…老板路子野
发表于 2024-1-4 15:23 | 显示全部楼层
sst7029 发表于 2024-1-4 14:39
问下这个方案显卡是怎么解决的?无GPU启动吗?

是的,无显卡启动

先用一个pcie1x转pcie16x的转接线外接一个显卡,配好以后去掉显卡即可
发表于 2024-1-4 16:36 | 显示全部楼层
先不说大文件,小文件100G网卡有屁用,10G都跑不到
 楼主| 发表于 2024-1-4 16:41 | 显示全部楼层
dcl2009 发表于 2024-1-4 15:23
是的,无显卡启动

先用一个pcie1x转pcie16x的转接线外接一个显卡,配好以后去掉显卡即可 ...

是truenas系统吗?
发表于 2024-1-4 16:47 | 显示全部楼层
sst7029 发表于 2024-1-4 16:41
是truenas系统吗?

esxi里面开了群晖+truenas+软路由

truenas也装过裸机,感觉有点浪费性能
发表于 2024-1-4 16:48 来自手机 | 显示全部楼层
比内存带宽还大的网络带宽毫无意义。。ddr4双通道平台折腾100g网卡干嘛去。 。最经济的就是40g网卡放南桥的pcie x4,能跑个30g左右,CPU直出的pcie拆分成4*4省得买plx卡,加上cpu直出的nvme能最便宜的上五块盘。强迫症就cpu直出拆成8+4+4,买那种成品转接卡,8给网卡其他不用plx也能上四个盘
 楼主| 发表于 2024-1-4 16:53 | 显示全部楼层
gooong 发表于 2024-1-4 16:48
比内存带宽还大的网络带宽毫无意义。。ddr4双通道平台折腾100g网卡干嘛去。 。最经济的就是40g网卡放南桥的 ...

是这样设计的方案啊
 楼主| 发表于 2024-1-4 16:54 | 显示全部楼层
关键是小巧,2.7升
发表于 2024-1-4 17:13 | 显示全部楼层
gooong 发表于 2024-1-4 16:48
比内存带宽还大的网络带宽毫无意义。。ddr4双通道平台折腾100g网卡干嘛去。 。最经济的就是40g网卡放南桥的 ...

不开巨帧确实只有35g带宽,开巨帧可以上90g,测试环境7950x+12700k

100g带宽只有12.5G,双通道DDR4妥妥无压力
发表于 2024-1-4 21:44 来自手机 | 显示全部楼层
dcl2009 发表于 2024-1-4 17:13
不开巨帧确实只有35g带宽,开巨帧可以上90g,测试环境7950x+12700k

100g带宽只有12.5G,双通道DDR4妥妥 ...

谢老哥指正,上班昏头了。非双CCD或者APU,写入会减半吧,如果是turenas这种吃容量的上四条内存跑2666,写入带宽20g左右,也够了
发表于 2024-1-4 21:45 来自手机 | 显示全部楼层
sst7029 发表于 2024-1-4 16:53
是这样设计的方案啊

看见你的升级100g计划嘛,主要还是上班摸鱼太紧张了没看仔细
您需要登录后才可以回帖 登录 | 加入我们

本版积分规则

Archiver|手机版|小黑屋|Chiphell ( 沪ICP备12027953号-5 )沪公网备310112100042806 上海市互联网违法与不良信息举报中心

GMT+8, 2025-4-27 04:29 , Processed in 0.013049 second(s), 5 queries , Gzip On, Redis On.

Powered by Discuz! X3.5 Licensed

© 2007-2024 Chiphell.com All rights reserved.

快速回复 返回顶部 返回列表