分享一个高速网卡4盘位nvme全闪nas方案

卢奇亚诺

【2000元级别的7xM.2盘位雷电网桥全闪NAS搭建】 https://www.bilibili.com/video/B ... 2ad628982a28cfeddf1
这个方案呢

spyman1802

这么高的NET带宽。没有RDMA，CPU会扛不住吧？

sst7029

卢奇亚诺 发表于 2024-1-4 21:47
【2000元级别的7xM.2盘位雷电网桥全闪NAS搭建】 https://www.bilibili.com/video/BV1az4y1L7CU/?share_sour ...

nuc9是pcie3.0啊，还是4.0战未来

sst7029

spyman1802 发表于 2024-1-4 22:22
这么高的NET带宽。没有RDMA，CPU会扛不住吧？

肯定是要开启rdma的

theshy

5000APU不能4+4+4+4拆封呢

sst7029

theshy 发表于 2024-1-5 13:21
5000APU不能4+4+4+4拆封呢

方案是X8X4X4拆分

我不自由

最近打算买新出的威联通雷电nas，但是感觉100G好nb，不知道100g实际体验会比雷电4快吗。楼主赶紧搞起来，发个评测，我来抄作业

寞少年

弄一个PCI-E转U.2的转接卡，买两个二手的7.68T U.2，性能更好，价格也不贵

michaelzxp

这才是标准全闪nas的标准，基础配置。其他都扯

sst7029

michaelzxp 发表于 2024-1-6 11:00
这才是标准全闪nas的标准，基础配置。其他都扯

谢谢肯定，感觉这个配置家用也就够了。

饱不饱

起初也这么想的，刚出掉一颗5650GE，首先是3.0 的，然后华硕B550只能拆X8X4X4，不知道其他主板怎么拆，还有得用纯ECC，巨贵，鱼上也贵。

赫敏

fyc858 发表于 2024-1-4 03:36
先不说大文件，小文件100G网卡有屁用，10G都跑不到

大文件也跑不到。这种走CPU的RDMA一到写入就歇菜
这配置比楼主说的高好多倍了，软件方面走Azure HCI比DIY的好太多了还是这个鬼样子
3 x DataON S2D-6224 2U 24x 2.5″ All-NVMe server nodes.

Per Node:

2x Intel Xeon Scalable Gen3 Gold 6330 2.0 GHz, 28-Core, 42MB Cache
32x Samsung 64GB DDR4 3200MHz ECC-Register RDIMM
2x Intel S4520 480GB SATA M.2 Boot Drive
1x NVIDIA ConnectX-6 Dx EN Dual-Port QFP56 100GbE RDMA Card, PCIe 4.0 x16
5x Intel DC P5510 NVMe 3.8TB 2.5″ 144L 3D TLC SSD

网仙

软件系统选择比较挠头。

目前测试下来，winserver2022的存储池下，性能最好（可能是自动开启了RDMA？），TrueNas和群晖下SSD性能都会打折。2个sn640在radi0下，单线程都跑不满10G网。

如果用winserver创建池，然后网络挂载给群晖，能喂饱10G网，有脱裤子放屁的嫌疑，但群晖的很多app都没法直接利用这个空间。

本质上还是希望能用群晖来直接管理这些nvme的盘，  毕竟从易用性、通用性来说还是群晖做的最好，自带应用几乎可以简单坚决所有的NAS应用需求，也能给部门的几十个同事作为工作共享盘使用。

有点无奈、还在探索中。

sst7029

网仙 发表于 2024-1-16 16:28
软件系统选择比较挠头。

目前测试下来，winserver2022的存储池下，性能最好（可能是自动开启了RDMA？），T ...

10G网络指的是10Gb/s?

网仙

sst7029 发表于 2024-1-17 15:29
10G网络指的是10Gb/s?

对的，万兆网

sst7029

网仙 发表于 2024-1-17 17:15
对的，万兆网

不应该吧，单盘的读写都超万兆网速了

网仙

SN640在群晖下不行

sst7029

网仙 发表于 2024-1-18 23:40
SN640在群晖下不行

用win系统啊，还支持rdma

网仙

sst7029 发表于 2024-1-19 09:26
用win系统啊，还支持rdma

已经习惯群晖的生态和易用性；
win我也部署了，作为轻量化服务器使用，但确实没有群晖方便