NAS赶上SSD，100GbE网络大升级，升完只差100G

awpak78 · 发表于 2023-4-3 20:29

在吃灰了一年半后，终于把N卡网速快的SN2700上架了，顺便重构了机柜。

幻灯片3.JPG

同时给路由、光猫、交换机这堆12V设备搭了94%+效率的铂金电源集中供电，提升效率也省得一人一个的电源插头狂吃插线板。

幻灯片4.JPG

趁着上次去给王校长优化NAS测的参数还没忘，给NAS加了一堆SSD缓存试图挑战本地SSD性能。

幻灯片5.JPG

一顿跑分下来，在128G内存+SSD缓存的多重加持下，可以说准M.2 SSD级使用体验。

幻灯片6.JPG

但是没有RDMA神秘加成，CPU单核上限也就这样。除非搞13900K服务器+13900K客户端来伺候这些单核亡者。

幻灯片7.JPG

线都理好才发现一根QSFP28线都没有，最快仅FDR 56G，这下连截图发群里装逼的能力都没了。不过看跑分……别说56G了，连40G都还差得远。

幻灯片8.JPG

至于为RDMA准备的全NVMe NAS，还在吃灰。虽然现在1T的SSD已经白菜价，但要一次凑个三四十T的SSD相比机械硬盘还是贵得离谱。

幻灯片9.JPG

brucelee1126 · 发表于 2023-4-3 20:43

是电玩那位还是中科院哪位？话说王校长才上100g有点落伍啊

巴特沃斯 · 发表于 2023-4-3 20:58

brucelee1126 发表于 2023-4-3 20:43
是电玩那位还是中科院哪位？话说王校长才上100g有点落伍啊

kcore啊,水印都在

Juzi丶 · 发表于 2023-4-3 21:13

全闪不如5u84.jpg

sonydboy · 发表于 2023-4-3 21:15

666。。。大手子

faninx · 发表于 2023-4-3 21:19

电源集中供电的话，新增设备，需要断电插拔吗？

赫敏 · 发表于 2023-4-3 21:29

别整这一套了，没意义。等dpu方案

awpak78 · 发表于 2023-4-3 22:13

赫敏发表于 2023-4-3 21:29
别整这一套了，没意义。等dpu方案

100块满地跑的CNA卡都嫌这嫌那的，DPU有垃圾车也得玩得动才行

awpak78 · 发表于 2023-4-3 22:14

faninx 发表于 2023-4-3 21:19
电源集中供电的话，新增设备，需要断电插拔吗？

拔设备自己的那根线不就行了，电源又不是不能热插拔的娇气东西

赫敏 · 发表于 2023-4-3 22:19

awpak78 发表于 2023-4-3 09:13
100块满地跑的CNA卡都嫌这嫌那的，DPU有垃圾车也得玩得动才行

不是网卡本身怎么样了，是协议的瓶颈注定了上限非常低

100gbps网卡本身没啥不好的，相比dpu差的倒不远

xzzfft · 发表于 2023-4-3 23:00

王校长上chh不我就想知道这点

Wolverine · 发表于 2023-4-3 23:38

xzzfft 发表于 2023-4-3 23:00
王校长上chh不我就想知道这点

以前上，后来不知道了

summerq · 发表于 2023-4-4 00:49

windows作为客户端，上rdma只有两种方案。1. 服务端用win server，但你跑不满100g带宽。2. 据说starwind有配套方案，但是具体没有文档出来。你可以邮件咨询一下。总结一下，就是windows客户端是个大问题，如果两边都换成linux，是可以跑到80g左右的

Juzi丶 · 发表于 2023-4-4 05:12

本帖最后由 Juzi丶于 2023-4-4 05:14 编辑

summerq 发表于 2023-4-4 00:49
windows作为客户端，上rdma只有两种方案。1. 服务端用win server，但你跑不满100g带宽。2. 据说starwind有 ...

目前samba可以提供70Gbps+的读写性能，取决于你的硬件配置
RDMA对于常见的10/25GbE从来不是必须的东西

参考：
https://lists.samba.org/archive/ ... October/135856.html

tangyuan814 · 发表于 2023-4-4 07:30

nvdia家的交换机很少见啊

gaizka · 发表于 2023-4-4 09:05

tangyuan814 发表于 2023-4-4 07:30
nvdia家的交换机很少见啊

就是mellanox，被nv收购了

weston · 发表于 2023-4-4 09:12

这是家用的吗？

wesleyxy · 发表于 2023-4-4 09:14

以为到5.0 x4的ssd性能了

amx004 · 发表于 2023-4-4 09:16

真•N卡网速快

Satan023 · 发表于 2023-4-4 09:23

fucknvnida牌的交换机是真没见过

funison · 发表于 2023-4-4 09:25

这12V电源，看着就怕短路。。

imyz · 发表于 2023-4-4 09:41

我就想知道王校长的 CHH ID 是哪个？

liolio · 发表于 2023-4-4 09:50

那块转出一堆12V头子的板子看上去挺规整的市面有买的不？

awpak78 · 发表于 2023-4-4 11:32

liolio 发表于 2023-4-4 09:50
那块转出一堆12V头子的板子看上去挺规整的市面有买的不？

XT30电源分配板，航模上的东西

awpak78 · 发表于 2023-4-4 11:32

funison 发表于 2023-4-4 09:25
这12V电源，看着就怕短路。。

底下贴了泡沫胶

awpak78 · 发表于 2023-4-4 11:33

Satan023 发表于 2023-4-4 09:23
fucknvnida牌的交换机是真没见过

收购Mellanox来的，新系统全部换NVIDIA logo了

猪圈 · 发表于 2023-4-4 11:37

我好奇那个全NVME是啥配置

awpak78 · 发表于 2023-4-4 11:53

猪圈发表于 2023-4-4 11:37
我好奇那个全NVME是啥配置

- EPYC 7D12
- 4x16G
- MCX545B
- 12盘U.2

猪圈 · 发表于 2023-4-4 13:07

主要是机箱，全nvme背板的机箱不好找，我现在这个只能上8个U。2

awpak78 · 发表于 2023-4-6 09:38

猪圈发表于 2023-4-4 13:07
主要是机箱，全nvme背板的机箱不好找，我现在这个只能上8个U。2

华硕RS500A-E10-RS12U

账号		自动登录	找回密码
密码			加入我们

[NAS] NAS赶上SSD，100GbE网络大升级，升完只差100G

浏览过的版块