SSD+SMB+40Gb网卡, 要想共享网盘速度最快必须要有RDMA加持, 否则上限就是20Gb左右. Win Server 是目前实现RDMA+SMB最简单最便宜的方案了, SMB Direct能跑满40Gb.
NVME-OFSPDK
今晚大老虎 发表于 2023-9-23 00:02
SSD+SMB+40Gb网卡, 要想共享网盘速度最快必须要有RDMA加持, 否则上限就是20Gb左右. Win Server 是目前实现R ...
不用rdma 40Gb也没问题
Dolfin 发表于 2023-9-23 02:21
不用rdma 40Gb也没问题
40Gb我只在win server 上跑满过, 在Linux based 系统上最高就20Gb左右.
低性能NAS
高性能SAN
gunner_l 发表于 2023-9-22 20:23
这样是不是占用双倍带宽，毕竟一边下载还要一边上传
在2.5G网络下无感，当然群晖里面是企业级机械硬盘，不是固态。
cameraman 发表于 2023-9-22 23:31
6g是x79世代8087接口（扁方形）。12g是x99世代8643接口（方形）
我买的浪潮m4集成带的3008 8643接口+12g ...
谢谢，比我自己知道的方法省钱省事。
adoal 发表于 2023-9-23 00:01
看到最后一行，真的不知道该怎么回答了
本来是几个问题，最后想还是合并为一个问题，
容易有答案，而且很多事情很多企业或个人肯定弄过。
以前一个家庭：1台电脑，就是加硬盘的事情或加电脑
现在一个家庭：多台电脑，多台手机，PAD。
那么我想的是把存储设备单独出来，最好可以1-2台存储设备，
1个是数据备份，比如个人资料和照片，
1个是各种电影软件游戏，不怕偷也不怕泄露。
随时家里可以快速访问。远程可以看速度不要求。
本帖最后由 zgpnhhy 于 2023-9-23 11:58 编辑
qnap672n
我插了2张pci卡，多出来6个m2+一个万兆。
机器自带2个m2。
总体8个m2，6个机械。
对我来说够用了。
你要几乎类似本地速度的话，万兆最大速度也不够。
成本会大很多。
换一种思路考虑这个问题，我之前也有类似的需求。现在想想，真正需要搞到本地电脑的数据有多少，之前也想追求本地电脑和NAS之间的高效传输，后来我转化思路了，把大部分数据都放在了机架服务器里了，esxi上装window，机架服务器捡洋垃圾即可，对显卡有需求，可以直通一个高性能显卡，window包含的软件可以处理绝大多数数据了吧。配合同步软件可以实现类似raid1的备份，仅仅把大宗的游戏数据放在本地了，三块企业级SSD 2T硬盘应该比万兆部署成本低多了————————个人观点，仅供参考
之前在B站看了一个毕竟囧的解决方案，
你这个需求基本上要10G起步的网络
B站有个UP主 买了NUC9不插入独显上的带PLX的4盘位M2扩展卡还有2,5G的网卡
这个配置下主力机用20G的雷电网桥链接 基本上4+3盘全闪NAS可以6+120G速度2500M/S也默上极限了在网上除非你上50 100G的交换机了
仅供参考的原视频
MikuLuka 发表于 2023-9-23 13:40
之前在B站看了一个毕竟囧的解决方案，
你这个需求基本上要10G起步的网络
B站有个UP主 买了NUC9不插入独显上 ...
谢谢，我去看看。
ain 发表于 2023-9-23 14:33
谢谢，我去看看。
看看吧如果你是英特尔的本子或者用的设备有雷电接口这个好像确实是性价比最高的NAS方案，20G和40G最便宜的网络连接方式是雷电网桥，，，但是只能1对1或者1对2
MikuLuka 发表于 2023-9-23 15:34
看看吧如果你是英特尔的本子或者用的设备有雷电接口这个好像确实是性价比最高的NAS方案，20G和40G最便 ...
看过了，按他的速度应该能达到本地效果。
zleepp 发表于 2023-9-23 13:16
换一种思路考虑这个问题，我之前也有类似的需求。现在想想，真正需要搞到本地电脑的数据有多少，之前也想追 ...
对，电脑应该搞个随身的，搞一个多硬盘的电脑，别的设备不能访问，再转到NAS很浪费精力。
机架服务器有推荐的型号或配件组合吗，，我去搜搜，不在我经常玩的知识范围内，经常看到，但是没下手过，一是怕暴力风扇太吵，以前给亲戚配奔4电脑，开机风扇的噪音现在都记得很清楚。二是以前觉得太长，刚刚在别的帖子里有个卖家，自己搞了个半人高的小机柜，感觉很不错，放进去就不会太突兀了。
先搞定数据外挂，显卡还好，我尽量用游戏机玩，我喜欢马里奥35，可惜就开了一段时间，特喜欢满天抛刺猬的云，打开电脑我玩游戏很少。
估计上行永远达不到，距离几公里可以自己拉条光纤组网。
Windows平台不是可以直接用smb连接nas么？
cxl可以实现吧，现在有cxl的交换机了
ynkmsnake 发表于 2023-9-22 10:47
看不同的nas系统，还会有不同，群晖来说，最好是有ssd读写缓存，最好2.5G或者万兆万卡，用iSCSI挂载，基本 ...
这才是真相。。。实际上smb之类挂载。普通操作就是和机械也没多大区别了。但是还是得iscsi才能流畅 4k小文件才能有接近实际硬盘的软件的打开的读取体验。但是iscsi外网访问不是很方便。
你上个光存储试试能达到要求不。
看带宽和NAS里面盘的速度，试过服务器连万兆的ISCSI存储（企业级的）比本地盘都快好多，本地盘是几块SAS做的R5。
我现在是威联通的1688x nas和威联通自家的32g光纤卡，接到我imac pro上，有每秒4g左右的传输速度，仅供参考
请问一下Windows 11专业版支援RDMA吗?
两台电脑直连，网卡都是MCX311A，一台电脑装Windows 2022 Server、一台是Windows 11 专业版
--------------------------------------------------
在Windows Server那台电脑使用
get-smbservernetworkinterface
get-smbclientnetworkinterface
显示MCX311A网卡都有开启RDMA
---------------------------------------------------
在Windows 11专业版那台电脑使用
get-smbservernetworkinterface
显示MCX311A网卡有开启RDMA
get-smbclientnetworkinterface
显示MCX311A网卡的RDMA状态是False
-----------------------------------------------------
目前用Windows Server那台共享资料夹，在Windows 11上去读取，但从效能监视器看到
RDMA没有启用，传输档案时还是会吃到CPU/网卡的佔用。
求解[流泪]
万兆路由器和万兆的交换机目前也达不到本地4.0固态的速度，差不多要10倍于万兆的速度才有可能，需要100G的全光纤接入设备
ts02147823 发表于 2023-11-9 23:25
请问一下Windows 11专业版支援RDMA吗?
两台电脑直连，网卡都是MCX311A，一台电脑装Windows 2022 Server、 ...
Windows 11 专业版作为smb客户端是支持SMB Direct的.
你检查一下windows 11 机器上的网卡驱动是否安装正常.
不止是带宽，用图形界面和存储打交道的交互还要考虑时延，这个基本上就是网络存储最容易被本地存储甩开的地方了。基本上要做到和本地存储相似的延迟体验，关键还是在于卸载掉网络堆栈造成的开销， 这样的话，要么用基于iSCSI这类块存储，要么就要上支持RDMA的全闪NVME共享存储，但是无论如何，网络带宽理论上也要2.5G起步，万兆最好。
今晚大老虎 发表于 2023-11-14 00:28
Windows 11 专业版作为smb客户端是支持SMB Direct的.
你检查一下windows 11 机器上的网卡驱动是否安装正 ...
谢谢，我再试试
Win11的装置管理员显示网卡未启用，但测试两台电脑传输透过这网卡都能到满速
打iperf3也都正常，不知道啥原因
本帖最后由 今晚大老虎 于 2023-11-17 06:20 编辑
网卡未启用 这个感觉是有问题的. 走RDMA协议的话,在任务管理器里面网卡的性能监控是看不见流量的, 因为他是监控的TCPUDP流量. 如果能跑满速但是任务管理器里面网卡性能监控显示是零或者很小数值的话, 那基本上就是跑的RDMA协议了.
iperf3只是测试网卡的物理连接速度, 不是文件传输的速度. 不同的文件传输协议带来的速度差异还是比较大的, 你iperf3能跑满,说明整套硬件是没问题的. 只要是硬件支持, Windows Server实现RDMA是最方便和简单的方案, 你现在就是windows 11客户机有点小毛病, 已经离成功很近了.
最近书房升级了万兆桌面交换机。NAS是群晖DS1821+，8个盘组Raid6，硬盘素质一般，不是好的企业盘，到桌面用iperf3测速，为0.6万兆。
网吧讨论专贴
[偷笑]