请教各位大神一个万兆NAS的传输速度问题

liuhangbj

[症状]
用DS1821+连接DX517，搭配原厂双万兆电口网卡，13盘位插满14T硬盘，组成单个存储池（SHR），两块NVME的SSD做读取缓存。

用Mac Studio的万兆网口，和NAS连接在同一个万兆交换机（UNIFI FLEX-XG）上，挂载SMB共享。

以上为基础情况。

在此背景下，用librespeed测速可以达到万兆满速。但是通过SMB协议将大文件从NAS拷贝到Mac上，速度最高只有300MB/s左右，但是，从Mac上拷贝文件到NAS上，速度能达到800MB/s左右。

不知是什么原因导致的这种情况，求解！


测速服务直接测速的数据：


用MacOS上的BlackMagic Disk Speed Test测试SMB挂载的卷的读写速度数据：


MacOS上的Finder通过SMB挂载从NAS拷贝文件的速度：


MacOS上的Finder通过SMB挂载向NAS拷贝文件的速度：

zexin4

组SHR能叠加读写速度么？

klzsysy

群晖的问题，我的16T 4盘R10读取速度才三百不到，到群晖官方开case给远程调试，告诉我就这速度。

群晖的raid是linux内核软实现的，cpu又很弱鸡 性能损耗很大

weindy

cpu差，linux底层不行，换黑裙有提升，但是也跑不了满速的

人生是风

取消ssd缓存看看，另外你最好别跨设备做shr，最好本机做一个shr，517做一个shr

liuhangbj

klzsysy 发表于 2023-10-6 11:59
群晖的问题，我的16T 4盘R10读取速度才三百不到，到群晖官方开case给远程调试，告诉我就这速度。

群晖的ra ...

我理解，写入能达到800MB/s，但是读取达不到，那么，CPU、磁盘速度、SSD、网络，这些应该都不是瓶颈

liuhangbj

weindy 发表于 2023-10-6 12:23
cpu差，linux底层不行，换黑裙有提升，但是也跑不了满速的

我理解，写入能达到800MB/s，但是读取达不到，那么，CPU、磁盘速度、SSD、网络，这些应该都不是瓶颈

liuhangbj

人生是风 发表于 2023-10-6 16:05
取消ssd缓存看看，另外你最好别跨设备做shr，最好本机做一个shr，517做一个shr ...

是的，但是现在想改改不回去了群晖的存储池无法减少空间或减少硬盘

lmbh

klzsysy 发表于 2023-10-6 11:59
群晖的问题，我的16T 4盘R10读取速度才三百不到，到群晖官方开case给远程调试，告诉我就这速度。

群晖的ra ...

4盘R10读取速度300不是正常吗？R10相当于两个硬盘速度叠加，150+150=300，这个算正常吧，我单盘最高速度也就180-200，而且这个速度维持不了多久， 平均也就150.

港城钢铁侠

你群晖硬盘速度的问题吧，群晖的SSD缓存机制估计比较坑。

人生是风

我用6盘shr2，smb读取速度都在600-800之间，无缓存ssd。

LWSHH

我也是1821+，8盘RAID5,X520网卡，都接的万兆交换机，无NVME缓存。我用复制测试了几次，如果是PT下载正保种的文件，向电脑复制就只有300M左右，非保种文件有600M左右，我的电脑向NAS复制速度720M左右，反正我觉得传输速度与PT下载关系比较大。黑群也一样，刚装好的时候双向都有800M-1G的速度，开始有PT下载速度就不行了。

liuhangbj

LWSHH 发表于 2023-10-6 16:28
我也是1821+，8盘RAID5,X520网卡，都接的万兆交换机，无NVME缓存。我用复制测试了几次，如果是PT下载正保种 ...

我这PT从来不保种，开了VIP，所以这个影响应该也没有

LWSHH

liuhangbj 发表于 2023-10-6 17:14
我这PT从来不保种，开了VIP，所以这个影响应该也没有

不保种，下载列表是空的？

wuhao

我正在遇到差不多的问题，我有两台一模一样的ds1821，区别是一个是双电口万兆，一个是双光口万兆，结果我电口的万兆，随便跑文件都是1000mb/s，但是光口的只能到300-600mb/s，不知道什么原因，两台nas都是正常状态，机器没有任务，硬盘没有重构和数据清理的工作。

两台机器都没跑docker和其他任何有负载的任务，cpu和内存都占用很低。见了个鬼。。

重新买了一个双电口万兆，准备换上看看

liuhangbj

LWSHH 发表于 2023-10-6 17:27
不保种，下载列表是空的？

下载中的当然不是空的，下载结束后，Radarr或者Sonarr自动导入到媒体文件夹，然后就自动删除了

553720tv

建议你用NFS试一下，SMB本就不是原生的！

zgpnhhy

你试试mac从nas拷贝后，再拷贝第二次，同一个文件，看看是不是变快了！


按qnap来说，
缓存分读写缓存，写缓存，读缓存。

无论哪种模式，第一次读取的时候，是从机械硬盘读取写入到缓存，缓存再传输到mac，所以第一次读取的速度瓶颈在机械硬盘上。
第二次读取同一个文件，命中缓存，直接按万兆跑满。

而写入，
无论你是写入第几次，都是写入到缓存，所以可以跑满。


ps，qnap的缓存不会自动回写，所以写满后需要自己手动操作一下，不然也会变慢。

以上仅供参考。


群晖我自己没有测试过万兆，另外一个朋友那边万兆群晖环境下也是经常有坑。

StevenG

看一下链路上的所有设备，开没开巨型帧

侧船山人

我用的DS1621+的万兆, 读写只能到500MB/S左右,用的SHR. 硬盘用的200MB/s的群晖盘.  最近做4K剪辑,实在受不了, 准备考虑换一下视频剪辑的方法.  不知道用SATA SSD做RAID5是不是可以性能好一些.

vivin7

nas那边性能不够行。我是studio用万兆电转光，再接万兆光交换机，再万兆光到unraid，unraid上是13600k火力全开但不超频。两边互相拖比较大的文件（比如数个三四G的总共几十G那种），都是万兆跑满的。

现在用习惯了，其实还是更贪心的，几十G的东西等一分钟我都不想等。
m1ultra的studio的电口也是有点bug，有时候会丢包，得重启才行。
所以挺想换成雷电4转外置pcie，插个40G的cx3之类的直接跟unraid直连算了（能用满32gbps的方案）。