|
发布时间: 2024-1-30 15:00
正文摘要:之前组的一台迷你全闪NAS，最近测了一下存储池连续读写速度。 https://www.chiphell.com/thread-2542806-1-1.html Truenas Scale里用8盘SN640组的raidz1 官方数据表中顺序读写速度是：持续读取3250 MB/s，持续写入1 ... |
| 可以把测试代码发下吗？谢谢，我用的esxi安装truenas，测试速度很慢 |
voandrew 发表于 2024-1-31 11:07 JBOD 我之前在黑QNAP里试了3块 SN760 7.68T的， 感觉像是线性级联3个盘。 写满第一块， 才开始写第二块的样子。 这就让我觉得写入压力会大部分给了第一个盘， 比如像我这样把这个JBOD区在PC上做LR的图像视频处理工作区的， 用了一半不到的容量，那么修改文件一定是在写入第一个盘咯？ 当第一盘写满后， 会不会访问性能大幅下滑？ |
| 单核最大睿频4.0，这不算是瓶颈 |
网仙 发表于 2024-2-5 10:43 固态来说，单核最大睿频对性能影响不小，核心多并没有什么帮助 |
阿崔 发表于 2024-2-2 10:29 优化的好也可以做到整个条带同时操作的，当然对随机写和覆盖写没啥帮助 |
mosigan 发表于 2024-1-31 10:49 cpu是E5V4，不存在瓶颈，应该就是SN640本身的特性导致单线程持续写入速度受限。 |
|
对ssd这种高性能设备来说，raidzn是性能损失的重灾区，尤其是写入时候。尽量用mirror+strip... 因为在写入时候哪怕是raidz1，也需要读区块、读校验区块、写区块、写校验区块4步，加上zfs自己优化，也只是比1/4性能强一点。双盘镜像的strip能做到1/2。 |
mdk2000 发表于 2024-1-31 12:25 这个和线，还有硬盘背板都有关 |
mdk2000 发表于 2024-1-31 12:25 正常，4.0对线路的电气性能要求更高了，安费诺的线试试呗 |
voandrew 发表于 2024-1-31 11:27 不知这块板8654接pcie4.0盘信号是否稳定 我一块超微h12ssl,主板上的8654口接pm9a3一堆pcie错误 |
voandrew 发表于 2024-1-31 11:27 还得是amd的主板舍得给通道，板子不错呀，多少钱？ |
Dolfin 发表于 2024-1-31 10:56 需要看阵列的条带宽度和随机分布程度，阵列基本上依靠队列深度来提升4k |
voandrew 发表于 2024-1-31 11:09 理解错误了吧，8654接口本身只有8通道 |
Dolfin 发表于 2024-1-31 10:56 是的，我设的10 jobs |
conanhfl 发表于 2024-1-31 11:02 不是，EPYC，128条PCIe通道。直接用主板自带的8654接口就可以直接连12块U2，每一块都是pcie x4的速率。 |
mosigan 发表于 2024-1-31 10:49 truenas顺序写入cpu使用率是3%，读取时是1.5%，还是比较低的，可以忽略 |
nn1122 发表于 2024-1-31 08:47 确实，现在觉得，其实JBOD就可以了，挺好的。 |
|
本帖最后由 conanhfl 于 2024-1-31 11:06 编辑 没事, 看错了前一个版本 |
mosigan 发表于 2024-1-31 10:51 阵列无法提升单线程随机性能，但多线程可以，如FIO中设定多numjob数 |
Dolfin 发表于 2024-1-31 09:20 阵列无法提高随机4K,raid 0 都不行  |
网仙 发表于 2024-1-30 17:07 就是想比较一下zfs和mdadm的性能，群晖的话受限于cpu，速度跑不了很快，除非黑裙 |
| 楼主牛人，自己DIY 全闪太 cool 了。 |
| 感谢分享，4k随机读写IOPS也希望能后续测试 |
| 读写速度我个人到是不太在意，不过全闪NAS的体积和噪音可以做的很好 |
| 之前我在DELL R730XD 24盘位机型上了12块S3610 1.6T，H730P阵列卡做RAID6，CDI顺序读取有4000多M，顺序写入只有不到3000M，4K性能比单盘还要弱点，总之比想象中的差，后来结合网上的一些信息就是：SSD并不适合RAID，适合于直通后分布式存储，或者与HDD混合分布式存储 |
mosigan 发表于 2024-1-30 16:55 是的，直接连主板上8654x8的口，直连CPU的PCIE通道 |
|
本帖最后由 网仙 于 2024-1-30 17:24 编辑 在群晖下，我组了两个SN640双盘raid0， 两个阵列之间，互拷大文件可以持续在800-900MB/S，万兆还没有跑满，有点难过。 RaidZ1，可以理解为raid5. 8盘Raid5，速度应该差不多是我上面双盘raid0的4倍，缓外在3000M出头也正常。 |
voandrew 发表于 2024-1-30 16:33 直接pcie拆分接u.2吗，有空可以试试mdadm的raid5速度如何 |
Archiver|手机版|小黑屋|Chiphell
( 沪ICP备12027953号-5 )
310112100042806
GMT+8, 2025-6-7 11:06 , Processed in 0.012075 second(s), 9 queries , Gzip On, Redis On.
Powered by Discuz! X3.5 Licensed
© 2007-2024 Chiphell.com All rights reserved.
