请问小文件随机IO读写较多是推荐全闪还是special vdev呢

dcl2009

看你有多少热数据，以及truenas内存大小，要是truenas有128G ecc以上的内存，热数据只有几十G，异步，他俩用起来没啥区别

你要是开同步+HDD，加slog是必须的，而且最好是随机强一点的固态，傲腾啥的

当然，全闪+同步也最好开slog

另外，你的网卡支持RDMA吗？对随机性能影响不小

https://www.chiphell.com/thread-2480222-1-1.html

dcl2009

leonfox 发表于 2024-2-6 14:57
多谢大佬！
目前计划中是512G内存，毕竟跟硬盘一比epyc的内存相当于不要钱，64x8
我这边其实一直不太理解 ...

RDMA问题楼下很详细啦，我用的是那个修改版内核，没有到啥问题

同步指的是收到数据立刻写入硬盘，最好加个log，log约等于写缓存

异步指的是收到数据先缓存起来，然后再写硬盘，怕断电，Truenas默认模式

不过你都这么大内存了，再上个UPS，直接开异步，用起来很爽哟，别说10个人用了，50个人估计都没啥问题

dcl2009

YsHaNg 发表于 2024-2-6 18:27
他这个用nfs挂载不会劣化很多吗 还有对rdma的支持
我用nfs方式最惨的是在上面跑git atomic op支持不好直 ...

nfs性能就那样，楼主这种应用足够，毕竟有一两百k的iops，nfs问题是一致性问题，容易文件锁

RDMA无解，不过就算不开RDMA，100k的iops正好能匹配上NFS

实际用起来还凑合，没发现不顺畅