找回密码
 加入我们
搜索
      
查看: 3190|回复: 34

[NAS] 关于自用/家用全闪 NAS 硬盘选择的思考

[复制链接]
发表于 2025-7-7 02:59 | 显示全部楼层 |阅读模式
本帖最后由 l泰然处之01 于 2025-7-7 03:07 编辑

看到B站上推送了一个 SAS 24Gb SSD 的视频,发现这玩意儿其实非常适合组全闪 NAS,
个人用了 8块 性能孱弱的 WD SN640 NVMe SSD 组了全闪 NAS,目前遇到的瓶颈:

1.无法组硬 RAID,软 RAID 全靠 CPU,跑存储 CPU 先起飞。
2.CPU 扩展性要求高,直连需要上支持多 PCIe lanes 的 CPU,单存储功能根本用不到对应性能。
3.主板扩展性要求高,主板选择受限(尺寸、平台)。
4.整机功耗高,消耗基本不是在 SSD 上,高负载下软 RAID 吃 CPU,读写功耗高,NVMe 直连 CPU 导致 IODIE 长期高功耗,低负载时高性能 CPU 的功耗也较高。
5.平台高功耗带来的散热和噪音问题。

相比之下,自用/家用情况下,
速度方面,以 25G 内网来说,NVMe SSD 的连续读写速度早已经超过带宽,盘位较少的情况下 SAS SSD 其实也能跑满,多盘位甚至 SATA 也能达到同等读写性能。
功耗方面,较 NVMe SSD 来说,SAS/SATA 可以上硬 RAID 卡集中管理、降低 CPU 负载,基本可以实现待机只有 SSD 的功耗,即使不用硬 RAID,由于少了 IODIE 的基础功耗,CPU 待机功耗和负载功耗应该也要低不少。

目前感觉唯一的局限性就是 SATA 企业盘太少太老,消费 SATA 盘相比 NVMe 盘高价低能,SAS 盘太少且太贵。

说句题外话,群晖传闻中的25年新品里,DS625slim 现在还没有发,有媒体报道这款产品已经更名为 FS200T,配置没有变化,2.5GbE + 1GbE 是真的无力吐槽,但凡上个 5GbE 的口,这设备的价值也能体现出来了。
发表于 2025-7-7 08:30 来自手机 | 显示全部楼层
我用威联通组的16盘sata ssd,待机时功耗应该在100以内(没具体算过,nas+万兆交换机+万兆路由器,整体120w+),用的家用sata ssd,目前主要的两个问题就是存储超过80%以后,整体读取速度有降低(写入时,也会有一个缓慢的提升写入速度的过程,而不是瞬间满速写入),还有数据长时间不动,再访问时会降低到10几m/s,需要定期格式化
发表于 2025-7-7 08:41 来自手机 | 显示全部楼层
sas固态盘的话,前段时间菊花硬盘部门出事,似乎流出了一批全新的sas固态,6.4t 3500左右,全是能打平一些常见的u2

sata固态,企业级万年高价,哪怕当初固态最便宜的时候,也是要比u2贵上不少,家用sata,容量基本在4t,个别8t的要么小众牌子(基本停产)要么三星的qlc

针对nvme/u2,我现在的思路,就是用大容量盘把硬盘数量控制在8盘左右,这样功耗相对好一些

还有,不论什么盘,哪怕傲腾,目前smb3下的4k也是惨不忍睹,想提升,只能用iscsi之类的非共享协议(代价就是两台电脑没法共享同一目录的读写,只能指定存储空间给指定机器使用)
发表于 2025-7-7 08:55 | 显示全部楼层
热数据放ssd,冷数据放hdd,不追求真全闪了
发表于 2025-7-7 10:08 | 显示全部楼层
看到王思聪家组了一个 SAS 24Gb SSD NAS,发现这玩意儿其实非常适合人傻钱多。如果你觉得你也和王公子一样人傻钱多的话就上吧

1. 盼着SAS SSD组硬RAID?笑死,硬RAID在SSD时代就是性能减速器,性能都减爆了那后面的问题都没讨论的必要
发表于 2025-7-7 10:11 | 显示全部楼层
感觉除了音影工作相关人员需要高速读写,考虑全散,一般家用热数据用SSD,冷备用HDD,没有这方面的忧虑
发表于 2025-7-7 10:30 | 显示全部楼层
总算看到一点儿625slim的讯息,原来是更名了。。。
等到DDR4涨价这玩意都没发售,简直了
发表于 2025-7-7 10:33 | 显示全部楼层
本帖最后由 大光光 于 2025-7-7 11:16 编辑

nvme radi得用GRAID SupremeRAID方案了。通过cuda分担闪存raid运算开销。
 楼主| 发表于 2025-7-7 15:09 | 显示全部楼层
awpak78 发表于 2025-7-7 10:08
看到王思聪家组了一个 SAS 24Gb SSD NAS,发现这玩意儿其实非常适合人傻钱多。如果你觉得你也和王公子一样 ...

限制 NAS 的从来不是 NAS 本身,100G 内网跑满了充其量跑个 12GB/s, 极端一点 24盘+的 SATA SSD 也能跑满,NVMe SSD 读写和 PCIe Lanes 对 CPU 的需求,整机平台功耗,和 SATA/SAS 的有啥可比性?
当然 IOPS 硬RAID卡确实垃圾,个人/自用有多少需求?家庭用户真有企业级或者业务需求的,会在这儿讨论吗
以及 机房下架的 NVMe 企业盘或者大船货确实便宜,但是除了这种捡垃圾哪个盘有性价比?
SATA 和 SAS 本身性能就受限,但是相对的低性能,对其他硬件的要求也低了不少
 楼主| 发表于 2025-7-7 15:10 | 显示全部楼层
大光光 发表于 2025-7-7 10:33
nvme radi得用GRAID SupremeRAID方案了。通过cuda分担闪存raid运算开销。

那个方案按盘位卖也不便宜。。。
发表于 2025-7-7 15:42 | 显示全部楼层
l泰然处之01 发表于 2025-7-7 15:10
那个方案按盘位卖也不便宜。。。

不是个人用户能承受的。。坐等大佬手搓开源方案。
发表于 2025-7-7 15:56 | 显示全部楼层
本帖最后由 huihuige 于 2025-7-7 15:58 编辑

你是说类似这种的?12G速率的?
用5212m4的硬盘笼搭配个3108就行了
24G的用哪个卡?价格降到白菜价了么?
SAS.jpg

再说楼主SSD组raid图啥?顺序读写性能?
发表于 2025-7-7 16:02 | 显示全部楼层
个人觉得家用也没必要raid,既然大多都是raid的问题,干脆就不要了,重要数据备份即可
发表于 2025-7-7 17:13 | 显示全部楼层
硬RAID已經過時了
发表于 2025-7-7 18:25 | 显示全部楼层
本帖最后由 mdk2000 于 2025-7-7 18:27 编辑

玩全闪的谁会在意功耗啊.....
ssd市场一震,不是亏几千就是赚几千,十年电费都来了

sata sas太贵了,u2是唯一选择了

全闪只能跑rdma,nvme-of这种,smb hdd够了

25G网络nvme-of (zfs raid1),速度相当于pcie 3.0的盘了
atto 1m-128k.jpg

100G网络nvme-of (zfs raidz1)
1m-128k.jpg
发表于 2025-7-7 19:18 来自手机 | 显示全部楼层
好帖,持续关注
发表于 2025-7-7 20:50 | 显示全部楼层
l泰然处之01 发表于 2025-7-7 15:09
限制 NAS 的从来不是 NAS 本身,100G 内网跑满了充其量跑个 12GB/s, 极端一点 24盘+的 SATA SSD 也能跑 ...

什么功耗了个人自用了,都算不上问题,我就是这么玩的
 楼主| 发表于 2025-7-8 01:09 | 显示全部楼层
brucelee1126 发表于 2025-7-7 20:50
什么功耗了个人自用了,都算不上问题,我就是这么玩的

我在意功耗是因为机柜散热(NAS功耗)以及带来噪音的问题,我现在 NAS 是38盘,目前一年四季除了冬天其他时间都开空调固态基本压在30度,发这个贴纯粹为了探讨 SATA 和 SAS 是不是更合适自用/家用的全闪方案
 楼主| 发表于 2025-7-8 01:10 | 显示全部楼层
mdk2000 发表于 2025-7-7 18:25
玩全闪的谁会在意功耗啊.....
ssd市场一震,不是亏几千就是赚几千,十年电费都来了

为什么不在意。。。天天空载占那么高功耗,既然折腾就折腾到底,用钱解决问题其实很没意思
发表于 2025-7-8 09:52 | 显示全部楼层
我用的1821加全sata,反正家用也感受不出来sata和nvme的区别,更别说raid之后性能加成。sata散热也好于u2,家用图个凉快静音,功耗8盘也就40-50w,不用担心电费刺客。
发表于 2025-7-8 11:09 | 显示全部楼层
l泰然处之01 发表于 2025-7-8 01:09
我在意功耗是因为机柜散热(NAS功耗)以及带来噪音的问题,我现在 NAS 是38盘,目前一年四季除了冬天其他 ...

家用的话,nvme m.2 是不是就是最优解了?
发表于 2025-7-8 11:13 | 显示全部楼层
sas 盘就没有温度不高的。
企业级sata ssd就没有不贵的。
U2这种cpu负载就没有不高的。
发表于 2025-7-8 11:38 | 显示全部楼层
U2的磁盘。貌似功耗都不低啊。
好像ssd时代,raid,已无必要了。单磁盘速度都可以飞起了
发表于 2025-7-8 14:45 | 显示全部楼层
楼主你完全搞错对象了,SSD要raid干啥?
首先肯定不是速度,PCI 5.0的ssd硬盘传输速度15.7GB/s,什么样的网卡能支持这个速度?现在肯定的说,所有raid卡都是拖慢ssd速度的,因为ssd速度已经是极限了,你raid卡还要管理几个ssd,那性能需求要多大才能满足?

其次是可靠性,比如raid5.
在SSD时代,使用多个SSD组建RAID 5的必要性大大降低,并且在很多常见场景下通常不被推荐。这主要是由于SSD本身的特性、现代存储技术的发展以及RAID 5固有的缺点在SSD上被放大或变得不那么重要。

以下是详细分析:
写入性能惩罚显著 (尤其是随机写入):
SSD单盘性能已非常高:
SSD寿命与写入放大:
故障重建时间长且风险高:
成本效益比降低:

所以不建议raid,要安全,建议采用定期备份方式更合理。
发表于 2025-7-8 16:37 来自手机 | 显示全部楼层
飞翔 发表于 2025-7-8 06:45
楼主你完全搞错对象了,SSD要raid干啥?
首先肯定不是速度,PCI 5.0的ssd硬盘传输速度15.7GB/s,什么样的 ...

对比hdd我反而喜欢用ssd组raid 倒也不是lz的硬raid卡 此处不讨论备份 因为有
ssd重建速度快很多
写入确实差点但也不像hdd 少了寻址时间 在网络瓶颈以及协议问题下影响不大 我个人也喜欢建raid1 尤其是btrfs的mirror 3盘5盘这种都能随便组
大部分ssd没等写入寿命消耗完就过时了
多盘ssd阵列峰值功耗和温度确实恶心 只有sata好点 u2也高
发表于 2025-7-8 16:42 | 显示全部楼层
搞个SAS 阵列卡试试
 楼主| 发表于 2025-7-8 17:06 | 显示全部楼层
本帖最后由 l泰然处之01 于 2025-7-8 17:57 编辑

为什么我要用硬 RAID 卡呢,是为了接更多的盘组 RAID 并且可以统一管理自动巡盘自动查一致性,如果你喜欢软 RAID 或 单盘也可以,扩展盘位的时候用 HBA 卡就可以。
对于 RAID 5/6 1/2盘坏了的情况,整个存储池还能继续工作,
以及存的东西多了之后,挂 8 个盘挨个找?我的 Time Machine 已经超过10T,哪个单盘能存的下?
发表于 2025-7-8 17:25 | 显示全部楼层
其实也有不受吞吐瓶颈的 NVME “硬RAID” 卡

GRAID
SupremeRAID™ is a software-defined RAID solution on a GPU, designed to deliver maximum SSD performance without consuming CPU cycles or creating throughput bottlenecks. Out-of-path RAID protection technology means data travels directly from the CPU to deliver unmatched flexibility, unprecedented NVMe/NVMeoF performance, and overall superior value. A single SupremeRAID™ card blasts performance to 28M IOPS and 260GB/s and supports up to 32 native NVMe drives.

GRAID SupremeRAID™ 是一种基于 GPU 的软件定义 RAID 解决方案,旨在在不占用 CPU 资源或产生吞吐瓶颈的情况下,释放固态硬盘的最大性能。其**“非路径内” RAID 保护技术**,使数据可以直接从 CPU 传输,带来无与伦比的灵活性、前所未有的 NVMe/NVMeoF 性能,以及整体更优的价值。一张 SupremeRAID™ 卡即可实现高达 2800 万 IOPS 和 260GB/s 的性能,并支持最多 32 块原生 NVMe 硬盘。

发表于 2025-7-8 18:26 | 显示全部楼层
飞翔 发表于 2025-7-8 14:45
楼主你完全搞错对象了,SSD要raid干啥?
首先肯定不是速度,PCI 5.0的ssd硬盘传输速度15.7GB/s,什么样的 ...

我的ssd,全部raid0的,怕火葬场,所以对应有hdd备份,raid0首要是提升速度,其次是整合多盘空间,pcie5.0买不起,买4块pcie3.0组raid0,如果是读写都是3500的u.2,4块u.2跑一张100g网卡也是相当契合
发表于 2025-7-8 18:29 来自手机 | 显示全部楼层
dual port sas我可太有发言权,贩子回收废盘都给我转了大几千了。。。
您需要登录后才可以回帖 登录 | 加入我们

本版积分规则

Archiver|手机版|小黑屋|Chiphell ( 沪ICP备12027953号-5 )沪公网备310112100042806 上海市互联网违法与不良信息举报中心

GMT+8, 2025-7-17 02:09 , Processed in 0.013930 second(s), 6 queries , Gzip On, Redis On.

Powered by Discuz! X3.5 Licensed

© 2007-2024 Chiphell.com All rights reserved.

快速回复 返回顶部 返回列表