diy整个服务器级nas玩玩

a39765

越来越看不惯家里的532X nas ，根本很少能跑到万兆麻。要不自己diy一个 费用节省不少。就是花时间，兼容性如何未知。
所以开个贴大家集思广益 日后也也有参考价值给后面做diy nas的

首先搞来一堆洋垃圾
主板：超微 H11SSL-i  3路 pcic3.0X16都支持4x4x4x4拆分。 后悔没有买-nc版本 多两条nvme
CPU:  amd 7282 单路功耗第一
内存 ：32G内存单条


阵列卡 ： 搞来一张古董 dell 6i
网卡：544+flr 40G/56G到时候多插几个在机器上 可以把交换机省了。
拆分卡：

笼子：
一个4sata笼子 给 家里那些没有归宿的 sata ssd用
一个8U2 intel笼子 上U2 SSD用

两个3.5的笼子用来给家里没有归宿的 硬盘用

intel这个笼子最大支持8u2和8sata好像可以同时启用。JIAYI有个 u2转接可以把一个u2同时转接成 sata m2和 nvme m2。
机箱就用个可以放热插拔多光驱位的就行。


成本主要就是主板u和intel那个笼子

安装完成效果图 目前用了9个光驱位还剩下一个。后面可以做风扇控制什么的。


目前做的双系统win 2012R2用于维护系统更新固件等。
主力系统ESXI 8.0 U1 （已经换成7.0U3了为了40G网卡） 跑个黑群晖 和 qutscloud quts主要给我的t1288X做异地备份，最近好像不能黑quts了，后面考虑购买授权。

由于是全diy
目前遇到几个问题。
1、系统没有识别到u2 ssd  我是通过4x4x4x4的拆分卡（直通） 链接 8643转oculink的线连接 u2笼子背板的。这个在windows 里面也没识别到。不知道是什么原因。（重新购置其他牌子的直通卡再试一试）
2、esxi里面40G网卡识别到但是没有驱动。 (已经解决 需要把网卡由专用工具从IB模式调整到ETH模式，目前用的 原装M牌线也只能40G) 另外这个卡  在esxi 7.0u3不能启用SR-IOV
3、dell 6i阵列卡没找到 启动bios时候并没有提示Ctrl+r界面。（已经贴了5,6针脚还是不能用，只有换超微3008 HBA卡了）


5.22最新更新
目前测试 空载待机功耗 65W左右。7个3.5寸 4个2.5寸 5个SSD
佳翼的U2转接目前里面安装了SATA SSD和NVME SSD 安装在intel笼子里面，sata  ssd已经正常使用了。nvme的 等新的拆分卡到了再试



群晖已经上线


硬盘直通进去


温度 smart正常

  


笼子跑起来的效果







这里有个坑 把40G直通网卡设定好固定IP后 原来的网卡会断链，必须通过 40G网卡那个ip进去然后把网络界面原来的ip拉到前面去才能都恢复正常。

archxm

这么大个，不适合家用啊

Nighttao

才搞一根内存吗，这不得把内存槽插满

a39765

archxm 发表于 2023-5-19 09:13
这么大个，不适合家用啊

原本是想上 几家dell R 730或者R740的
那个更占地方噪音还大。
目前这个 就随便找个 角落桌子下面一丢就行了。噪音和功耗很理想。

死也要爱钱

flr544+是基于mellanox的connectx3 pro，esxi 8只支持connectx4及以上
贴一个查esxi硬件兼容性的官网地址：https://www.vmware.com/resources ... r&sortOrder=Asc

dcl2009

我发现便宜也能稳定运行

挂了14个盘到黑群晖，不知不觉小半年了，上边还挂了软路由

逍遥谷

同款机箱，主板用的超微x12sca-f，硬盘没有楼主这么多啊，扩展性是真的强

建议柠檬

刚买了个24盘矿渣机箱
塞了MSS1211+E3+32G+1000W
翻出来个寨卡X520 直接直连档存储用了

ghwwx

dell的6I也太老了。怎么也得搞个9260-8i.
dell的raid卡要在别的主板上用好像是要屏蔽pcie上的5，6pin. 透明胶+剪刀可以搞定。

看看这个楼主的好复杂。我一直看好ml110 gen9， 担心耗电太大。

哆啦咪

dcl2009 发表于 2023-5-19 09:25
我发现便宜也能稳定运行

挂了14个盘到黑群晖，不知不觉小半年了，上边还挂了软路由

求问，现在黑群晖挂多盘需还要改参数设置吗？还是直接插新硬盘就行？手头有16张盘没用处。

okko123

主板好贵

dcl2009

哆啦咪 发表于 2023-5-19 09:42
求问，现在黑群晖挂多盘需还要改参数设置吗？还是直接插新硬盘就行？手头有16张盘没用处。 ...

几个控制器？加控制器7.x的黑群需要改DiskIdxMap和SataPortMap，不加控制器群辉里面改一下内部硬盘映射字就好了

alieshex

都7282了，不整个活上7d12

哆啦咪

dcl2009 发表于 2023-5-19 09:45
几个控制器？加控制器7.x的黑群需要改DiskIdxMap和SataPortMap，不加控制器群辉里面改一下内部硬盘映射字 ...

1个LSI的控制器。看来还是需要改呀。我再去研究研究。

huihuige

羡慕硬件
感觉楼主的问题全是硬件兼容性的问题……
那个拆分卡不错，小巧不占地方

a39765

dcl2009 发表于 2023-5-19 09:25
我发现便宜也能稳定运行

挂了14个盘到黑群晖，不知不觉小半年了，上边还挂了软路由

麻烦问下 硬盘是直通到黑群晖里面的还是怎么 挂载的？

rukky

才升级不久

dcl2009

a39765 发表于 2023-5-19 09:59
麻烦问下 硬盘是直通到黑群晖里面的还是怎么 挂载的？

直通控制器进去的，找那两个参数费了点劲，和裸机不大一样。一个板载自带的控制器，另一个是LSI的控制器，IT模式

RDM硬盘也挺稳定，总觉得不如直通控制器安全就没有RDM

a39765

ghwwx 发表于 2023-5-19 09:33
dell的6I也太老了。怎么也得搞个9260-8i.
dell的raid卡要在别的主板上用好像是要屏蔽pcie上的5，6pin. 透明 ...

非常感谢！

maoshen1234

拆分卡麻烦买稍微正经点的，另外就是，建议看说明书，找对PCIE拆分的位置，再去调拆分

a39765

maoshen1234 发表于 2023-5-19 10:09
拆分卡麻烦买稍微正经点的，另外就是，建议看说明书，找对PCIE拆分的位置，再去调拆分
...

我看主板说明书  几条pcie 16x都支持 4x4x4x4。  

弱弱问问哪种是正经一点的？带芯片的吗？
另外我这个有8个u2  最好还是买一拆4的。

liangxy

一年电费就差不多一台服务器了

zjksjs1

同款U2笼子，Win里没识别到的话你尝试重启一下机子（不要变更盘位），大概就可以识别了（我的就是这样子的，不过我是用的带芯片的拆分卡）。

mypchas6fans

maoshen1234 发表于 2023-5-19 10:09
拆分卡麻烦买稍微正经点的，另外就是，建议看说明书，找对PCIE拆分的位置，再去调拆分
...

请问这个卡的关键字是啥

fkpwolf

这个u.2硬盘笼子直接就可以用么？我看都说要改改才能用

a39765

fkpwolf 发表于 2023-5-19 10:34
这个u.2硬盘笼子直接就可以用么？我看都说要改改才能用

这个就标准两个光驱位里面  随便粘一下就能用 ，后期我准备给他diy一个笼子然后 加上 散热。

tsaotse

果然是换塔式机箱，啥都不用纠结了，啊哈哈……

zhgna

现在捡垃圾组nas，真是性价比超高。前段时间也组了台，超微x11sca-f，8600t，48g ddr4 ecc，9361-i8，万兆卡，4u工控带8盘热插，外加2个浪潮笼子共24盘，全部下来4元千有找。

猪圈

intel这个笼子你是怎么固定到机箱上的

iooo

这也能叫拣LJ