Chiphell - 分享与交流用户体验

标题: <更新软件篇>HPE ProLiant MicroServer Gen10 Plus 开箱与扩展 [打印本页]
作者: 我輩樹である    时间: 2020-7-22 20:44
标题: <更新软件篇>HPE ProLiant MicroServer Gen10 Plus 开箱与扩展
本帖最后由 我輩樹である 于 2020-7-25 12:01 编辑



这台微型服务器我前后大概捣鼓了两个月的时间，因为一些配件除了等还是等，好不容易等来的显卡还遭遇了出厂不良的问题。好在硬件方面昨天已经全部弄完了，这里想和大家全面的分享一下。

它的名字是 HPE ProLiant MicroServer Gen10 Plus，惠与出品的微型服务器，定位是小微企业。如名字所言它其实是一台服务器，而非一台专职的NAS，只是因为现在的NAS功能太强大，两者的概念开始混淆了。

自Gen8以来，CHH网友就有不少将这个系列的服务器用做NAS，或者是all-in-one的家用数据枢纽，性价比颇高。当然GEN10 Plus会不会也和GEN8一样走入家庭很难说。经过短暂的使用后我个人认为，它有来自企业血统的优点，当然也有因为需求错位带来的不人性的地方。在下面的分享中，希望我能部分回答这个问题。

首先说明一下我购买的是低配版本，也就是CPU采用G5420，内存为8GB Unbuffered ECC RAM（1x）。
另外一个版本是CPU采用E2224，内存为16GB Unbuffered ECC RAM（1x）。
首先强调一下，因为功耗限制的原因，选择高配版本不一定能获得你想要的性能。后面我会解释这一点。
而我选择低配的原因纯粹因为我计划自己换个大点的CPU，起码6核12线程吧，当然后来因为功耗问题打消了这个念头。

开箱

下面是开箱部分，因为并不是论坛首发，有的帖子说过的我就不再赘述了。
购买途径是淘宝。
(, 下载次数: 118)

随附的部件很简单：一个180W电源适配器，一包干燥剂，一袋“脚贴”用于直立放置，两页纸的说明书，本体。
电源为建兴LITEON出品19.5V 9.23A（19V 9.5A）的外置直流适配器。
在淘宝上大概的搜了下，暂未找到比这更大的型号，也就是说电源方面可能没什么升级空间，只能在这180W内打转转。
(, 下载次数: 109)
(, 下载次数: 114)

小体积是它的重要特点之一，基本上是4x3.5寸盘位的极限体积了。
内部空间设计到几乎没有浪费，除了硬盘外，还装着一整套C242芯片组和散热器。
大大的HPE LOGO，HPI的痕迹已经彻底消失了，对于B格来说是一次重要提升。
(, 下载次数: 121)

主机和电源适配器的对比。电源适配器的水平面大小与智能手机类似。
我这一台主机来自美亚，所以电源线是没法直插的。要么另买一根电源线，要么需要一个美式插头转中式国标的转换插头。
(, 下载次数: 97) (, 下载次数: 105)

前脸标牌上面的凹陷处其实是一个提手。在内部的锁扣打开后，从这里拉起便可打开前盖更换/安装硬盘。
(, 下载次数: 105)

前部内置两个USB TYPE-A 3.2 第二代接口（来自说明书的说法），速率为10Gbps（峰值1GB/s拷贝速度）。
实际使用的时候有点小问题，主要体现在对windows to go不太友好方面。具体是下面两点：

1，开机不识别WTG盘。经过我多方测试，只有在后置的USB接口上已经接有其他USB储存设备的时候，才会识别前置USB接上上的WTG盘，操作很骚。必须是储存设备，什么键盘鼠标蓝牙友联都不行。但是只要识别了，进系统就是妥妥的满速接口UASP协议。

2，有随机掉盘的现象，可能是供电不够。
使用佳翼的nvme移动盘 + 2282的M.2时，CDM的4K随机读写测试时有一定几率掉盘。
使用佳翼的nvme移动盘 + 2242的M.2时，没有问题。

总之，要做WTG的话，建议还是接在后置USB 3.1 GEN1接口上，速度虽然只有一半的5Gbps，但也足够使用了，而且温度还低不少。
比较让人困惑的是在GEN10 Plus的bios选项中确实有 是否允许从U盘启动系统 的选项，但对WTG的支持却又这么马马虎虎。
估计它们只是设想了内部的USB 2.0接口启动linux的工控机场景吧，希望后续能够修正这个问题。
(, 下载次数: 102)

面板右侧为三个指示灯与一个电源按钮。三个灯分别是磁盘/网络/电源。
(, 下载次数: 107) (, 下载次数: 92)

主机的后部有大量的接口和扩展槽位。
包括：
iLO扩展卡槽，需另外购买iLO5 NIC套件。
PCIE 3.0x16扩展卡槽，仅支持单槽半高、无外接供电的设备（功耗<=75W）。
电源接口、电源扣，防止电源接口意外脱落，但并没有双电源冗余设计。
4个RJ45千兆网口，左边数第一个接口可以配置为iLO shared port模式。
VGA视频接口。
DP1.0视频接口，使用该视频接口启动linux时需要加上nomodeset参数。
4个USB 3.1 GEN1 5Gbps速率接口。
(, 下载次数: 107) (, 下载次数: 118)

机器面板处，做工也并不是那么完美。
(, 下载次数: 107)

全机也就两处免工具螺丝，作用是取下上盖。
(, 下载次数: 116)

扩展

卸下上盖，打开卡扣，拉起面板，就能看到4x3.5的硬盘位。
螺丝客串导轨，整齐的排列在框架上面。
(, 下载次数: 124) (, 下载次数: 112)

1，安装磁盘。我的配置是4张希捷EXOS 10T企业级硬盘。这些7200RPM的磁盘噪音非常大（不是读写的声音，而是空载运行的巨大共振。当然读写的声音也挺大的），不适合放在桌面使用。建议想放到桌面使用的朋友不要买这个盘，可以买稍微转速低一点的。当然塞到柜子里面的那是无所谓的。
另外说一下，这个盘是没有中间螺丝的。所以有些机箱不好装，当然在Gen10 Plus上没有这个问题。
(, 下载次数: 108) (, 下载次数: 115) (, 下载次数: 98)

2，安装iLO5 NIC 套件，补全OOB（带外管理）的功能。带外管理举个通俗的例子大家就明白了。一台支持带外管理的计算机，你只需要给他通电通网就行了，配置和使用都可以通过远程完成。
这一般需要计算机有一套独立于业务系统的软硬件。GEN10 Plus就是这种类型的计算机，但是它需要一个额外的配件激活该功能，就是iLO5 NIC套件。
(, 下载次数: 124) (, 下载次数: 113) (, 下载次数: 105)
这个配件在天猫上卖400块钱，明显阻碍了一些淘宝倒爷的生意，所以当场就被一扫而空。
为了激活全功能，除了需要安装这个模块外，还需要一个iLO Advanced的license授权，淘宝上50块内可以买到。

2，必须要有显卡。单槽半高主动散热无需外置供电的显卡确实不好找，要么太老，要么太贵。幸运的是翔升刚好推出了一款符合条件的GTX1650（没有这个卡之前，我考虑了好久同为75w的tesla T4，被动散热，在纠结如何给它屁股上装两个风扇），简直就是量身定做。
(, 下载次数: 106) (, 下载次数: 122)

3，安装万兆网卡。很可惜的是，因为PCIE已经让贤给了显卡，最终的方案是使用QNAP出品的一个USB转5G的转换器来50%实现这个目标了。具体的测试可以看下面这个帖子：
https://www.chiphell.com/thread-2239826-1-1.html

4，安装双操作系统。业务系统采用ubuntu 18.04，同时准备一个WTG模式下的windows server 2019做调试或其他用途。问题是，若是不升级内部的RAID控制器，GEN10 Plus是没有其他SATA接口可用的。这样U盘启动操作系统就成了唯一的选择。

linux可以很容易安装在U盘里面，而windows必须以WTG模式安装。一个小提示，使用windows系统自带的WTG部署工具只能部署windows 10 business版本，但使用国产第三方WTG工具可以部署任意windows版本，连windows server 2019都可以被你装到一个小U盘里面带走。

安装

所有配件集齐，准备安装。
(, 下载次数: 108)

ILO 5 NIC 套件。部件编号：P13788-B21。因为疫情原因，等了很久才买到。
(, 下载次数: 100)

虽然有一个RJ45网口，但是只能做iLO管理界面的访问，不能访问网络。
可以使用shared port功能将iLO web管理界面的访问迁移到Gen10 Plus的网口上，这样就实现了one cable既可以连接网络（千兆），又暴露了web管理界面地址。
(, 下载次数: 105)

里面仅一个芯片。
(, 下载次数: 112)

翔升GTX1650 4G 战刀。单槽，半高，主动散热，无需外接供电。非常符合Gen10 Plus的需求。
这卡我买了两块，第一块出厂不良，退掉了，可知这一退换来的是近一个月的等待。
新版卡与旧卡表面的图案不一样，感觉还是原来的好看点。
这张卡有非常漂亮的纯铜散热器，厂家是下了血本的。接口为1个DP一个HDMI。金手指为8x。
旧卡：


这沉垫垫的铜（当时正在试图挽救它）


新卡：
(, 下载次数: 105) (, 下载次数: 115) (, 下载次数: 112)

intel X520 DA2，最终没有用上，让位给显卡了。
(, 下载次数: 101)

操作系统的U盘。
windows server 2019 WTG系统盘：佳翼nvme移动硬盘盒。
这个硬盘盒只能安装规格小于等于2242的M.2盘，我的配置是PM991 256GB。

系统盘下的信息与跑分。
(, 下载次数: 100) (, 下载次数: 105)

ubuntu 18.04系统盘：某闪迪USB 2.0 128GB U盘。
(, 下载次数: 108)

USB转5G网卡。参考下面的网址，就不赘述了。
https://www.chiphell.com/thread-2239826-1-1.html
(, 下载次数: 113) (, 下载次数: 106)

安装。拆机。
(, 下载次数: 119)

iLO NIC 套件的专用接口与PCIE 3.0x16扩展槽扩展至同一根PCIE 3.0x16。
(, 下载次数: 119) (, 下载次数: 101)

顺利安装显卡。
(, 下载次数: 118)

顺利安装iLO NIC套件。位置非常和谐，特意为涡轮风扇留出空位。
(, 下载次数: 109)

安装内存条。
内存条为HPE认证的standard memory，有两个型号，分别是SK海力士的879526，和三星的879505。
混插应该也没什么问题，但最好还是凑成一样的。
(, 下载次数: 122)
(, 下载次数: 101)

CPU风扇与散热器。
这个风扇是HPE在服务器上常用的875075-001。风扇除了开机会满速外，后续噪音很小。
所以这个机器的主要声音就是来自磁盘的噪音。
(, 下载次数: 109)

散热器分为两块组成L型，为了最大程度的节省空间。两块散热器由梦幻双热管连接。
(, 下载次数: 127) (, 下载次数: 84)

板载HBA+RAID控制器接口，控制器信号为HPE Smart Array S100i SR Gen10，可组建0，1，5，10的阵列。
需要说明的是，这个控制器组建的RAID只能被windows识别，测试了多个linux版本，反复安装smartpqi，没有任何可以识别的痕迹。
我的配置下因为业务系统并未采用windows，所以RAID方案采用的是linux的mdadm，windows下无法看到磁盘内容。
既然PCIE已经献祭给了显卡，那么升级RAID卡也无从谈起了。
(, 下载次数: 111)

磁盘端的SAS接口，但如果不替换控制器是不支持SAS，也不支持热插拔。
(, 下载次数: 109)

业务系统U盘，插在内部的USB 2.0接口上。
除了开机比较慢外，对性能没有影响，也几乎没有热量。
(, 下载次数: 93)

GEN10 Plus抽屉式设计的全景。
(, 下载次数: 116)

扩展部件安装完后还是显得有点挤。
(, 下载次数: 102) (, 下载次数: 105)

WTG的诊断系统盘安装在最上面的一个USB接口上，看上去很和谐。
(, 下载次数: 110) (, 下载次数: 103)

接上其他线的最终效果图。
(, 下载次数: 110) (, 下载次数: 108)
跑个TSE看看。


one more thing，说说功耗问题。
G5420 + 4块EXOS 10T满负荷读写时，功耗为80W左右（待机40W左右）。
显卡功耗为75W（待机11W左右，另外满载的时候在nvidia-smi里面看最多可以到79W）。在这个条件下，余量为180W - 80 - 75 = 25W，这还是在CPU仅50%负载的情况下。
如果它做为家庭的数据枢纽，同时有几个负载是十分现实的。
换句话说，如果选择了安装显卡，那么高性能CPU就很有可能是被舍弃的对象。

处理器的选择基本可以参考servethehome的终极升级指南。
https://www.servethehome.com/hpe-proliant-microserver-gen10-plus-ultimate-customization-guide/

注意表格中标注的intel的TDP是基本没有参考价值的。比如E2246G，TDP为75W，实际满boost下为120W+，在Gen10 Plus下基本上要其他设备空载才有可能。

总结
怎么可能不喜欢，没事都想把玩两下，但这也就是我的感想而已。
理性的讲目前还谈不上高性价比这回事，硬件方面受限功耗问题，其实可玩性并不高，很多情况下比不上自组NAS。
但是如果你重视外形，想要享受来自HPE带外管理的便利性，那么这台HPE ProLiant MicroServer Gen10 Plus也不失为一个好的选择（iLO和ipmi的比较会在软件篇里面阐述）。
当然最重要的是能够便宜下来，或许才能受更多人的青睐吧。
作者: 我輩樹である    时间: 2020-7-22 20:44
本帖最后由 我輩樹である 于 2021-10-13 09:17 编辑

欢迎来到软件篇，软件篇内容较多，会慢慢更新。
驱动

1，iLO5 Advanced Licsense安装。

MicroServer Gen10 Plus自带iLO5的Essentials许可，至于Advanced许可到底增强了什么东西，因为激活这个许可代价比较低（淘宝购买50块以内），我也懒的看了。
大家可以参考下列文档：
https://h20195.www2.hpe.com/v2/GetDocument.aspx?docname=c04154343
注意购买的时候别买错了，Gen10 Plus这代是iLO 5。

首先登陆iLO WEB UI，默认的用户名和密码在机器的底部标签上。当然你也可以直接杀到BIOS里面创建你要的用户名和密码。
(, 下载次数: 108)
进入Administration菜单的licensing的tab页，输入序列号，点击install即可激活。
(, 下载次数: 101)
2，升级Service Pack。
固件下载地址为：
https://techlibrary.hpe.com/us/en/enterprise/servers/products/service_pack/spp/index.aspx

建议在windows下更新，更新方法按照里面的说明一步一步的升级即可，全中文界面。
SPP包含大量的升级，还包含各种操作系统的驱动，居家旅行的必备了。

3，驱动安装。
除了显卡以外，QNAP的USB 3.1转5Gbps网卡需要额外安装驱动开启两个额外的专用功能。除此以外linux下是免驱的，RAID控制器虽然不能用，但是可以检测到。
windows的驱动需要借助Service Pack软件包。
显卡安装在windows下就不赘述了，ubuntu下通过下面的命令安装：
  1. sudo ubuntu-drivers autoinstall
复制代码


QNAP 5G的驱动下载地址：
https://www.qnap.com.cn/zh-cn/product/qna-uc5g1t/specs/hardware

linux的情况下，需要安装下面两个驱动。
(, 下载次数: 102)
安装方式比较简单，参考readme文档。

安装完后，linux下可以通过下面的命令查看或开启/关闭功能（需要实现安装ethtool），在windows里面只要通过驱动的界面即可。
  1. ```bash 显示专用功能
  2. ethtool --show-priv-flags <interface>
  3. ```

  5. ### Currently supported flags:

  7. | Flag | Default value |
  8. | -----| ------------- |
  9. | Low Power 5G | off |
  10. | Thermal throttling | on |

  12. ### Change flag:

  14. **Enable:**
  15. ```bash 开启指令，interface可以通过ifconfig查询
  16. ethtool --set-priv-flags <interface> "<flag>" on
  17. ```

  19. **Disable:**
  20. ```bash 关闭指令
  21. ethtool --set-priv-flags <interface> "<flag>" off
  22. ```

  24. **E.g**
  25. ```bash 开启低功耗模式的例子
  26. ethtool --set-priv-flags enx0017b6123456 "Low Power 5G" on
复制代码
这两个功能如下：
Low Power 5G：低功耗模式，开启后传输速度经测试不超过300MB/s，温度降低，性能爬坡变得缓慢。
Thermal throttling：过热的情况下降低性能或直接掐断。开启可能会让负载变成波浪形。如果你每次都是那种爆发式使用，建议关闭。

这两个参数保持默认其实就很好用了。
耐久测试：
一次性拷贝745GB，有波动，但基本保持正常速度。


5个容器解决99%的需求

计划使用纯docker container方案实现业务。
1，下载：transmission，第三方流行镜像（pulls > 100M）。

  2. version: "3.8"

  4. services:
  5.   transmission:
  6.     container_name: transmission
  7.     image: linuxserver/transmission:latest
  8.     restart: always
  9.     stdin_open: true
  10.     tty: true
  11.     environment:
  12.       - TZ="Asia/Shanghai"
  13.       # - TRANSMISSION_WEB_HOME=/combustion-release/
  14.       - TRANSMISSION_WEB_HOME=/transmission-web-control/
  15.       # - TRANSMISSION_WEB_HOME=/kettu/
  16.       - USER=用户名
  17.       - PASS=密码
  18.       - PUID=1000
  19.       - PGID=1000
  20.     volumes:
  21.       - /mnt/md0/transmission/config:/config:rw
  22.       - /mnt/md0/transmission/downloads:/downloads:rw
  23.       - /mnt/md0/transmission/watch:/watch:rw
  24.     ports:
  25.       - 9091:9091
  26.       - 51413:51413
  27.       - 51413:51413/udp
  28.     logging:
  29.       driver: "json-file"
  30.       options:
  31.         max-size: "1m"

复制代码

(, 下载次数: 111)

2，多媒体串流：minidlna。第三方流行镜像（pulls > 1M）。

  2. version: '3.8'

  4. services:
  5.   minidlna:
  6.     container_name: dlna
  7.     image: vladgh/minidlna:latest
  8.     restart: always
  9.     stdin_open: true
  10.     tty: true
  11.     # You need to run the container in host mode for it to be able to receive UPnP broadcast packets.
  12.     # The default bridge mode will not work.
  13.     network_mode: 'host'
  14.     environment:
  15.       - MINIDLNA_MEDIA_DIR_1=/media/ANIME
  16.       - MINIDLNA_MEDIA_DIR_2=/media/DRAMA
  17.       - MINIDLNA_MEDIA_DIR_3=/media/MOVIE
  18.       - MINIDLNA_FRIENDLY_NAME=RYU-PLMS-GEN10P
  19.       - MINIDLNA_INOTIFY=yes
  20.       - MINIDLNA_NOTIFY_INTERVAL=3
  21.     volumes:
  22.       - /mnt/md0/ANIME:/media/ANIME
  23.       - /mnt/md0/DRAMA:/media/DRAMA
  24.       - /mnt/md0/MOVIE:/media/MOVIE
  25.     logging:
  26.       driver: "json-file"
  27.       options:
  28.         max-size: "1m"
复制代码
这个镜像有时候资源的刷新不及时，建议使用embyserver自带的比较好。

3，数据共享：samba。第三方流行镜像（pulls > 50M）。

  2. version: '3.8'

  4. services:
  5.   samba:
  6.     container_name: samba
  7.     image: dperson/samba:latest
  8.     restart: always
  9.     stdin_open: true
  10.     tty: true
  11.     environment:
  12.       - TZ="Asia/Shanghai"
  13.       - USERID=1000
  14.       - GROUPID=1000
  15.     ports:
  16.       - "137:137/udp"
  17.       - "138:138/udp"
  18.       - "139:139/udp"
  19.       - "139:139/tcp"
  20.       - "445:445/tcp"
  21.     volumes:
  22.       - /mnt/md0:/mnt:rw
  23.     command: >
  24.       -u "用户名;密码"
  25.       # <name;/path>[;browse;readonly;guest;users;admins;writelist;comment]
  26.       -s "shared;/mnt;yes;no;no;all"
  27.     logging:
  28.       driver: "json-file"
  29.       options:
  30.         max-size: "1m"
复制代码

samba在windows下兼容性完美，但在linux和macos做客户端的时候有时候比较抽搐。特别是macos有时候速度只有十几MB。

4，媒体服务：embyserver。官方镜像。

  2.   
  3. version: '3.8'

  5. services:
  6.   embyserver:
  7.     container_name: embyserver
  8.     image: emby/embyserver:latest
  9.     restart: always
  10.     stdin_open: true
  11.     tty: true
  12.     environment:
  13.       - UID=1000
  14.       - GID=1000
  15.       - GIDLIST=1000,44
  16.       - NVIDIA_DRIVER_CAPABILITIES=all
  17.       - NVIDIA_VISIBLE_DEVICES=all
  18.     devices:
  19.       - /dev/dri:/dev/dri
  20.     ports:
  21.       - "8096:8096"
  22.       - "8920:8920"
  23.     volumes:
  24.       - /mnt/md0/embyserver/config:/config
  25.       - /mnt/md0/ANIME:/anime
  26.       - /mnt/md0/DRAMA:/drama
  27.       - /mnt/md0/MOVIE:/movie
  28.     logging:
  29.       driver: "json-file"
  30.       options:
  31.         max-size: "1m"
复制代码
非常完美的方案，官方出品。
需要注意的是，如果要求进行GPU硬解，必须使用nvidia出品的容器runtime。
首先要安装nvidia contianer。
  1. sudo apt install nvidia-container-toolkit nvidia-container-runtime
复制代码

然后对/etc/docker/daemon.json进行如下设置：
  1. {
  2.     "registry-mirrors": ["https://kfp63jaj.mirror.aliyuncs.com","https://docker.mirrors.ustc.edu.cn","https://registry.docker-cn.com","http://hub-mirror.c.163.com"],
  3.     "default-runtime": "nvidia",
  4.     "runtimes": {
  5.         "nvidia": {
  6.             "path": "/usr/bin/nvidia-container-runtime",
  7.             "runtimeArgs": []
  8.         }
  9.     }
  10. }
复制代码
然后就可以愉快的硬解啦。
(, 下载次数: 101)
embyserver on docker的测试。
转码一个视频，同时web串流两个视频。CPU和显存是这套配置的极限。
基本上转码/播放（自动 4K/120Mbps）一个视频要占用1G显存。
web串流还是非常消耗cpu，G5420要顶不住了。。。


可以在电视机上安装emby客户端，有非常好的体验。经测试，电视机上客户端的播放也是由MicroServer进行解码后串流的，所以能够播放的格式支持比电视机自身要广阔。
(, 下载次数: 104) (, 下载次数: 106)
可能是个例，唯一支持不太好的，好像是chrome浏览器，有时候会卡住。

5，软路由：openwrt。官方镜像。
  1. version: "3.8"

  3. services:
  4.   openwrt:
  5.     container_name: openwrt
  6.     image: openwrtorg/rootfs:latest
  7.     restart: always
  8.     stdin_open: true
  9.     tty: true
  10.     ports:
  11.       - "81:80/tcp"
  12.       - "23:22/tcp"
  13.       - "444:443/tcp"
  14.     networks:
  15.       - docker-profile_default
  16.       - macvlan1
  17.       - macvlan2
  18.       - macvlan3
  19.       - macvlan4

  21. networks:

  23. # 把bridage网桥连进来，提供网络服务，可以在安装和更新完后把这个网络disconnect掉提高隔离度。
  24.   docker-profile_default:
  25.     external: true

  27. # 使用macvlan将网口直通给容器。每个网口相当于一个虚拟网关，openwrt等于是上层的网关。
  28.   macvlan1:
  29.     driver: macvlan
  30.     driver_opts:
  31.       parent: eno1
  32.       com.docker.network.driver.mtu: 1450
  33.     ipam:
  34.       config:
  35.         - subnet: 172.18.1.0/24

  37.   macvlan2:
  38.     driver: macvlan
  39.     driver_opts:
  40.       parent: eno2
  41.       com.docker.network.driver.mtu: 1400
  42.     ipam:
  43.       config:
  44.         - subnet: 172.18.2.0/24

  46.   macvlan3:
  47.     driver: macvlan
  48.     driver_opts:
  49.       parent: eno3
  50.       com.docker.network.driver.mtu: 1350
  51.     ipam:
  52.       config:
  53.         - subnet: 172.18.3.0/24

  55.   macvlan4:
  56.     driver: macvlan
  57.     driver_opts:
  58.       parent: eno4
  59.       com.docker.network.driver.mtu: 1300
  60.     ipam:
  61.       config:
  62.         - subnet: 172.18.4.0/24
复制代码
容器启动后，需要进入容器，更新并安装luci界面。
  1. sudo docker exec -it <容器id，可以通过sudo docker ps查询到> /bin/ash

  3. 进入容器后，运行下面的命令（选个网络快的时候）。

  5. opkg update
  6. opkg install luci
复制代码
然后就可以了。
(, 下载次数: 105)
配置网络的功能可以使用了（未测试）。
(, 下载次数: 111)

6，GPU运算开发者：conda。nvidia官方镜像 + 少量配置。


  3. version: '3.8'

  5. services:
  6.   conda:
  7.     container_name: conda
  8.     image: nvidia/cuda:11.0-cudnn8-runtime-ubuntu18.04
  9.     restart: always
  10.     stdin_open: true
  11.     tty: true
  12.     ports:
  13.       - "24:22/tcp"
  14.     volumes:
  15.       - /mnt/md0/conda/root:/root:rw
  16.     logging:
  17.       driver: "json-file"
  18.       options:
  19.         max-size: "1m"

复制代码

基于nvidia官方出品的cuda+cudnn完备的镜像。
对于开发平台我不建议使用dockerfile或者command子项构建，因为里面的分支较多，单一命令失效的可能性比较大（特别是国内）。
所以通过上面的docker-compose文件创建容器后，直接进入容器进行后续为首选。
因为容器基于nvidia-container构建，所以默认直通了GPU资源，并且自动安装好了GPU驱动与cudnn。
下面是一个例子，用于演示如何在container中构建一个带有cuda + cudnn运行能力的remote interpreter，并安装tensorflow-gpu框架。



  3. # 设定root的密码，用于ssh连接使用。
  4. passwd root

  6. # 更新系统。
  7. apt update
  8. apt upgrade

  10. # 安装ssh等软件。
  11. apt install wget pciutils vim openssh-server

  13. # 配置openssh-server。
  14. # 1、修改sshd_config文件，命令为：vi /etc/ssh/sshd_config 

  15. # 2、将#PasswordAuthentication no的注释去掉，并且将NO修改为YES

  16. # 3、将#PermitRootLogin yes的注释去掉
  17. 
# 4、启动SSH服务，命令为：/etc/init.d/ssh start
，或者service ssh start
  18. # 5、验证SSH服务状态，命令为：/etc/init.d/ssh status
，或者service ssh status
  19. # 6、添加开机自启动，命令为：update-rc.d ssh enable

  21. # 经过上面的配置，可以通过ssh root@<host ip> -p 24直连该容器。

  23. # 查看硬件情况。
  24. lspci | grep -i nvidia
  25. # 正常状态显示：
  26. > 07:00.0 VGA compatible controller: NVIDIA Corporation Device 1f82 (rev a1)
  27. > 07:00.1 Audio device: NVIDIA Corporation Device 10fa (rev a1)

  29. # 查看驱动情况
  30. cat /proc/driver/nvidia/version
  31. # 正常状态显示：
  32. > NVRM version: NVIDIA UNIX x86_64 Kernel Module  440.100  Fri May 29 08:45:51 UTC 2020
  33. > GCC version:  gcc version 7.5.0 (Ubuntu 7.5.0-3ubuntu1~18.04)

  35. # 下载anaconda。
  36. wget https://repo.anaconda.com/archive/Anaconda3-2020.07-Linux-x86_64.sh

  38. # 安装anaconda。
  39. sh ./Anaconda3*.sh

  41. # 添加中科大和清华的conda镜像源。
  42. conda config --add channels https://mirrors.ustc.edu.cn/anaconda/pkgs/free/
  43. conda config --add channels https://mirrors.tuna.tsinghua.edu.cn/anaconda/pkgs/free/

  45. # 升级conda。
  46. conda update conda

  48. # 创建虚拟环境
  49. conda create -n <虚拟环境名称>

  51. # 激活虚拟环境
  52. conda activate <虚拟环境名称>

  54. # 安装tensorflow-gpu 1.0
  55. conda install tensorflow-gpu

  57. # 安装tensorflow-gpu 2.0
  58. conda install tensorflow-gpu=2.2.0

复制代码

另外，因为docker技术和虚拟环境（virtual env）技术都属于隔离技术，那么有没有必要在已经容器化的环境里面再做虚拟环境是一个值得讨论的问题。
如果无需这种“套娃式”隔离，那么直接安装tensorflow-gpu的container是一种更简便直接的办法，可以参考下面的文档。
https://www.tensorflow.org/install/docker

数据安全

待更新。

带外管理

iLO与IPMI与Redfish之间的故事。请参考：
https://www.chiphell.com/thread-2224432-1-1.html




作者: 天一凡    时间: 2020-7-22 20:51
作为软路由很合适！
作者: ydt    时间: 2020-7-22 21:19
显卡是耗电大户，亮机用应该还算省电，另外这四块硬盘功耗也不小
作者: uuyyhhjj    时间: 2020-7-22 21:21
好像之前有过一贴了第二台？有当年gen8的价格，低配版买来单纯存储池也不错，4盘位装个系统就剩3盘了，对比群晖价格太难看硬件也抠这个就好太多了，感觉这种上显卡总觉得没啥用
作者: 我輩樹である    时间: 2020-7-22 21:30
uuyyhhjj 发表于 2020-7-22 21:21
好像之前有过一贴了第二台？有当年gen8的价格，低配版买来单纯存储池也不错，4盘位装个系统就剩3盘了，对比 ...

电脑讨论区发过一次开箱。不过这个是完全版。
作者: 我輩樹である    时间: 2020-7-22 21:31
ydt 发表于 2020-7-22 21:19
显卡是耗电大户，亮机用应该还算省电，另外这四块硬盘功耗也不小

磁盘满载我估计有15w，5w待机。
作者: 超逸绝尘    时间: 2020-7-22 21:38
估计还是供电不就够~
作者: fly8008    时间: 2020-7-23 05:28
超级好看！拼命点赞！！
作者: 迷失De信仰    时间: 2020-7-23 06:39
准备组NAS，自组还是群晖未定。
好像自带SATA不支持热插拔
1. PCIE->NVME的SSD
2. ILO 5 NIC 套件
3. RAID卡
感觉好像无法满足？
作者: 真的没有    时间: 2020-7-23 07:55
漂亮漂亮
作者: KingDOD    时间: 2020-7-23 08:14
Unraid做主,虚拟win10和linux?这样不是就绕过ilo了么？还能上个万兆卡…
作者: 我輩樹である    时间: 2020-7-23 08:39
迷失De信仰 发表于 2020-7-23 06:39
准备组NAS，自组还是群晖未定。
好像自带SATA不支持热插拔
1. PCIE->NVME的SSD

板载的不支持热插拔。pcie就一根，ilo那个口是专用的，供电部分都不一样。
作者: TeaSky    时间: 2020-7-23 08:45
楼主你的群晖e10m20卡没测试吗？
作者: ahfncj    时间: 2020-7-23 08:58
想知道G5420的核显在linux下能调用硬件转码吗
作者: wysren    时间: 2020-7-23 09:04
期待软件篇。
作者: tzwlp2012    时间: 2020-7-23 09:08
价格实在是高了点、。
作者: 我輩樹である    时间: 2020-7-23 09:10
ahfncj 发表于 2020-7-23 08:58
想知道G5420的核显在linux下能调用硬件转码吗

不能。。。被屏蔽了。
作者: 我輩樹である    时间: 2020-7-23 09:15
TeaSky 发表于 2020-7-23 08:45
楼主你的群晖e10m20卡没测试吗？

我没这卡，隔壁不是有测试么。我准备上显卡后其他方案就放弃了。
作者: finished    时间: 2020-7-23 09:19
这个星期1650刀卡重新上架了，我就想你是不是也到手了。之前那块应该是个例，这块应该是没有了。
作者: Fury    时间: 2020-7-23 09:23
阵列卡只支持win？所以vSphere也不支持了咯，除非换卡？
作者: 我輩樹である    时间: 2020-7-23 09:25
finished 发表于 2020-7-23 09:19
这个星期1650刀卡重新上架了，我就想你是不是也到手了。之前那块应该是个例，这块应该是没有了。 ...

那是当然了，京东有无货订购的功能。
作者: 迷失De信仰    时间: 2020-7-23 09:26
我輩樹である 发表于 2020-7-23 08:39
板载的不支持热插拔。pcie就一根，ilo那个口是专用的，供电部分都不一样。 ...

看来要走向自组的道路啊，话说电脑整机就是漂亮。
作者: skyflying5    时间: 2020-7-23 09:29
显卡主要做什么工作呢，视频硬解转码？？
作者: xpmg    时间: 2020-7-23 09:29
能解释下为啥要上显卡嘛？
作者: 我輩樹である    时间: 2020-7-23 09:37
skyflying5 发表于 2020-7-23 09:29
显卡主要做什么工作呢，视频硬解转码？？

是的，因为核显被屏蔽了。
作者: 我輩樹である    时间: 2020-7-23 09:37
xpmg 发表于 2020-7-23 09:29
能解释下为啥要上显卡嘛？

实现一些HTPC的功能。
作者: sky也许    时间: 2020-7-23 09:48
是车车不快乐盒
不@风车车
作者: 其实天涯    时间: 2020-7-23 09:59
这个小箱子是真的好看。。想要个样子差不多的正常itx机箱。。不要上面硬盘位
作者: 我輩樹である    时间: 2020-7-23 10:02
其实天涯 发表于 2020-7-23 09:59
这个小箱子是真的好看。。想要个样子差不多的正常itx机箱。。不要上面硬盘位 ...

作者: tonrain    时间: 2020-7-23 10:20
挺详尽的分享，感谢树大。
同时,解毒了。
作者: 其实天涯    时间: 2020-7-23 10:24
我輩樹である 发表于 2020-7-23 10:02

abee天下第一！
作者: wildbear    时间: 2020-7-23 10:34
我輩樹である 发表于 2020-7-22 21:31
磁盘满载我估计有15w，5w待机。

U盘换个金属壳的，是不是会好点？
作者: TeaSky    时间: 2020-7-23 10:38
我輩樹である 发表于 2020-7-23 09:15
我没这卡，隔壁不是有测试么。我准备上显卡后其他方案就放弃了。

谢谢
作者: Skymm    时间: 2020-7-23 10:44
请问桌面上的小风扇是什么牌子的
作者: daimail    时间: 2020-7-23 10:50
提示: 作者被禁止或删除 内容自动屏蔽
作者: 非盘中    时间: 2020-7-23 11:08
等待软件
作者: arrion    时间: 2020-7-23 11:10
我輩樹である 发表于 2020-7-23 10:02

这个箱子……PM下链接，瞬间长草了
作者: rwr1220    时间: 2020-7-23 11:12
这款性能真是舒畅，相比我家Ds216，感觉稍微下载点东西都卡~
作者: 我輩樹である    时间: 2020-7-23 11:26
wildbear 发表于 2020-7-23 10:34
U盘换个金属壳的，是不是会好点？

usb 2.0的盘一点都不热。
作者: 我輩樹である    时间: 2020-7-23 11:26
Skymm 发表于 2020-7-23 10:44
请问桌面上的小风扇是什么牌子的

无印良品。
作者: 我輩樹である    时间: 2020-7-23 11:27
daimail 发表于 2020-7-23 10:50
我是觉得显卡有点多余了，用nas实现htpc的功能有点牵强，最后你会因为7*24小时的噪音而把它放在一个很偏远 ...

如果对噪音敏感可以web串流。
作者: 我輩樹である    时间: 2020-7-23 11:29
arrion 发表于 2020-7-23 11:10
这个箱子……PM下链接，瞬间长草了

Abee Enclosure RS04。现在应该没有了。
作者: adun    时间: 2020-7-23 11:35
相当帅气的解决方案 性能也是妥妥的哦 一次性解决了NAS和客厅电脑的需求
作者: east    时间: 2020-7-23 11:35
这是家伙可以当路由器服务器NAS 就是有点贵啊！~
作者: east    时间: 2020-7-23 11:36
我輩樹である 发表于 2020-7-23 10:02

这啥箱子
作者: waio0    时间: 2020-7-23 11:43
我电源换了一个dell的240w的，针口一样，电压一样就行了。
作者: Adm1n    时间: 2020-7-23 12:16
迷失De信仰 发表于 2020-7-23 06:39
准备组NAS，自组还是群晖未定。
好像自带SATA不支持热插拔
1. PCIE->NVME的SSD

建议还是上群晖，省心。黑裙玩了两年，真心是累了。
作者: geb94012    时间: 2020-7-23 12:17
很全面的评测，谢谢分享。
显卡不错。
作者: brokenchina    时间: 2020-7-23 12:22
提示: 作者被禁止或删除 内容自动屏蔽
作者: fkpwolf    时间: 2020-7-23 13:04
不错得箱子，四网口浪费了啊，i350的芯片？
作者: synoman    时间: 2020-7-23 13:40
有钱真幸福
作者: shipshape    时间: 2020-7-23 13:48
缺点就是PCIE插槽就一个， 万兆网卡和M.2转接卡不可兼得，已经买好了X710-T4和HC530，等价格合适了从HPE海淘一台
作者: 我輩樹である    时间: 2020-7-23 13:48
brokenchina 发表于 2020-7-23 12:22
看着好棒。

想知道，楼主用这个电脑干什么用？架设网站吗？

主要是AIO，软路由 + NAS + HTPC。然后是纳入k8s计算节点，这是装显卡的主因。
作者: 我輩樹である    时间: 2020-7-23 13:49
fkpwolf 发表于 2020-7-23 13:04
不错得箱子，四网口浪费了啊，i350的芯片？

是的。Intel I350-AM4。
作者: 我輩樹である    时间: 2020-7-23 13:52
shipshape 发表于 2020-7-23 13:48
缺点就是PCIE插槽就一个， 万兆网卡和M.2转接卡不可兼得，已经买好了X710-T4和HC530，等价格合适了从HPE海 ...

是的，有个方案就是用群晖刚出的万兆与M.2 SSD混合卡。
作者: finished    时间: 2020-7-23 14:07
我輩樹である 发表于 2020-7-23 10:02

好像淘宝还有存货。
作者: ashou5566    时间: 2020-7-23 14:34
先收藏了，等新房弄好，可以弄起来
作者: jeff.kwan    时间: 2020-7-23 14:42
正面真的越出越难看
作者: jimmyjin    时间: 2020-7-23 14:59
Gen10 Plus吧， 看着挺强的，但拿2020年的眼光看，就会很蛋疼， 4个千兆口， 但没有10G口也没有2.5G口， 主板没有M.2口， 明明做了两个lowprofile PCI 槽了吧， 偏偏一个只能接iLO卡， 都4个千兆口了， 就不能匀一个？
总之非常漂亮的外壳，但是做mini服务器接口太不足了。
比下来还真的如LZ说， 可能还不如像万由 810A那样好玩可玩了
作者: jimmyjin    时间: 2020-7-23 15:11
shipshape 发表于 2020-7-23 13:48
缺点就是PCIE插槽就一个， 万兆网卡和M.2转接卡不可兼得，已经买好了X710-T4和HC530，等价格合适了从HPE海 ...

上群晖新的Nvme+ 10G 2合1
作者: ciapexpo    时间: 2020-7-23 15:16
期待又魔改的套件，可以上itx
作者: jingxianc    时间: 2020-7-23 15:32
nas实在没有必要上 ILO和显卡
作者: uuyyhhjj    时间: 2020-7-23 16:21
jimmyjin 发表于 2020-7-23 14:59
Gen10 Plus吧， 看着挺强的，但拿2020年的眼光看，就会很蛋疼， 4个千兆口， 但没有10G口也没有2.5G口， 主 ...

只要价格能下来，多买几个叠起来，独立供电，就很好玩了，至于4千兆口链路汇聚一下就是4G，怎么的也比2.5g成本低得多，网口再不够pci扩展一下，定位就是microserver，除了价格诚意还是很足的
作者: TeaSky    时间: 2020-7-23 16:23
jimmyjin 发表于 2020-7-23 15:11
上群晖新的Nvme+ 10G 2合1

请教，这个确定可以用上？
作者: mypchas6fans    时间: 2020-7-23 16:37
认识了新的单槽刀卡~
作者: 迷失De信仰    时间: 2020-7-23 16:54
Adm1n 发表于 2020-7-23 12:16
建议还是上群晖，省心。黑裙玩了两年，真心是累了。

个人偏向freenas，群晖可能就白群了。
只要有APP能够支持自动备份照片视频就可以了。
作者: leeambition    时间: 2020-7-23 17:15
这个硬盘装得真舒服
作者: Wolverine    时间: 2020-7-23 17:34
显卡是不高了点。。太帅了，感谢分享！
作者: zexin4    时间: 2020-7-23 18:01
大厂出品的空间利用确实很棒。。
作者: gungnir    时间: 2020-7-23 19:04
waio0 发表于 2020-7-23 11:43
我电源换了一个dell的240w的，针口一样，电压一样就行了。

请教下大佬，是外星人那款吗？看sth论坛上好像不大建议换原装的180W适配器，但如果不换的话，没办法上更好的CPU，纠结呀纠结
作者: waio0    时间: 2020-7-23 19:23
本帖最后由 waio0 于 2020-7-23 19:35 编辑
gungnir 发表于 2020-7-23 19:04
请教下大佬，是外星人那款吗？看sth论坛上好像不大建议换原装的180W适配器，但如果不换的话，没办法上更 ...

嗯，是外星人的。
我找到论坛看了一下，说是怕VRMs和其他组件有工作压力，还有一个是CPU散热。
毕竟不是长期工作在满负荷状态，只是怕负荷过载，这个应该没什么问题。
散热我正在改水冷，用2278g FPU测试温度大概能低10度左右吧，空载低5度这样。但是就算用原装的散热器，温度也是45/92这样，应该也能压得住。
作者: shipshape    时间: 2020-7-23 20:45
jimmyjin 发表于 2020-7-23 15:11
上群晖新的Nvme+ 10G 2合1

不知道兼容性如何， 买了的话白瞎了我的蓝标X710 ILO插槽又不支持其他的PCIE设备，很尴尬
作者: east    时间: 2020-7-23 21:16
east 发表于 2020-7-23 11:36
这啥箱子

啥时候搞的啊？这机箱是我喜欢的类型。卧式的很好摆！
作者: newsun    时间: 2020-7-23 21:55
显卡看着像是装歪了呢？
作者: 78114552    时间: 2020-7-23 22:57
没看清组的啥raid？？？
作者: caos1024    时间: 2020-7-23 23:49
催更软件篇，看着挺可爱的，买了一台，只想做软路由和NAS玩玩，没用过这玩意，等楼主更新了。
作者: 画梦之人    时间: 2020-7-24 01:27
看了眼我的Gen8，感觉还能撑几年，好吧，我承认我穷
作者: gungnir    时间: 2020-7-24 08:22
waio0 发表于 2020-7-23 19:23
嗯，是外星人的。
我找到论坛看了一下，说是怕VRMs和其他组件有工作压力，还有一个是CPU散热。
毕竟不是长 ...

那是不是就是说换了240W适配器后，上2246G问题不大？毕竟2246G在STH推荐列表里，虽说Gen 10 plus核显直接给屏蔽了，但总归希望All In One主机性能强一点
作者: gungnir    时间: 2020-7-24 08:24
waio0 发表于 2020-7-23 19:23
嗯，是外星人的。
我找到论坛看了一下，说是怕VRMs和其他组件有工作压力，还有一个是CPU散热。
毕竟不是长 ...

大佬考虑将改水冷的过程贴出来吗？估计大家也有Gen 10 Plus水冷需求
作者: 我輩樹である    时间: 2020-7-24 08:32
newsun 发表于 2020-7-23 21:55
显卡看着像是装歪了呢？

你没看错！。
作者: 我輩樹である    时间: 2020-7-24 08:32
78114552 发表于 2020-7-23 22:57
没看清组的啥raid？？？

raid0。
作者: 我輩樹である    时间: 2020-7-24 08:35
TeaSky 发表于 2020-7-23 16:23
请教，这个确定可以用上？

https://www.chiphell.com/thread-2244295-1-2.html

这贴里面有测试。其实Gen10 Plus只是一台普通的电脑。
作者: Autobahn    时间: 2020-7-24 08:44
我还第一次见这么mini的显卡
作者: 78114552    时间: 2020-7-24 09:00
我輩樹である 发表于 2020-7-24 08:32
raid0。

raid0企业级没问题？
作者: 我輩樹である    时间: 2020-7-24 09:15
78114552 发表于 2020-7-24 09:00
raid0企业级没问题？

有多机备份，部分数据有云同步。
作者: jeangiblert    时间: 2020-7-24 10:07
买来玩了一周又卖了，哭哭
作者: waio0    时间: 2020-7-24 10:07
gungnir 发表于 2020-7-24 08:22
那是不是就是说换了240W适配器后，上2246G问题不大？毕竟2246G在STH推荐列表里，虽说Gen 10 plus核显直接 ...

2246G不用换适配器也可以上，STH推荐的CPU是在180w适配器情况下就可以适用的。
作者: waio0    时间: 2020-7-24 10:09
gungnir 发表于 2020-7-24 08:24
大佬考虑将改水冷的过程贴出来吗？估计大家也有Gen 10 Plus水冷需求

还没改好，之前买的冷排不合适，要想装很难弄。新买的冷排还在路上
作者: gungnir    时间: 2020-7-24 10:30
waio0 发表于 2020-7-24 10:09
还没改好，之前买的冷排不合适，要想装很难弄。新买的冷排还在路上

看样子准备上分体水吗？想抄回作业了，哈哈
上240W适配器多出来的60W会有那么一丢丢心理安慰
作者: xu64856270    时间: 2020-7-24 10:42
Adm1n 发表于 2020-7-23 12:16
建议还是上群晖，省心。黑裙玩了两年，真心是累了。

+1  我也是这样觉得  完全体的gen8  出掉了  iLO 其实蛮关键的
作者: sc80t    时间: 2020-7-24 10:50
关注下散热，树导这台24*7吗，cpu温度，风扇转速，硬盘温度有数据吗
作者: kaka194    时间: 2020-7-24 11:24
感觉4盘位已经满足不了数据存储要求
作者: 我輩樹である    时间: 2020-7-24 11:39
本帖最后由 我輩樹である 于 2020-7-24 11:57 编辑

今早做的embyserver on docker的测试。
转码一个视频，同时web串流两个视频。CPU和显存是这套配置的极限。
基本上转码/播放（自动 4K/120Mbps）一个视频要占用1G显存。
web串流还是非常消耗cpu，G5420要顶不住了。。。



作者: kenhirai    时间: 2020-7-24 12:48
加了ilo5才是完全体啊啊啊啊~
作者: 开CRH的    时间: 2020-7-24 14:12
这个配置硬解4K是彻底没问题了，我那个GEN8还在躺尸中。
作者: rn84    时间: 2020-7-24 14:52
我輩樹である 发表于 2020-7-23 13:48
主要是AIO，软路由 + NAS + HTPC。然后是纳入k8s计算节点，这是装显卡的主因。 ...

gen10 plus 多少钱入的？
作者: ycc1219    时间: 2020-7-24 15:06
gen7和gen8能火气来的最大原因还是因为价格。
plus去掉无用的光驱位，再优化了体积，有火起来的潜质，剩下的就看价格了。
如果和gen8一样，能到2k，那所谓的缺点，也没什么缺点了。
作者: jimmyjin    时间: 2020-7-24 15:42
uuyyhhjj 发表于 2020-7-23 16:21
只要价格能下来，多买几个叠起来，独立供电，就很好玩了，至于4千兆口链路汇聚一下就是4G，怎么的也比2.5 ...

汇聚一下4G， 嗯， 你先告诉我怎么实现点对点两个网口传2G吧
作者: jimmyjin    时间: 2020-7-24 15:44
我輩樹である 发表于 2020-7-24 08:35
https://www.chiphell.com/thread-2244295-1-2.html

这贴里面有测试。其实Gen10 Plus只是一台普通的电脑 ...

群晖的卡就是用免驱的PCIe交换芯片实现 10G 网卡和2个NVme 公用8xPCIe



欢迎光临 Chiphell - 分享与交流用户体验 (https://www.chiphell.com/) Powered by Discuz! X3.5