折腾好久了终于完成了理想中的aio

大头吃小头 · 发表于 2023-5-23 13:59

配置如下
CPU：5700g

主板：**b550m小雕

内存：金百达16g*2 3000  （贪便宜，结果频率就差这么多）

显卡：久经战阵憾讯rx6600竞技版（显卡非常短就20cm 非常适合小机箱）

硬盘：久经战阵希捷x16 16t*3宣称国行（当时好像1100一块买的）
      致钛tiplus5000 2t  反正够便宜我还要用来当游戏机用的

电源：校友淘换的航嘉mvp k650 （手贱反装了风扇，现在出风口还是出风，温度也还行吧...

机箱：御夫座机箱（这个机箱我看来还是不错的，拓展性完美符合我的预期，支持matx版型，6盘位，全高挡板支持显卡和网卡一起插。吐槽几点，钢板太软，随便用力就变形了，风道有点不太友好，还是闷罐了（我已经用他的散热器了，结果不论是正装反装，5700g 30%负载下就会来到70摄氏度，这时候出风口确实是热风，一会儿机箱就会发热）

SATA扩展卡：乐扩asm1166 这个卡不知道是pcb太薄还是啥原因，我插sata的时候形变过大，插得我胆战心惊。

网卡：咸鱼淘换来的华为sp331 （x550t2华为版马甲，x8的槽，在家用主板上大概需要全长x16槽了（pch引出）这也就是我选择matx平台的原因，槽位不够啊

使用的系统软件

PVE 7.4  （前面翻车是因为vfio只挂载了显卡没挂载显卡自带的声卡，导致只有7.0版本能正常直通）
vfio挂载rx6600（需要注意硬件地址不光是显卡，还要包括显卡的声卡
win10 LTSC2021（我下的初始版本，拿上手必须本地部署微软商店，不然系统后台永远有10%占用，输入法无选词框）
ikuai主路由
openwrt单臂旁路由目标机器手动改改网关即可无软件实现目标（Linux平台下的我至今没搞懂）其他功能有待开发
lxc部署Debian再部署jellyfin实现核显转码nas视频  （越过了amd在nas的解码问题，目前看片随便拖还没功耗
黑群晖7.1.1 用的arpl的版本

拓扑图（随便画画）

大头吃小头 · 发表于 2023-5-23 14:06

本帖最后由大头吃小头于 2023-5-23 14:08 编辑

参考的资料（真就是东拉西凑搞来的）

https://toscode.gitee.com/spoto/PVE_Generic_AIO

BV1dt4y147kE （实测除了设备id地址剩下的不用改）

bilibili：BV1iM411t7x3（pve直通显卡来玩游戏）

https://www.jb51.net/softjc/867003_all.html

还有诸如img直接转硬盘之类的操作百度应该能随便百度到了.... 我脑子记不住东西都写记事本上了

强关虚拟机命令（101替换为需要强关的vm的id）

ls -l /run/lock/qemu-server
rm -f /run/lock/qemu-server/lock-101.conf
qm unlock 101
qm stop 101
qm status 101

镜像转换磁盘命令（100为vm id op.img为镜像名称）
cd /var/lib/vz/template/iso/
qm importdisk 100 op.img local-lvm

搞了好久，还是有成就感的
之前搞了半成品，一更新就死，搞得我难受得要死

weston · 发表于 2023-5-23 14:14

win10 LTSC2021（我下的初始版本，拿上手必须本地部署微软商店，不然系统后台永远有10%占用，输入法无选词框）
=================================================
这个bug已经修了，安装更新就行了

大头吃小头 · 发表于 2023-5-23 14:15

最后是一点遗憾

第一、温度还是有点高，我在写这个贴的时候，虚拟机的Windows正在下载大表哥2，epic平台下载占用百分之十几  pve占用30%的时候  因为开启了pbo+功耗限制50w
cpu温度已经上升到70度上下风扇已经提高了转速（当然比我用的上一台aio  乔斯伯n1好太多了，这个噪音也还行，能接受）

第二、平台功耗，不开Windows 待机功耗在50-60之间  （nas有负载的时候会上升到70-80w）
开启Windows，并且进行一定的负载操作，功耗就会在130w-140w，超级节能党可能会暴怒吧。游戏功耗还没测，我预计是200w左右，这块rx6600我没破解功耗，所以总功耗就100w，这显卡待机固定显示功耗17w  可能虚拟机平台解决不了了。相比核显aio平台，还是太耗电了

第三、这个平台已经没有未来，升级余量除了显卡和硬盘之外，其他都没有了。  再升级就只能平台升级，重新部署pve了（设备地址乱了就是灾难性的啊....）

5jwoj · 发表于 2023-5-23 14:15

我是爱快和OP网关互指，这样局域网内所有设备都可以魔法了。

ksong · 发表于 2023-5-23 14:17

用到x550了，网卡去桥，sr-iov一波带走就好了

大头吃小头 · 发表于 2023-5-23 15:04

weston 发表于 2023-5-23 14:14
win10 LTSC2021（我下的初始版本，拿上手必须本地部署微软商店，不然系统后台永远有10%占用，输入法无选词 ...

这个更新是怎么解决的？修掉了这个重复安装的bug吗？

蓝色星芒 · 发表于 2023-5-23 15:07

linux装一个魔法，开启ipv4转发功能，然后只要linux是网关的都魔法了。或者ikuai主，然后ikuai里改需要魔法的设备的网关

大头吃小头 · 发表于 2023-5-23 15:29

蓝色星芒发表于 2023-5-23 15:07
linux装一个魔法，开启ipv4转发功能，然后只要linux是网关的都魔法了。或者ikuai主，然后ikuai里改需要魔法 ...

学习了，我前面还是手动在设备里固定ip... 有点傻

tsaotse · 发表于 2023-5-23 15:37

没想到把ASM1166用在B550M AORUS ELITE上做M2/SATA扩展，感觉好亏啊……

大头吃小头 · 发表于 2023-5-23 15:39

tsaotse 发表于 2023-5-23 15:37
没想到把ASM1166用在B550M AORUS ELITE上做M2/SATA扩展，感觉好亏啊……

而且还是主m2 另一个m2只有x2 但是位置卡住了没办法装了

后面仔细想想，实现功能就好了，反正m2用完了 pci-e也用完了 ...

散落烟灰 · 发表于 2023-5-23 15:40

AIO还是得windows+hyper-v，linux系的功耗管理非常粗暴，主要还是以性能释放为主，之前测试过我的12700平台，前后测过三次，一模一样的配件，pve(已经装了功耗管理组件调了之后仍然)比win（平衡模式）高20W出头。

而且楼主的轻量AIO用5700G感觉浪费了

大头吃小头 · 发表于 2023-5-23 15:41

散落烟灰发表于 2023-5-23 15:40
AIO还是得windows+hyper-v，linux系的功耗管理非常粗暴，主要还是以性能释放为主，之前测试过我的12700平台 ...

有一个Windows跑游戏用的啊....
我前面测试的时候还把steam os和batocera都装上去了，都能实现功能

tsaotse · 发表于 2023-5-23 15:50

大头吃小头发表于 2023-5-23 15:39
而且还是主m2 另一个m2只有x2 但是位置卡住了没办法装了

后面仔细想想，实现功能就好了，反正m2用完了 ...

2#M2跟显卡冲突啦？有种神奇的东西叫着M2延长线。

大头吃小头 · 发表于 2023-5-23 16:23

tsaotse 发表于 2023-5-23 15:50
2#M2跟显卡冲突啦？有种神奇的东西叫着M2延长线。

想想也是，等手痒了再说，2x 4x也差不太多

weston · 发表于 2023-5-23 17:44

大头吃小头发表于 2023-5-23 15:04
这个更新是怎么解决的？修掉了这个重复安装的bug吗？

不需要安装商城，window update更新补丁到最新就行，不会有后台占用10%的问题

zhao137314 · 发表于 2023-5-23 17:49

没有ecc，不够完美

深圳老胡 · 发表于 2023-5-23 18:01

网上只要一看到PVE，就一定会出现iKuai+OpenWRT的组合，自己作为裸机跑OpenWRT的，真的非常好奇，到底iKuai有哪些神奇的功能，是单纯一个OpenWRT搞不定的？

大头吃小头 · 发表于 2023-5-23 18:10

深圳老胡发表于 2023-5-23 18:01
网上只要一看到PVE，就一定会出现iKuai+OpenWRT的组合，自己作为裸机跑OpenWRT的，真的非常好奇，到底iKuai ...

我一开始用ikuai的原因是方便上手，openwrt一些封装版本还得摸索试水啥的。

thereone · 发表于 2023-5-23 19:09

本帖最后由 thereone 于 2023-5-23 19:10 编辑

深圳老胡发表于 2023-5-23 18:01
网上只要一看到PVE，就一定会出现iKuai+OpenWRT的组合，自己作为裸机跑OpenWRT的，真的非常好奇，到底iKuai ...

稳定这个很重要，虽然openwrt折腾好了完全不动也不会有问题但是经不住折腾。我这边两个实体机专门一个爱快一个openwrt，爱快专门拨号和看流量占用加上远程控制，openwrt跑科学和异地组网IPv6的V#P#N。由于部署在老家老家没有人所以一定要稳定。openwrt上面做重要操作都会专门实验一遍再在实体机上面做。不管怎么搞爱快是不会挂的这个是openwrt难比得上的。

深圳老胡 · 发表于 2023-5-23 19:14

thereone 发表于 2023-5-23 19:09
稳定这个很重要，虽然openwrt折腾好了完全不动也不会有问题但是经不住折腾。我这边两个实体机专门一个爱 ...

好吧，明白了，看下来iKuai这个只是因为功能少，所以没人折腾，然后就稳定

thereone · 发表于 2023-5-23 19:22

深圳老胡发表于 2023-5-23 19:14
好吧，明白了，看下来iKuai这个只是因为功能少，所以没人折腾，然后就稳定 ...

应该说想折腾也折腾不了商业固件稳定性还是第一的，只能在固件有的功能里面折腾。openwrt升级一个包或者卸载一个包连带卸载一堆依赖包也许就挂了的这个很正常。

大头吃小头 · 发表于 2023-5-23 20:50

游戏功耗240w 测试游戏大表哥2

danety · 发表于 2023-5-23 20:56

同是allinone，用起来很舒服

qhdxy · 发表于 2023-5-23 21:05

深圳老胡发表于 2023-5-23 19:14
好吧，明白了，看下来iKuai这个只是因为功能少，所以没人折腾，然后就稳定 ...

爱快上手容易简单不太折腾
其实两个op也是可以的

单op要折腾的时候会全屋断网

kevincat · 发表于 2023-5-25 09:26

我的原先也是类似的方案 5600g的主机接2固态 3机械盘但是目前还想改进下

大头吃小头 · 发表于 2023-5-25 10:50

kevincat 发表于 2023-5-25 09:26
我的原先也是类似的方案 5600g的主机接2固态 3机械盘但是目前还想改进下 ...

哪方面改进？

jimmyjin · 发表于 2023-5-25 17:19

本帖最后由 jimmyjin 于 2023-5-25 17:20 编辑

PVE 7.4 其实可以直接tasksel 点选安装Gnome或KDE GUI界面，然后,......然后就和你用win10差不多了，直接宿主机装Kodi，装Chrome，装Jellyfin，什么直通什么的，直通了这个那个docker 不能用什么的，都不存在了。

All-in-one, 连HTPC 都兼了。

就是linux的PulseAudio HDMI 直通太恼人了，似乎只能自己k 命令行启动Kodi了

直通就搞搞网卡和 SATA 控制器给软路由虚拟机和NAS虚拟机就好

网仙 · 发表于 2023-5-29 21:20

本帖最后由网仙于 2023-5-29 23:01 编辑

请教楼主，您的网卡能协商2.5G吗？

看了楼主的帖子，咸鱼买了个SP331的华为网卡回来，
插在ESXI 6.7u3，一个口直通给op，另一个虚拟化作为管理口使用。分别连接2.5G光猫和AX86u的2.5G口，均只能协商为1000Mbps.
没法协商为2.5G，又升级了一个寂寞。

原本DQ77kb作为aio的NAS，用板载的两张网卡，一个直通给OP作为WAN，一个作为管理口虚拟化LAN使用。

bxhomd · 发表于 2023-5-29 21:41

也有个5700g，学习下

账号		自动登录	找回密码
密码			加入我们

[NAS] 折腾好久了终于完成了理想中的aio