Chiphell - 分享与交流用户体验

标题: HP DL360 Gen9 1U机架服务器可以安装nVIDIA Tesla P4 GPU运算显卡吗? [打印本页]

作者: 红色狂想    时间: 2023-1-14 22:12
标题: HP DL360 Gen9 1U机架服务器可以安装nVIDIA Tesla P4 GPU运算显卡吗?
手里有台HP DL360 Gen9 1U机架式服务器,升级了128G内存,添了张HP FlexFabric 10Gb 2-port 534FLR-SFP+ Adapter万兆光纤网卡,又弄了个Intel DC P3608 4TB数据中心级SSD,准备用来搭建ESXi虚拟化家庭综合应用环境,具体详见这篇帖子:https://www.chiphell.com/thread-2477946-1-1.html

最近在Google上查资料时,发现老外竟然给HP DL360 Gen9装了两个英伟达nVIDIA Tesla P4 8GB GPU运算显卡,可以实现虚拟化云桌面多开等应用,于是我又心里长草了,马上了解了一下,难得的一款AI深度学习刀卡呀,功耗只有75W,X宝闲鱼上价格也很便宜,就是不知道这卡插到HP DL360 Gen9服务器上会不会导致风扇狂转,论坛里有人玩儿过吗?

(, 下载次数: 16)
(, 下载次数: 17)
(, 下载次数: 16)
(, 下载次数: 21)
(, 下载次数: 13)

(, 下载次数: 17)
(, 下载次数: 12)
(, 下载次数: 16)
(, 下载次数: 15)
(, 下载次数: 15)
(, 下载次数: 24)
作者: ysc3839    时间: 2023-1-14 22:48
虚拟化似乎要额外买啥授权,建议考虑清楚
作者: 红色狂想    时间: 2023-1-14 23:24
ysc3839 发表于 2023-1-14 22:48
虚拟化似乎要额外买啥授权,建议考虑清楚

是的,需要英伟达显卡授权 NVIDIA,虚拟化VGPU授权 最新14.4驱动支持显卡切分 vDWS vPC vApp永久授权,我看闲鱼上卖¥99,也能接受
作者: houyuzhou    时间: 2023-1-14 23:33
风扇狂转是一定的,这个是被动散热卡,PCI设备温度高对应的风墙一定会起飞。

我是DELL R720,关闭自动调速锁低转速的,大概可以让P4发挥40-50W的功耗,卡着100度撞墙工作。
作者: c2h6o    时间: 2023-1-15 08:51
被动散热卡对风扇有要求的,另外这个卡需要购买NV许可,之前给客户申请个测试许可都很费劲,不知道这个在TB上买的是不是这种许可,靠不靠谱。而且记得许可还分软件,我对这方面没多少经验。
作者: jyjs3993    时间: 2023-1-15 09:00
楼主家里看来有地下室或者阁楼,真专业homelab
作者: 红色狂想    时间: 2023-1-15 13:44
houyuzhou 发表于 2023-1-14 23:33
风扇狂转是一定的,这个是被动散热卡,PCI设备温度高对应的风墙一定会起飞。

我是DELL R720,关闭自动调速 ...

75W的刀卡怎么会这么热,阵列卡,万兆网卡,企业级PCIe AIC卡式固态硬盘,这些也都是被动散热的PCI设备,风扇怎么就不会起飞呢,是因为这设备功耗都太低了,撑死不会超过20W,随便跑都不会撞墙?
Tesla P4插到机器上是开机风扇就起飞,还是只有干活儿时才起飞?
作者: houyuzhou    时间: 2023-1-15 13:48
红色狂想 发表于 2023-1-15 13:44
75W的刀卡怎么会这么热,阵列卡,万兆网卡,企业级PCIe AIC卡式固态硬盘,这些也都是被动散热的PCI设备, ...


关键看策略..正常这些机架式服务器不会允许有设备100°运行,肯定会飞起来。  待机没事干活的时候会飞。  

如果你是DELL我可以帮你改风扇策略定速或忽略某个PCI设备的温度,HP的没玩过...

P4不热,1080核心75W,效率非常高。 如果你是2U,捆绑一个3CM静音小风扇在显卡尾部可以避免风墙高频工作,1U没空间。。
作者: 红色狂想    时间: 2023-1-15 13:53
c2h6o 发表于 2023-1-15 08:51
被动散热卡对风扇有要求的,另外这个卡需要购买NV许可,之前给客户申请个测试许可都很费劲,不知道这个在TB ...

那看来1U的小机器是别想玩儿这款GPU运算卡了,除非能改造散热器加装风扇主动散热,否则HP的服务器是没法破解这个限制的
作者: 红色狂想    时间: 2023-1-15 13:57
jyjs3993 发表于 2023-1-15 09:00
楼主家里看来有地下室或者阁楼,真专业homelab

你玩儿车的不也天天想着弄个车库该有多好吗,弄不到也要搭个棚子
作者: jyjs3993    时间: 2023-1-16 11:24
红色狂想 发表于 2023-1-15 13:57
你玩儿车的不也天天想着弄个车库该有多好吗,弄不到也要搭个棚子

我家里的2台gen10 plus真的就只是在架子上。
另外2个nas也就真的只是在架子上
作者: 红色狂想    时间: 2023-1-16 23:14
houyuzhou 发表于 2023-1-15 13:48
关键看策略..正常这些机架式服务器不会允许有设备100°运行,肯定会飞起来。  待机没事干活的时候会飞。  ...

HP服务器的散热策略非常严格,没办法破解,如果机箱空间足够大,上Tesla P4改主动散热,加个闲鱼上卖的那种蓝色漏斗状3D打印整流罩,可以装一个4cm风扇向后直吹,应该就没问题了

那如果我在HP DL360 Gen9 1U机器上装个Tesla P4,只让它干点轻活儿,比如建两个虚拟机给Windows系统做图形显示,运行一些常用的办公软件,也就是做虚拟云桌面,这种负载量被动散热应该不会超过40W吧,估计风扇转速会有多高呢?

再有就是,如下图所示,我这机器上插了一个Intel DC P3608 4TB卡式固态硬盘,这卡的长度是167mm,目测和Tesla P4显卡的长度差不多,从图中安装后的位置来看,上部还有很大一部分空间,应该放得下那种扁形的涡轮风扇吧,详见下图:


(, 下载次数: 11)
作者: 红色狂想    时间: 2023-1-16 23:22
jyjs3993 发表于 2023-1-16 11:24
我家里的2台gen10 plus真的就只是在架子上。
另外2个nas也就真的只是在架子上 ...

两台Gen10 Plus,太二次元宅腐男了,旁边架子上还放了一只可口可乐易拉罐吗?
作者: jyjs3993    时间: 2023-1-17 07:58
红色狂想 发表于 2023-1-16 23:22
两台Gen10 Plus,太二次元宅腐男了,旁边架子上还放了一只可口可乐易拉罐吗? ...

放着二次元手办
作者: houyuzhou    时间: 2023-1-17 11:24
红色狂想 发表于 2023-1-16 23:14
HP服务器的散热策略非常严格,没办法破解,如果机箱空间足够大,上Tesla P4改主动散热,加个闲鱼上卖的那 ...

是这样,这种1U 2U服务器的风道效率非常高,风压足。 想让P4发挥40W的功力,稍微有一点点风就行。

但是,服务器的策略不会允许GPU撞100°温度墙降频变成45W,而是会试图往死里吹发挥全部75W并且保持低温。。。这个无解的。

买一块试试吧这个也不贵,可以研究改造散热。
还有个办法,用小飞机主动限制TDP,最低可以限制在30W应该能改善很多。
作者: xeon13    时间: 2023-1-17 12:14
惠普服务器一般插上的只要不是惠普原厂的东西,都有很高的概率触发风扇提速。

P4对散热要求不算高,至少比T4要求低多了,但是不管哪个装上是肯定会比不装更吵的,2U服务器风扇直径大点可能噪音还好,1U服务器基本上没太多办法了
作者: 警报    时间: 2023-1-17 13:33
红色狂想 发表于 2023-1-14 23:24
是的,需要英伟达显卡授权 NVIDIA,虚拟化VGPU授权 最新14.4驱动支持显卡切分 vDWS vPC vApp永久授权,我 ...

咸鱼上的都是自己架设的服务器,随时都可能不玩关掉。
作者: 红色狂想    时间: 2023-1-17 17:47
houyuzhou 发表于 2023-1-17 11:24
是这样,这种1U 2U服务器的风道效率非常高,风压足。 想让P4发挥40W的功力,稍微有一点点风就行。

但是 ...

你机器上那个Tesla P4都用来跑啥应用呀,这卡最多可以给几个虚拟机切分使用呀?

我这台1U机器是两个500W电源做冗余,除了之前插的那些万兆网卡和存储设备,再上一个Tesla P4能带的动吗,是不是两个500W电源仅仅是实现冗余功能,其实额定负载量还是500W?

还有就是,现在1号主CPU通道的PCI Riser笼上PCIe x8槽位插了Intel DC P3608 4TB SSD,另一边的PCIe x16槽位还空着,考虑到下面就是FlexibleLOM万兆光纤网卡,如果要插Tesla P4的话,是插在这个位置好呢,还是单独插在2号辅助CPU通道的PCIe槽位里好呢?我觉得插在2号辅助CPU通道有利于散热,就是不知道性能会不会受影响

作者: houyuzhou    时间: 2023-1-17 17:51
(, 下载次数: 19)
我的P4是这么用的,旁边拿胶粘了个nidec的4025小风扇,开3000转压制两张75W满负载,不超过80°。
作者: Misaka_9993    时间: 2023-1-17 17:54
红色狂想 发表于 2023-1-15 13:44
75W的刀卡怎么会这么热,阵列卡,万兆网卡,企业级PCIe AIC卡式固态硬盘,这些也都是被动散热的PCI设备, ...

这玩意是1080的核心降频来的,外加4个显存颗粒,被动散热温度肯定不会好看
作者: houyuzhou    时间: 2023-1-17 17:56
红色狂想 发表于 2023-1-17 17:47
你机器上那个Tesla P4都用来跑啥应用呀,这卡最多可以给几个虚拟机切分使用呀?

我这台1U机器是两个500W ...

是的,你的电源只有500W,冗余的那个只是冗余。

插哪都行,每个PCI区都有对应的风墙。

我的P4装GRID驱动,干所有显卡该干的事,R720是我的NAS,干点转码串流之类的小工作。
刚发图的是我的备用机,两个P4在搞AI放大视频。  我有好多P4。。。
作者: houyuzhou    时间: 2023-1-17 17:58
Misaka_9993 发表于 2023-1-17 17:54
这玩意是1080的核心降频来的,外加4个显存颗粒,被动散热温度肯定不会好看 ...

这卡发热很低效率超高,但被动完全不能用,哪怕是风道良好的普通机箱,12CM风扇风压不足吹不进去,基本是降到最低频,10W以内工作。

只要在旁边放个风力集中的小风扇,就可以轻松压制。
作者: 红色狂想    时间: 2023-1-17 21:31
houyuzhou 发表于 2023-1-17 17:51
我的P4是这么用的,旁边拿胶粘了个nidec的4025小风扇,开3000转压制两张75W满负载,不超过80°。 ...

我这台HP DL360 Gen9 1U服务器升级了128G内存,加了万兆光纤网卡,又插了一张Intel DC P3608 4TB NVMe SSD,现在7个暴力风扇的转速还和刚买来未插这几个设备时一样,其中6个维持在19%,有1个维持在15%,把手放在机箱尾部I/O网口区域整个都有风吹出,说明这1U小机器的风道是可以轻松吹透的,这样如果再插一张Tesla P4是不是也可以吹透呀,因为那张Intel DC P3608 AIC卡式固态硬盘就吹透了,如果能吹透,把TDP控制在40W以下是不是风扇噪音就不会大了?
作者: 红色狂想    时间: 2023-1-17 21:40
Misaka_9993 发表于 2023-1-17 17:54
这玩意是1080的核心降频来的,外加4个显存颗粒,被动散热温度肯定不会好看 ...

现在我这台HP DL360 Gen9 1U机器的7个暴力风扇转速还和刚买来时一样,其中6个维持在19%,有1个维持在15%,把手放在机箱尾部I/O网口区域整个都有风吹出,说明这1U小机器的风道是可以轻松吹透的,这种情况如果插一张Tesla P4的话,不能算做纯被动散热吧,因为有风压吹着

作者: QSG    时间: 2023-1-17 22:32
别想了,只要你没办法魔改ilo,那只要插进p4那风扇肯定会打到80以上,你可以先把风扇拉到70 试试
作者: 红色狂想    时间: 2023-1-17 22:34
houyuzhou 发表于 2023-1-17 17:56
是的,你的电源只有500W,冗余的那个只是冗余。

插哪都行,每个PCI区都有对应的风墙。

我这机器有两颗E5-2650 v3,每个TDP是105W,而电源只有500W,这种情况上Tesla P4余量够吗?
你的Tesla P4都是什么版本的呀,有OEM的吗?我想买个HP版的,不知好不好找
作者: 红色狂想    时间: 2023-1-17 22:43
警报 发表于 2023-1-17 13:33
咸鱼上的都是自己架设的服务器,随时都可能不玩关掉。

这么说这个东西就象微软的MAK联网激活授权那样,可以自己在服务器上搭建个KMS Server自用了
作者: 警报    时间: 2023-1-17 23:04
红色狂想 发表于 2023-1-17 22:43
这么说这个东西就象微软的MAK联网激活授权那样,可以自己在服务器上搭建个KMS Server自用了 ...

但是你还得在NVDIA买授权才能自己搭建,和微软那种不一样。
作者: 红色狂想    时间: 2023-1-17 23:06
xeon13 发表于 2023-1-17 12:14
惠普服务器一般插上的只要不是惠普原厂的东西,都有很高的概率触发风扇提速。

P4对散热要求不算高,至少比 ...

不单单是插非HP原厂的设备存在这个问题,插HP 61FLR-T这款电口万兆网卡也会导致风扇起飞,而且是不开机,插上电源FAN7就起飞了

其实我更喜欢Tesla T4 16G,外壳是金属色的,造型设计明显比P4漂亮工业美,无奈那售价让人望而却步,拆机卡还卖¥8000多,T4就这么值钱吗?

我这台1U机器的7个暴力风扇转速6个维持在19%,1个维持在15%,把手放在机箱尾部I/O网口处,整个区域都有风吹出,这种情况如果插一张Tesla P4应该有风压可以吹透吧
作者: 红色狂想    时间: 2023-1-17 23:23
QSG 发表于 2023-1-17 22:32
别想了,只要你没办法魔改ilo,那只要插进p4那风扇肯定会打到80以上,你可以先把风扇拉到70 试试 ...

你已经试过了吗?
作者: xeon13    时间: 2023-1-18 09:20
红色狂想 发表于 2023-1-17 23:06
不单单是插非HP原厂的设备存在这个问题,插HP 61FLR-T这款电口万兆网卡也会导致风扇起飞,而且是不开机, ...

惠普是这样的,东西确实好,但是限制也多。

至于吹透的问题,我觉得如果机箱内有空间,可以给P4单独装一个主动散热的风扇。前提是装了P4之后暴力风扇不会自动起飞。
作者: houyuzhou    时间: 2023-1-18 11:13
红色狂想 发表于 2023-1-17 22:34
我这机器有两颗E5-2650 v3,每个TDP是105W,而电源只有500W,这种情况上Tesla P4余量够吗?
你的Tesla P4 ...

简单计算是够的,服务器电源都是反向虚标,750W额定标500W,没事。
我的P4就是哪便宜的去哪买,都是来路不明的。
作者: xeon13    时间: 2023-1-18 11:17
houyuzhou 发表于 2023-1-14 23:33
风扇狂转是一定的,这个是被动散热卡,PCI设备温度高对应的风墙一定会起飞。

我是DELL R720,关闭自动调速 ...

你这样真不如上一个P2000了,单槽涡扇卡在R720里边亲测散热是没问题的
作者: houyuzhou    时间: 2023-1-18 11:36
xeon13 发表于 2023-1-18 11:17
你这样真不如上一个P2000了,单槽涡扇卡在R720里边亲测散热是没问题的


便宜啊,P4才300多。 而且是满配1080核心,NVENC也是最高规格,实际性能和P4000差不多了。 想让他发挥%100,只要放一个小风扇在尾部就行。  
还有一点半高也很重要,我的全高PCI位全都是U2硬盘,只剩半高有空间了。
作者: xeon13    时间: 2023-1-18 12:08
houyuzhou 发表于 2023-1-18 11:36
便宜啊,P4才300多。 而且是满配1080核心,NVENC也是最高规格,实际性能和P4000差不多了。 想让他发挥%10 ...

好吧 你这个塞得确实是够满的了。
作者: 清水断崖    时间: 2023-1-18 13:51
我是用1288V3带了一个P4 前面板4盘1.2T sas盘 raid5 分了500G装exsi 剩余的做存储 还有4盘插了4块1.2T的P3600分别做4个系统的系统盘。然后买了个VGPU授权。分别给4台虚拟win10 远程桌面用的。折腾完之后一阵空虚
作者: aaronlong    时间: 2023-1-18 15:11
清水断崖 发表于 2023-1-18 13:51
我是用1288V3带了一个P4 前面板4盘1.2T sas盘 raid5 分了500G装exsi 剩余的做存储 还有4盘插了4块1.2T的P36 ...

大神,VGPU的授权要多少钱啊?能用多久啊?
作者: 清水断崖    时间: 2023-1-18 15:35
aaronlong 发表于 2023-1-18 15:11
大神,VGPU的授权要多少钱啊?能用多久啊?

我买的永久 价格都在变。闲鱼搜下VPC授权问问
作者: aaronlong    时间: 2023-1-18 15:38
清水断崖 发表于 2023-1-18 15:35
我买的永久 价格都在变。闲鱼搜下VPC授权问问

好的,谢谢!
作者: QSG    时间: 2023-1-18 15:57
红色狂想 发表于 2023-1-17 23:23
你已经试过了吗?

不是同款机器
作者: 红色狂想    时间: 2023-1-18 16:38
QSG 发表于 2023-1-18 15:57
不是同款机器

那至少是HP的机架式服务器吧,1U还是2U?
作者: QSG    时间: 2023-1-18 16:40
红色狂想 发表于 2023-1-18 16:38
那至少是HP的机架式服务器吧,1U还是2U?

浪潮2u
作者: 红色狂想    时间: 2023-1-18 16:47
清水断崖 发表于 2023-1-18 13:51
我是用1288V3带了一个P4 前面板4盘1.2T sas盘 raid5 分了500G装exsi 剩余的做存储 还有4盘插了4块1.2T的P36 ...

是华为FusionServer RH1288 V3这款1U机器吗?除了HP家的服务器,其他品牌的系统风扇都很容易修改转速
作者: 红色狂想    时间: 2023-1-18 16:52
houyuzhou 发表于 2023-1-18 11:13
简单计算是够的,服务器电源都是反向虚标,750W额定标500W,没事。
我的P4就是哪便宜的去哪买,都是来路 ...

我看X宝上有卖IDC无尘机房下架成色很新的,店保3年,售价¥699,不知这种值不值
作者: houyuzhou    时间: 2023-1-18 16:56
红色狂想 发表于 2023-1-18 16:52
我看X宝上有卖IDC无尘机房下架成色很新的,店保3年,售价¥699,不知这种值不值 ...

不值,没必要。
这卡结构简单的不得了,差不多5MM宽的几根鳍片,根本不积灰。
买三四百的就行,成色都很新,所谓无尘机房的可能就是帮你吹了一下。。
作者: 红色狂想    时间: 2023-1-18 17:07
xeon13 发表于 2023-1-18 09:20
惠普是这样的,东西确实好,但是限制也多。

至于吹透的问题,我觉得如果机箱内有空间,可以给P4单独装一 ...

给Tesla P4加装风扇的话还要解决电源接口的问题,HP DL360 Gen9主板上未预留SYSFAN接口,想另外接风扇,要么从主板供电口用转接线转接,要么接PCI Riser笼上的辅助供电口,但我想无论哪种,线序也和普通PC的不同,估计配套的成品转接线都很难搞到

作者: 红色狂想    时间: 2023-1-18 17:12
警报 发表于 2023-1-17 23:04
但是你还得在NVDIA买授权才能自己搭建,和微软那种不一样。

从NVDIA官方买授权一定很贵,这东西应该和微软KEY一样,X宝闲鱼上有倒卖的
作者: 清水断崖    时间: 2023-1-18 17:13
红色狂想 发表于 2023-1-18 16:47
是华为FusionServer RH1288 V3这款1U机器吗?除了HP家的服务器,其他品牌的系统风扇都很容易修改转速[睡 ...

对的,最近也很便宜 带4NVME背板 双散双电3108阵列卡X540万兆 准系统我900到手的  主要是阵列卡贼贵
作者: 红色狂想    时间: 2023-1-18 17:23
清水断崖 发表于 2023-1-18 17:13
对的,最近也很便宜 带4NVME背板 双散双电3108阵列卡X540万兆 准系统我900到手的  主要是阵列卡贼贵 ...

这款机器运行噪音大吗,4块1.2T的P3600你用的哪款转接卡?
作者: 红色狂想    时间: 2023-1-18 17:27
QSG 发表于 2023-1-18 16:40
浪潮2u

Tesla P4插到浪潮2U服务器上开机风扇就直接起飞了吗,并且会一直持续高速?
作者: 红色狂想    时间: 2023-1-18 17:29
本帖最后由 红色狂想 于 2023-1-18 17:31 编辑
houyuzhou 发表于 2023-1-18 16:56
不值,没必要。
这卡结构简单的不得了,差不多5MM宽的几根鳍片,根本不积灰。
买三四百的就行,成色都很 ...


主要是我想买个HP版的,还有我怕买到锻炼过的返修卡
作者: 清水断崖    时间: 2023-1-18 18:14
本帖最后由 清水断崖 于 2023-1-18 18:17 编辑
红色狂想 发表于 2023-1-18 17:23
这款机器运行噪音大吗,4块1.2T的P3600你用的哪款转接卡?


运行我风扇自动模式的,懒得改,有地下室。加了卡没有特别风扇转速增加。
我这个是硬盘背板支持NVME盘的啊,不需要转接卡。另外这个机子唯一缺点是为了满足前置NVME扩展,会占用掉一个半高半长的pcie位,能用的只有一个全高3/4长的pcie位了。刚刚好能放P4

作者: QSG    时间: 2023-1-18 18:25
红色狂想 发表于 2023-1-18 17:27
Tesla P4插到浪潮2U服务器上开机风扇就直接起飞了吗,并且会一直持续高速? ...

是,直接起飞,还好可以手动调速
作者: 红色狂想    时间: 2023-1-19 14:21
清水断崖 发表于 2023-1-18 18:14
运行我风扇自动模式的,懒得改,有地下室。加了卡没有特别风扇转速增加。
我这个是硬盘背板支持NVME盘的 ...

硬盘笼背板支持NVMe好理解,但P3600是U.2接口的2.5寸硬盘,如果通过硬盘托架可以直接热插拔,那不就意味着这机器的背板是U.2接口的吗?
双路的机器不是最少都支持3个PCIe扩展槽吗,为什么能用的只有一个,你上Tesla P4虚拟云桌面后使用体验怎么样,虚拟机里的Windows显示性能能达到什么程度,可以流畅的跑游戏软件吗?
作者: 清水断崖    时间: 2023-1-19 16:09
红色狂想 发表于 2023-1-19 14:21
硬盘笼背板支持NVMe好理解,但P3600是U.2接口的2.5寸硬盘,如果通过硬盘托架可以直接热插拔,那不就意味 ...

淘宝看下机子布局就明白了。。。
作者: 红色狂想    时间: 2023-1-21 14:26
houyuzhou 发表于 2023-1-17 11:24
是这样,这种1U 2U服务器的风道效率非常高,风压足。 想让P4发挥40W的功力,稍微有一点点风就行。

但是 ...

再请教一下,你说的用小飞机主动限制TDP,这个小飞机具体是哪款软件呀,全称叫什么,都支持什么操作系统,Windows Server 2019和ESXi支持吗?
还有就是,是不是显卡插到机器上一开机,系统就知道了它的TDP,因为显卡本来就比其它PCI设备功耗大,所以为了保证可持续稳定运行,系统才会采取高性能散热策略,于是风扇就起飞了
作者: lwsg1987    时间: 2023-1-21 14:38
1U小心哦
我自己是4U的 中间3*12cm风墙
2080炼丹好稳
作者: houyuzhou    时间: 2023-1-21 16:04
红色狂想 发表于 2023-1-21 14:26
再请教一下,你说的用小飞机主动限制TDP,这个小飞机具体是哪款软件呀,全称叫什么,都支持什么操作系统 ...

小飞机指的是MSI AFTERBURNNER,ESXI不行server支持。 服务器不会根据TDP调整转速,只会根据温度,温度低了就行了。


作者: 红色狂想    时间: 2023-1-23 16:50
houyuzhou 发表于 2023-1-21 16:04
小飞机指的是MSI AFTERBURNNER,ESXI不行server支持。 服务器不会根据TDP调整转速,只会根据温度,温度低 ...

https://www.msi.com/Landing/afterburner/graphics-cards,是这个下载链接吗?用MSI AFTERBURNNER修改TDP后是需要重启系统才能生效呢,还是立刻就生效了呢,这项设置参数是直接保存在显卡芯片里呢,还是保存在MSI AFTERBURNNER软件里,只有Windows系统启动后设置的TDP才会生效呢?
作者: houyuzhou    时间: 2023-1-23 16:52
红色狂想 发表于 2023-1-23 16:50
https://www.msi.com/Landing/afterburner/graphics-cards,是这个下载链接吗?用MSI AFTERBURNNER修改TD ...

这个需要手动开,每次都要手动开。
作者: 红色狂想    时间: 2023-1-24 22:34
lwsg1987 发表于 2023-1-21 14:38
1U小心哦
我自己是4U的 中间3*12cm风墙
2080炼丹好稳

2080,那太热了,双槽位的,需要辅助供电,你的4U机器是哪个型号呀,工业美吗?
作者: 红色狂想    时间: 2023-1-24 22:43
houyuzhou 发表于 2023-1-23 16:52
这个需要手动开,每次都要手动开。

虽然大家都在劝退,但我还是一直不死心,最近在闲鱼上找到一家卖二手服务器的公司,他们正好有售HP DL360 Gen9和Tesla P4,和客服协商过了,等节后上班了给我上机测试一下,看噪音能否接受,行的话就买一个

作者: lwsg1987    时间: 2023-1-24 23:35
红色狂想 发表于 2023-1-24 22:34
2080,那太热了,双槽位的,需要辅助供电,你的4U机器是哪个型号呀,工业美吗? ...

拓普龙4U 二手只要400块
作者: 红色狂想    时间: 2023-1-25 15:47
lwsg1987 发表于 2023-1-24 23:35
拓普龙4U 二手只要400块

便宜是便宜,就是样子太难看,而且像这些非一线品牌服务器机箱,硬盘笼子的热插拔托架设计都存在缺陷,如果是自己DIY组装一台4U机器的话,我还是看好以前的全新INTEL 4U塔式服务器机箱

(, 下载次数: 23)
(, 下载次数: 22)
作者: Anderson997    时间: 2023-1-26 13:08
小黄鱼上看到lz给卖家的留言了
作者: 红色狂想    时间: 2023-1-26 17:55
Anderson997 发表于 2023-1-26 13:08
小黄鱼上看到lz给卖家的留言了

看来这个办法效果还不错,就是不知道什么时候能正好被CHH论坛有这款机器上了Tesla P4的朋友看到
作者: 红色狂想    时间: 2023-2-4 15:12
都说水区力量大,难道CHH就没有一个玩儿HP 1U机架式服务器上GPU显卡的朋友吗?
作者: Anderson997    时间: 2023-2-4 15:15
lz可以成为第一个
作者: fafnirken    时间: 2023-2-4 15:19
红色狂想 发表于 2023-1-16 23:14
HP服务器的散热策略非常严格,没办法破解,如果机箱空间足够大,上Tesla P4改主动散热,加个闲鱼上卖的那 ...

只能说你可以试试看,T4的卡应该是98度上限,到了75以上turbo不生效,另外1u的机箱是能上T4的,但是取决于机箱的风扇。有些机型是有高性能和普通风扇的区分。如果你出场不是高性能风扇,那再看看能不能买到配件。还有针对T4的卡,各家厂商的卡的pcie VID不太一样,非HP的卡可能会不能被iLO识别,触发风扇满转
作者: deihc    时间: 2023-2-4 15:29
旧版不清楚
新版服务器rise卡是分能插GPU和不能插的,插的位置不同rise卡的型号也是不一样的
作者: 红色狂想    时间: 2023-2-7 17:13
deihc 发表于 2023-2-4 15:29
旧版不清楚
新版服务器rise卡是分能插GPU和不能插的,插的位置不同rise卡的型号也是不一样的 ...

HP DL360 Gen9上的PCI Riser笼应该是旧的,不过这个PCI Riser笼扩展板真难搞到,这几天搜遍了闲鱼,都没卖的,最后总算找到一家有货的,要¥350,物以稀为贵了……


2nd Riser Card incl Cage Bracket Slot 3                P/N: 779157-001,764641-B21





作者: 华宇    时间: 2023-2-10 16:51
HPE OEM的Tesla P4卡买到了么,也想折腾个玩玩
作者: 红色狂想    时间: 2023-2-10 22:43
华宇 发表于 2023-2-10 16:51
HPE OEM的Tesla P4卡买到了么,也想折腾个玩玩

怎么,你也是HP服务器吗?

这几天没日没夜地问遍了闲鱼上的所有卖家,都没有HPE版的,我甚至出了高价也搞不来,倒是有个闲鱼卖家说以前有货,放那儿一直没人问,后来被人收走了,你们却一个个的来问货了。。。看来HPE版的国内市场流出量太少了,可遇而不可求,很难找到
不过X宝上倒是找到一家说有货的,但我让他发实物图他都嫌麻烦,问他能不能发上机测试图,嫌我磨叽难伺候,让我去别家买不理我了,这种服务态度估计是个女的,所以我也没再理他
HPE OEM版的P4应该就是下图这种标签

(, 下载次数: 19)

如果没有HPE版,建议选择nVIDIA原厂公版,避开超微、华为、浪潮、这些OEM版,应该就不会出现BIOS固件兼容性问题了。以下是nVIDIA原厂公版标签实物图:

(, 下载次数: 16)
至于HP DL360 Gen9上机后的效果,我只能说——香,具体明天出结果,敬请期待……
作者: 华宇    时间: 2023-2-11 14:38
等你测试结果,没hpe,你公版没问题我也买张公版玩玩
作者: 重庆森林    时间: 2023-2-11 14:40
这卡必须改散热,不然温度随随便便过80
作者: 红色狂想    时间: 2023-2-11 22:22
重庆森林 发表于 2023-2-11 14:40
这卡必须改散热,不然温度随随便便过80

这卡是服务器上用的,所以是被动散热,有一组暴力风扇吹着,可以轻松吹透散热片,温度能随随便便过80℃?
作者: 华宇    时间: 2023-2-15 15:11
红色狂想 发表于 2023-2-10 22:43
怎么,你也是HP服务器吗?

这几天没日没夜地问遍了闲鱼上的所有卖家,都没有HPE版的,我甚至出了 ...

上机测试了么,热不热?我的f服务器是塔式ml150 gen9
作者: 红色狂想    时间: 2023-2-16 22:31
华宇 发表于 2023-2-15 15:11
上机测试了么,热不热?我的f服务器是塔式ml150 gen9

别急,再过几天给结果。。。你这款塔式服务器很香啊,盘位和PCIe扩展槽都很足,运行噪音怎么样?另外HP ML110 Gen10也是非常不错的首选

作者: fishensl    时间: 2023-2-17 15:53
我是直接用的usb 涡轮风扇 黑胶布直接缠着的,温度日常jellyfin 就35左右。

授权搜fastapi-dls 的docker,自建vgpu授权服务器就行了
作者: 红色狂想    时间: 2023-2-17 22:22
华宇 发表于 2023-2-11 14:38
等你测试结果,没hpe,你公版没问题我也买张公版玩玩

因为不想买卡亲自上机测试来回反复折腾,去年春节前在闲鱼上找了一家有销售HP DL360 Gen9与nVIDIA Tesla P4的公司,和卖家商量好了,买她的Tesla P4帮我按照以下方法上机测试:
我这台HP DL360 Gen9是2.5寸8盘位,配置为双路E5-2650 v3×2,内存32G×4,P440AR阵列卡,加了LOM万兆光纤网卡和Intel DC P3608 4TB PCIe NVMe卡式固态硬盘,现在运行时7个风扇的转速保持在19%,在机器跟前的噪音量在可接受范围内,用手试探机箱后部I/O出风口处能吹透,不知这种状态下再插一个Tesla P4噪音会增加多少?

你找个和我的配置接近的机器,测试时给我拍视频,看一下运行后iLO管理页面中风扇的转速是多少,对于噪音大小的实际感受可以用鼠标击键声对比,把鼠标放在机器旁边点击按键,如果从手机拍摄的视频中能清晰的听见击键声,就证明机器运行噪音并不大,要是能再装个Windows Server 2019系统跑个甜甜圈压力测试就更美好啦 o(* ̄▽ ̄*)ブ

我这样要求是不是太难伺候了?但没想到的是卖家竟然答应了,说这款机器搭配Tesla P4已经卖了十几台了,没啥问题
由于临近春节,公司已放假,上机测试的事儿只能等年后开工了
就这样,等啊等,昨天终于安排负责售后的技术员给我测试了,具体详见下图:






本来是要求卖家给我找个nVIDIA原厂公版的Tesla P4,结果还是货源特别多的浪潮OEM版,说只有这一种,仅仅是标签不同,浪潮版和公版都是一样的。看测试表现还不错,插上Tesla P4进入Windows系统后iLO显示的风扇转速在19~30%之间,技术员也拍了视频,可能是手机的原因吧,几乎听不见机器的运行声,但能清晰地听见鼠标击键声。事实证明,服务器只要一插上Tesla P4开机风扇就会满速起飞的说法并不能一概而论,具体情况还得以实际测试验证为准。既然HP DL360 Gen9上Tesla P4正常没问题,就不强求公版不公版了,人家按你的要求忙活了半天给你测试,最后总不能不买人家的卡了吧?索性就这样了,¥480元德邦到付买下了这个浪潮版Tesla P4

就在显卡快要送到的前一天晚上,我仍不死心,想到之前每次用Google查资料都能找到答案解决问题,不妨再用Google图片搜索搜一下,看有没有销售HP版Tesla P4的电商
不得不说,谷姐确实厉害,竟然能解决所有问题。这段时间我搜遍了淘宝和闲鱼,逢人就问,苦苦寻找HPE Tesla P4,却一个都没有,最后竟然借助Google图片搜索找到了,本来都已经彻底死心放弃了,没想到向下滚动了几页后,忽然看到一张图片,淘宝链接标题是Dell Tesla P4,顿时觉得既然有Dell版,那没准儿也有HP版呢?于是马上点进去问了一下卖家,还当真有HP版
全新原盒 HP Tesla P4 Q0V79A 872321-001 870917-001 加速卡 保3年,标价¥2288

屠龙刀拔出,跟卖家说明我是个人自用,能不能¥700成交。他说当年拿货价是¥8000,库存就剩4件了,卖不卖都无所谓,留着做外资单了…… 然后blabla又经过一番磨蹭讨价还价,最后卖家同意¥1400顺丰包邮。就这样,那个浪潮版的还未到手,我又拍了一单

(, 下载次数: 29)

后续情况敬请关注
作者: 红色狂想    时间: 2023-2-17 22:46
华宇 发表于 2023-2-15 15:11
上机测试了么,热不热?我的f服务器是塔式ml150 gen9

忘了补几张图了

(, 下载次数: 22)




作者: 红色狂想    时间: 2023-2-17 23:30
fishensl 发表于 2023-2-17 15:53
我是直接用的usb 涡轮风扇 黑胶布直接缠着的,温度日常jellyfin 就35左右。

授权搜fastapi-dls 的docker, ...

你也是用的服务器吗,哪款型号?nVIDIA Tesla的vGPU可以自建授权服务器吗,不是说他的授权激活方式和微软的KMS不同吗,依然需要官方认证授权才行。我想弄个vDWS/vWS授权,可以实现显卡的全部功能
作者: zh21688    时间: 2023-2-18 00:18
手套可以换了!只是享受这个过程,等真弄好了,估计都心疼电费了!后面就吃灰了!Tesla P4其实真没必要买全新价格确实有点难以接受,这个价格完全可以买p40了
作者: fishensl    时间: 2023-2-18 13:03
红色狂想 发表于 2023-2-17 23:30
你也是用的服务器吗,哪款型号?nVIDIA Tesla的vGPU可以自建授权服务器吗,不是说他的授权激活方式和微软 ...

我是Hp m350e gen8,我目前是一个vgpuwin11用,一个vgpu Ubuntu 上Jellyfin 硬解用,你搜那个docker就知道了,这个docker实际是生成一个90天无限制的试用授权,到期重新申请就可以了,我目前用下来Windows Linux 都没问题,只是Windows vm的激活会简单很多,打开网页获取到token复制到驱动目录重启就可以了,Linux vm在驱动安装正常的情况也只能通过命令wget来下载token到授权目录。
作者: 红色狂想    时间: 2023-2-18 16:52
华宇 发表于 2023-2-15 15:11
上机测试了么,热不热?我的f服务器是塔式ml150 gen9

上机测试了,装的是HP版Tesla P4,开机进入系统后iLO显示的风扇转速和没装之前一样,待机状态下保持在19%。温度恒定在35℃,有图有真相

(, 下载次数: 24)




双卡合并,工业美!








不过在iLO设备装置清单里HP版Tesla P4的产品部件号、序列号、固件版本等信息都显示的是未知状态。看来真有可能像一些卖家说的那样,仅仅是标签贴纸不同,固件都一样,根本不用纠结是否有服务器制造商的PCIe VID设备微码的问题。所以如果无信仰无追求的话,建议还是别花那个冤枉钱买HP版的了,直接上原厂公版或浪潮版就OK啦!



我现在机器底层暂时装的Windows Server 2019系统,驱动装的是从HPE支持中心官网上下载的NVIDIA-Tesla-P4-Driver-Windows-419.17.zip  (362 MB)
NVIDIA Tesla P4 Adapter Driver for Windows 2016
This driver adds GPU Computing support for NVIDIA Tesla P4 cards on HPE servers. CUDA 10.0, OpenCL,OpenGL APIs and DirectCompute are supported by this driver.
类型 驱动程序 - 显卡
版本 419.17 四月 25, 2019

(, 下载次数: 18)
(, 下载次数: 18)

谈一谈Tesla GPU在Windows环境中的图形表现
英伟达显卡VGPU虚拟化是什么_GRID VPC、GRID VAPP、QUADRO VDWS区别


看了以上两篇文章,里面讲到Tesla原生驱动在Windows环境下不支持WDDM图形加速模式,只能工作在TCC计算模式…… 目前我没办法进行压力测试,不知有没有哪款工具软件可以在底层宿主系统是Windows环境下对Tesla运算显卡进行跑分测试的,甜甜圈FurMark不行,貌似检测不到Tesla P4,因为不是工作在WDDM显示适配器状态

作者: iamyangyi    时间: 2023-2-18 17:02
清水断崖 发表于 2023-1-18 13:51
我是用1288V3带了一个P4 前面板4盘1.2T sas盘 raid5 分了500G装exsi 剩余的做存储 还有4盘插了4块1.2T的P36 ...

远程桌面体验怎么样
作者: 红色狂想    时间: 2023-2-18 17:15
zh21688 发表于 2023-2-18 00:18
手套可以换了!只是享受这个过程,等真弄好了,估计都心疼电费了!后面就吃灰了!Tesla P4其实真没必要买全 ...

那手套不是我,是卖家的测试人员,我的上机测试详见85#楼的回帖…… 看样子确实像一些卖家说的那样,仅仅是标签贴纸不同,固件完全相同,不用纠结是否有服务器制造商的PCIe VID设备微码的问题
关于功耗,没插P4以前24小时平均功率是94W,插上后是115W
我要不是1U的机器会看得上P4吗?早上更高规格的了

作者: 红色狂想    时间: 2023-2-18 17:36
Anderson997 发表于 2023-2-4 15:15
lz可以成为第一个

已经成为第一个了,真香,详见80#和85#楼的回帖……
作者: Anderson997    时间: 2023-2-18 17:39
红色狂想 发表于 2023-2-18 17:36
已经成为第一个了,真香,详见80#和85#楼的回帖……

我绑了20块的1050散热器,降速电阻一加直奔50度
作者: 红色狂想    时间: 2023-2-18 17:44
fafnirken 发表于 2023-2-4 15:19
只能说你可以试试看,T4的卡应该是98度上限,到了75以上turbo不生效,另外1u的机箱是能上T4的,但是取决 ...

已经试好了,非常满意,并不像说的那样只要插上风扇就满速,实测开机进入系统后iLO显示的风扇转速和没装之前一样,待机状态下保持在19%,温度恒定在35℃,详见80#和85#楼的回帖……
作者: 红色狂想    时间: 2023-2-18 17:54
houyuzhou 发表于 2023-1-17 11:24
是这样,这种1U 2U服务器的风道效率非常高,风压足。 想让P4发挥40W的功力,稍微有一点点风就行。

但是 ...

时隔一个多月,终于试好了,结果非常满意,并不像说的那样只要插上风扇就满速,实测开机进入系统后iLO显示的风扇转速和没装之前一样,待机状态下保持在19%,温度恒定在35℃,详见80#和85#楼的回帖……

有个问题需要请教,我看到有相关文章中说,Tesla原生驱动在Windows环境下不支持WDDM图形加速模式,只能工作在TCC计算模式。目前我没办法进行压力测试,不知有没有哪款工具软件可以在底层宿主系统是Windows环境下对Tesla运算显卡进行跑分测试的,甜甜圈FurMark不行,貌似检测不到Tesla P4,因为不是工作在WDDM显示适配器状态

作者: 华宇    时间: 2023-2-18 18:45
红色狂想 发表于 2023-2-18 16:52
上机测试了,装的是HP版Tesla P4,开机进入系统后iLO显示的风扇转速和没装之前一样,待机状态下保持在19% ...

感谢分享,看这样还是不花冤枉钱买HP版的,我也直接上个橙色好一点的公版就好了,1400有点贵,看到小黄鱼p40也才750的,英特尔P3608 4T固态之前也想买,但都说英特尔固态都是清零盘,所以就没敢买
作者: fafnirken    时间: 2023-2-18 18:46
红色狂想 发表于 2023-2-18 17:44
已经试好了,非常满意,并不像说的那样只要插上风扇就满速,实测开机进入系统后iLO显示的风扇转速和没装 ...

那就好
你是HP的卡啊,应该是被ilo识别到了
另外如果OS下在工作状态通过nvidia-smi看到超过95就是散热有点问题
作者: houyuzhou    时间: 2023-2-18 18:49
本帖最后由 houyuzhou 于 2023-2-18 18:52 编辑
红色狂想 发表于 2023-2-18 17:54
时隔一个多月,终于试好了,结果非常满意,并不像说的那样只要插上风扇就满速,实测开机进入系统后iLO显 ...


可以装grid驱动,支持wddm

https://storage.googleapis.com/n ... t_international.exe

要注意的是换这个驱动会生成一个虚拟显示器,可能导致自带集显工作异常。 远程访问没问题。


然后你就像用正常显卡一样用它就行。
作者: 红色狂想    时间: 2023-2-18 21:25
华宇 发表于 2023-2-18 18:45
感谢分享,看这样还是不花冤枉钱买HP版的,我也直接上个橙色好一点的公版就好了,1400有点贵,看到小黄鱼 ...

之前我同时也在闲鱼上发了个闲置帖,高价收一张HP版Tesla P4,昨天晚上有位闲友给我发消息,说他有HP版T的esla P4,都是从HP服务器上拆下来的,我跟他砍价砍到¥800,但是我不想再退货折腾了,就用这个全新的吧,你要是特别在意HP版的,可以找他再砍砍价,兴许¥500也能成交呢

英特尔P3608可以找靠谱儿的卖家,选写入量大的,这样买到清零盘的概率会低很多。我2号CPU通道还有一个闲置的PCIe 3.0 x16插槽,想再上一个900P或905P 480G傲腾固态硬盘,听说它是4K随机存取之王,用来做ESXi数据盘存放虚拟机,应该比英特尔P3608交互体验性能更强吧?
作者: 红色狂想    时间: 2023-2-18 21:37
fafnirken 发表于 2023-2-18 18:46
那就好
你是HP的卡啊,应该是被ilo识别到了
另外如果OS下在工作状态通过nvidia-smi看到超过95就是散热有 ...

你看我80#楼的回帖,那是卖家用浪潮版Tesla P4测试的,也算被iLO识别了吗?
在Windows环境下也可以用nvidia-smi命令行查看工作问题吗,是不是只要安装了NVIDIA原生驱动就带了这套工具?
作者: 红色狂想    时间: 2023-2-18 22:00
houyuzhou 发表于 2023-2-18 18:49
可以装grid驱动,支持wddm

https://storage.googleapis.com/nvidia-drivers-us-public/GRID/vGPU15.1/52 ...

感谢提供驱动!

装这个GRID驱动只会影响Windows系统上的Matrox G200eh (HP) WDDM 2.0集显驱动吧,在Windows未启动之前,HP服务器板载的iLO远程管理不受影响吧?
还有就是,我的Tesla P4还没进行任何授权,这样安装GRID驱动管用吗,安装之前是否需要先将从HPE支持中心官网上下载安装的 NVIDIA-Tesla-P4-Driver-Windows-419.17.zip  (362 MB) 驱动卸载掉?
作者: houyuzhou    时间: 2023-2-18 22:14
红色狂想 发表于 2023-2-18 22:00
感谢提供驱动!

装这个GRID驱动只会影响Windows系统上的Matrox G200eh (HP) WDDM 2.0集显驱动吧,在Wind ...

板载的远程和WINDOWS远程都不受影响,不需要授权只要安装就行,最好先卸载掉原本的驱动。  这个装过后就是和普通显卡一样的体验了。
作者: fafnirken    时间: 2023-2-18 22:35
红色狂想 发表于 2023-2-18 21:37
你看我80#楼的回帖,那是卖家用浪潮版Tesla P4测试的,也算被iLO识别了吗?
在Windows环境下也可以用nvid ...

图不对,看不出来
windows自带的P4的驱动有nvidia-smi
作者: 红色狂想    时间: 2023-2-18 23:39
fafnirken 发表于 2023-2-18 22:35
图不对,看不出来
windows自带的P4的驱动有nvidia-smi

图片尺寸太大,我上传到图床后外链到论坛的,你那儿打不开吗?那我直接上传到论坛吧,就是分辨率会被缩小

(, 下载次数: 17)
(, 下载次数: 20)
(, 下载次数: 20)
(, 下载次数: 23)
(, 下载次数: 30)




欢迎光临 Chiphell - 分享与交流用户体验 (https://www.chiphell.com/) Powered by Discuz! X3.5