找回密码
 加入我们
搜索
      

推荐一个支持全平台驱动的非主流 25G/100G 高速网卡系列

查看数: 3090 | 评论数: 40 | 收藏 14
关灯 | 提示:支持键盘翻页<-左 右->
    组图打开中,请稍候......
发布时间: 2025-6-15 13:25

正文摘要:

本帖最后由 l泰然处之01 于 2025-6-15 14:29 编辑 T6 系列是 Chelsio 公司 2016 年推出的 25G/100G 系列网卡,截止目前 2025 年 6 月,全系驱动支持一直在更新,据观察 Windows、Linux 下驱动每 2 季度更新, mac ...

回复

mdk2000 发表于 2025-6-15 17:20
本帖最后由 mdk2000 于 2025-6-15 17:37 编辑

我也在用t62100,说些自己测试的

虚拟机rdma问题
全平台不支持SR-IOV后rdma,但是据说hyper-v和esxi有办法支持虚拟机rdma,我用的proxmox就没办法了

驱动问题
最完美的是win,全功能支持

proxmox8
不能打官方驱动(编译源码失败),改成6.5内核能打上,但是rdma有bug(官方驱动和系统驱动都有这个bug),无法连接(只试了nvmeof)

debian12
能打官方驱动,但是rdma有bug(官方驱动和系统驱动都有这个bug),无法连接(只试了nvmeof)

Ubuntu
只支持22不支持24,所以没试

truenas (官方出的nas用的就是chelsio网卡)
scale
不能打官方驱动,自带驱动几乎完美(缺少toe卸载模块),rdma都能用(只试了nvmeof)
core
不能打官方驱动,自带驱动简直完美,toe模块都有,但我什么都没测

rockylinux
不能打官方驱动(编译源码失败),自带驱动几乎完美(缺少toe卸载模块),rdma只试了nvmeof和iser都支持

我proxmox改成了intel e810,可以SR-IOV后rdma,和win上的t6搭配很完美了,rdma我只用到了nvmeof

他家的网卡,win上带有iser nvmeof的initiator,硬盘速度和本地没啥区别了

这张卡25w(多模光模块),很热不能只吹正面,背面也很热,要侧吹

评分

参与人数 1邪恶指数 +10 收起 理由
猪圈 + 10 支持一下

查看全部评分

mdk2000 发表于 2025-6-17 17:18
25G网卡可以用QLogic 41262,性价比高同时支持RoCE v2,iWARP两种RDMA

我有台truenas用这网卡跑nvmeof
empire4th 发表于 2025-6-18 10:35
brucelee1126 发表于 2025-6-17 11:05
大佬,请教下,最近想买两张cx515a,但是发现海鲜市场版型很多,原厂和oem都是不一样的版型,还有3.0跟4. ...

别买cx5,直接cx6。
预算不够就BCM957508,双口100,可以配置为单口200
michaelzxp 发表于 2025-6-26 16:03
l泰然处之01 发表于 2025-6-26 00:27
雷电盒子的拓展性取决于 Intel 发布的当代的 JHL 芯片,以及现在的 雷电5 只支持到了 PCIe 4.0,理论上可 ...

那是真没多少,看来这块指望不上了
l泰然处之01 发表于 2025-6-26 00:27
michaelzxp 发表于 2025-6-25 21:03
似的,雷电一直是x4的pcie,带宽提升就有希望啊,原来做dock的都会出的。owc是不是已经出了,我记的,不 ...

雷电盒子的拓展性取决于 Intel 发布的当代的 JHL 芯片,以及现在的 雷电5 只支持到了 PCIe 4.0,理论上可以到 64Gbps,实际看 NVMe 设备上也就 56Gbps。
120Gbps 的实现是把其中一个双向通道变成单向了,不是做到了 PCIe 5.0。
michaelzxp 发表于 2025-6-25 21:03
l泰然处之01 发表于 2025-6-25 17:01
现在还没有对应的 雷电5 Dock 设备出现,带宽变大主要是因为 PCIe 版本高了,物理 x4 还是原来的 x4,除 ...

似的,雷电一直是x4的pcie,带宽提升就有希望啊,原来做dock的都会出的。owc是不是已经出了,我记的,不知道会不会有pcie5 4x转pcie4 8x这种东西来兼容老的东西
linxijun 发表于 2025-6-25 17:57
本帖最后由 linxijun 于 2025-6-25 17:59 编辑
l泰然处之01 发表于 2025-6-25 17:10
感谢,楼太高了,先看了最后几个回复,他们得出结论和我一样


是的,但是可预见的未来肯定是支持更高速率的卡的,时间问题了
l泰然处之01 发表于 2025-6-25 17:18
本帖最后由 l泰然处之01 于 2025-6-25 17:20 编辑
Dolfin 发表于 2025-6-25 17:06
所以100GbE的网卡在雷电5上面是64GbE吗?


100G 网卡,
T6 这款只支持 PCIe 3.0,PCIe 3.0 x4 理论能跑到 3500M/s,也就 28Gbps
CX6,支持 PCIe 4.0,PCIe 4.0 x4 理论能跑到 7000M/s,56Gbps 吧
PCIe 5.0 网卡的没见过 100G 端口的,理论能 100G,哦 雷电5 不支持 5.0,最高也就跑出 50G 的水准
l泰然处之01 发表于 2025-6-25 17:10
本帖最后由 l泰然处之01 于 2025-6-25 17:11 编辑
linxijun 发表于 2025-6-21 13:39
链接,这里面有不少人适用于楼主相关情况的网卡测试情况,可以做参考,打不开的要上楼了个梯 ...


感谢,楼太高了,先看了最后几个回复,他们得出结论和我一样

The latest Chelsio stuff is dext and it supports both T6 and T5, dunno what older hardware you talking about and at least I am getting pretty close to maximum speed with them than Apple provided "stripped" drivers where u can't even change MTU...
最新的 Chelsio 驱动是 dext,支持 T6 和 T5,不知道你在说什么旧硬件,至少使用它们时我接近了最大速度,而苹果提供的“精简”驱动程序连 MTU 都无法更改……

I stand corrected. Chelsio T6 series on ebay with SFP28 ports are probably the best card to get at this point as indeed the driver available from the manufacturer is a dext.
我纠正一下。目前在 eBay 上,Chelsio T6 系列带 SFP28 端口的网卡可能是最好的选择,因为制造商提供的驱动程序确实很棒。


Chelsio 的 T6 系列可能是 macOS 下最好的 25G 的方案了
Dolfin 发表于 2025-6-25 17:06
l泰然处之01 发表于 2025-6-25 17:01
现在还没有对应的 雷电5 Dock 设备出现,带宽变大主要是因为 PCIe 版本高了,物理 x4 还是原来的 x4,除 ...

所以100GbE的网卡在雷电5上面是64GbE吗?
l泰然处之01 发表于 2025-6-25 17:01
michaelzxp 发表于 2025-6-23 15:42
现在mac 支持雷电 5 了,能跑 120g 吧,应该够用了吧,有人测试过么

现在还没有对应的 雷电5 Dock 设备出现,带宽变大主要是因为 PCIe 版本高了,物理 x4 还是原来的 x4,除非网卡也支持到 4.0/5.0,不然也只能跑 3.0 版本的带宽。
michaelzxp 发表于 2025-6-23 15:42
l泰然处之01 发表于 2025-6-15 20:08
理论上最高只有不到 40G,因为 M系列的扩展性受限于 ThunderBolt 的速度,现在 100G 的卡接上去也就跑不 ...

现在mac 支持雷电 5 了,能跑 120g 吧,应该够用了吧,有人测试过么
linxijun 发表于 2025-6-21 13:39
链接,这里面有不少人适用于楼主相关情况的网卡测试情况,可以做参考,打不开的要上楼了个梯
empire4th 发表于 2025-6-19 10:50

但是博通一如既往对模块有点挑,虽然比之前好了点
brucelee1126 发表于 2025-6-19 10:49
empire4th 发表于 2025-6-19 10:13
手工能改,而且不是太热,有机箱风扇吹60度

ok谢谢.......
empire4th 发表于 2025-6-19 10:13
brucelee1126 发表于 2025-6-18 13:06
博通这个没看到大佬有散热改造方案啊,买螺丝那个我看全系大佬都有散热方案 ...

手工能改,而且不是太热,有机箱风扇吹60度
brucelee1126 发表于 2025-6-18 13:06
empire4th 发表于 2025-6-18 10:35
别买cx5,直接cx6。
预算不够就BCM957508,双口100,可以配置为单口200

博通这个没看到大佬有散热改造方案啊,买螺丝那个我看全系大佬都有散热方案
皛羽控 发表于 2025-6-17 18:07
可惜现在主力机都在pve
l泰然处之01 发表于 2025-6-17 17:42
mdk2000 发表于 2025-6-17 17:18
25G网卡可以用QLogic 41262,性价比高同时支持RoCE v2,iWARP两种RDMA

我有台truenas用这网卡跑nvmeof ...

我的 25G 主要是解决 macOS 的设备,这个之前也看过,但是没驱动,就 MLX 和 Chelsio 的有驱动
brucelee1126 发表于 2025-6-17 11:05
empire4th 发表于 2025-6-17 10:54
T6过时了,S7 T7出了

大佬,请教下,最近想买两张cx515a,但是发现海鲜市场版型很多,原厂和oem都是不一样的版型,还有3.0跟4.0的区别,我问下,买hpe那个版的515a,能刷pcie4.0吗,固件能正常更新吗,还有更便宜的50g版,能刷100g吗
empire4th 发表于 2025-6-17 10:54
l泰然处之01 发表于 2025-6-16 15:04
是的 这个价格性价比很高 改天试试他家的 USS

T6过时了,S7 T7出了
empire4th 发表于 2025-6-17 10:54
simple1103 发表于 2025-6-17 00:12
Hi,Chelsio USS要如何去申请呢?我在网络上没有检索到相关信息,另外只有T6的卡可以申请嘛 ...

装好USS之后发邮件
simple1103 发表于 2025-6-17 00:12
empire4th 发表于 2025-6-16 08:43
之前我卖官翻盒装只要1400

可以配合Chelsio USS用,发邮件申请license

Hi,Chelsio USS要如何去申请呢?我在网络上没有检索到相关信息,另外只有T6的卡可以申请嘛
l泰然处之01 发表于 2025-6-16 15:04
empire4th 发表于 2025-6-16 08:43
之前我卖官翻盒装只要1400

可以配合Chelsio USS用,发邮件申请license

是的 这个价格性价比很高 改天试试他家的 USS
empire4th 发表于 2025-6-16 08:43
本帖最后由 empire4th 于 2025-6-16 08:45 编辑
l泰然处之01 发表于 2025-6-16 03:28
T62100 鱼上有1800的,T6225 鱼上之前大概500/600,现在好像涨价了


之前我卖官翻盒装只要1400

可以配合Chelsio USS用,发邮件申请license
l泰然处之01 发表于 2025-6-16 03:28
猪圈 发表于 2025-6-16 00:59
这卡我看了下黄鱼,好贵啊~

T62100 鱼上有1800的,T6225 鱼上之前大概500/600,现在好像涨价了
猪圈 发表于 2025-6-16 00:59
这卡我看了下黄鱼,好贵啊~
playclan 发表于 2025-6-15 22:03
linxijun 发表于 2025-6-15 20:42
按理来说理论速率最低也有80g,能到每秒10g应该不是问题,Intel不是优化了动态分配的问题吗?正常来说现 ...

最高是4.0x4的64Gbps
linxijun 发表于 2025-6-15 20:42
l泰然处之01 发表于 2025-6-15 20:08
理论上最高只有不到 40G,因为 M系列的扩展性受限于 ThunderBolt 的速度,现在 100G 的卡接上去也就跑不 ...

按理来说理论速率最低也有80g,能到每秒10g应该不是问题,Intel不是优化了动态分配的问题吗?正常来说现在就是系统和驱动之间的问题了,个人拙见
l泰然处之01 发表于 2025-6-15 20:08
linxijun 发表于 2025-6-15 20:04
就不知道m系列能否兼容100g的网卡了

理论上最高只有不到 40G,因为 M系列的扩展性受限于 ThunderBolt 的速度,现在 100G 的卡接上去也就跑不起来

Archiver|手机版|小黑屋|Chiphell ( 沪ICP备12027953号-5 )沪公网备310112100042806 上海市互联网违法与不良信息举报中心

GMT+8, 2025-6-26 18:47 , Processed in 0.015836 second(s), 12 queries , Gzip On, Redis On.

Powered by Discuz! X3.5 Licensed

© 2007-2024 Chiphell.com All rights reserved.

快速回复 返回顶部 返回列表