544网卡，做了几个简单的测试
本帖最后由 Illidan2004 于 2024-2-2 23:22 编辑之前我也在版上也问过几个问题，这次有条件做了简单的测试。
我考虑的使用场景：
想要在常用PC的主板上插上一张高带宽网卡，其中一个口可以和PC NAS直连，另一个口连交换机万兆口进行其它常规高速通信。
几个问题：
1、544网卡是3.0x8的，在3.0x4下能达到多少带宽？对于非Threadripper/WorkStation主板，如果两个x8都用掉了，那么只剩下x4可以用了。
2、544网卡能不能接万兆交换机？
3、交换机是的万兆光口插入万兆光模块，由于光万兆通常只支持1G/10G协商，那么与另一个2.5G的口之间互相传输数据的时候，传输带宽是能拉满2.5G，还是限制或者协商到1G？
测试机器：
（1）7950X3D+MSI X670E Carbon，544网卡+8x的FLR转接卡，插在芯片组的PCIEx4上
（2）7950+千兆字节B650I AORUS Ultra，544网卡+4x的FLR转接卡，插在唯一的PCIEx16上
（3）QSFP-QSFP 40Gb 1米 DAC直连线（拆机货）
（4）兮克SKS7300-8GPYXGS交换机（8口2.5G，4口SFP+），兮克10G单模双纤LC接口模块SKMD-10G-10KM，LC-LC单模双芯光纤跳线
（5）Mellanox MAM1Q00A QSFP转SFP转接头，Mellanox单模双纤MFM1T02-LR-F-A1万兆模块（均为拆机货）
第一个问题测试结果，iperf3单线程12.5Gbits/s，iperf2十线程22.0Gbits/s，可能有误差，也因为FLR转接效率问题或者X670芯片组问题可能稍低，但是基本上也可以看到，要发挥出40G带宽，至少需要X8，否则理论性能也就是32G加上网络传输各种损耗打个八折，可能就低于25G了，可见X4接口下25G网卡已经够用，目前可能CX4121a和CX542b（OCP，需要折腾）是比较好的选择，当然不排除25G也有损耗还会更低一些，年后再测试测试看。
第二个问题，因为40G QSFP接口其实就是由4个10G通道汇总得到的，我在网上找到Mellanox的MAM1Q00A QSFP转SFP转接头，很多人说这种只能用于交换机，我查了NVIDIA官网，文档里是说支持CX3系列网卡的，因此就买来试了下，插到网卡上，然后用光纤连到兮克交换机的光口，成功协商10G。把另一台电脑也这样连上，两台之间iperf测速能达到10G，说明这个方案能够用40G网卡连接万兆交换机用。至于25G 网卡SFP28接口是否可以直接用10G SFP+光模块连接交换机，就待后续折腾测试了，这个根据版上网友的经验，应该可行性比40G这个还要高。
第三个问题，把一台电脑的40G网卡其中一个口按照上面方式连接交换机的SFP+口，另一台电脑2.5G网口网线连接交换机，两台之间iperf测速能达到2.5G，这个应该就是只看交换机的背板速率的，然后分别被每个口和交换机协商的速度限制，而和交换机上面连接的几个口之间没有协商关系。
pcie3.0x4带宽是32GT/s，可以跑三个半10g流。对你的应用来讲，带宽是够了。 40G拆成4个10G，是为了接入局域网？ summerq 发表于 2024-2-3 00:17
pcie3.0x4带宽是32GT/s，可以跑三个半10g流。对你的应用来讲，带宽是够了。
各种效率损失 可能要打个8折。不过Windows拷贝本来就只有10g多。。 zxy2001 发表于 2024-2-3 01:10
40G拆成4个10G，是为了接入局域网？
没有试过拆分线，只试了转换模块，可以用。接入局域网。 感觉装完新硬件，最好重装系统，UEFI里才包含新硬件的驱动 Illidan2004 发表于 2024-2-3 09:40
没有试过拆分线，只试了转换模块，可以用。接入局域网。
谢谢，理解错了，还以为用了一拆4的那根线。。。应该是不能用的。。 可以试试刷成56g再测速度，貌似x4也有一点点提升 weindy 发表于 2024-2-3 13:53
可以试试刷成56g再测速度，貌似x4也有一点点提升
年后空了再试试
页:
[1]