macOS与PVE、ROS之间的LACP设置成功，但测试未叠加带宽

hawie

客户端：macOS 13.x，两个2.5Gbps口，虚拟接口链路聚合设置成功，可看到其中的两网口状态，都正常。
服务端一：PVE自带的Bond，LACP；
服务端二：ROS的Bond，LACP。

客户端与两种服务端之间，都能连接正常。
但用iperf3测试带宽，仍只有一条，大约290MB/s；用AJA读写、SMB3读写，也是都没有超过一条带宽。

有解吗？

ericwongcug

iperf加上-P 4用4线程测试看看，LACP单线程只会走一条链路。

hawie

ericwongcug 发表于 2024-8-8 18:01
iperf加上-P 4用4线程测试看看，LACP单线程只会走一条链路。

没作用，4线程每路大概1/4，每秒总带宽还是2.35 Gbits/sec。

jop

LACP也分几种HASH模式，比如IP MAC 端口等组合。如果你选的IP组合，那么你至少需要2对设备同时进行测试。

jop

lacp接口下用load-balance 可以调整hash方式

hawie

jop 发表于 2024-8-8 19:08
lacp接口下用load-balance 可以调整hash方式

macOS只支持lacp，服务端尝试过改balance-rr/xor/...等其他bond方式都不支持。而lacp的hash策略，pve时有layer2、layer2+3、layer3+4三种，调整后测试对带宽无影响，还是没有突破一条线路的带宽。ROS估计大同小异，没去调整hash测试。

hawie

jop 发表于 2024-8-8 19:05
LACP也分几种HASH模式，比如IP MAC 端口等组合。如果你选的IP组合，那么你至少需要2对设备同时进行测试。 ...

pve下直接装了iperf3,  还有一台dsm装有iperf3，再加上macOS iperf3。这个环境测试的。带宽没有叠加。

jop

hawie 发表于 2024-8-8 19:57
macOS只支持lacp，服务端尝试过改balance-rr/xor/...等其他bond方式都不支持。而lacp的hash策略，pve时有 ...

lacp的两端设置的hash都是自身发送的流，如果双边设置了正确的hash方式，那么逻辑上应该是在满足hash条件后进行分流发送。不过没玩过PVE，不确定原因，ROS的话本身是可以实现的。另外虚拟机母鸡设置了LACP，内部虚拟机无需再设置LACP，直接用虚拟接口即可。

lilarcor

lacp单设备本来就没用啊

qinyq

jop 发表于 2024-8-8 19:05
LACP也分几种HASH模式，比如IP MAC 端口等组合。如果你选的IP组合，那么你至少需要2对设备同时进行测试。 ...

用了两对进行测试 测下来还是不叠加。。
两对是 pc1 -> nas1  pc2->nas2，这两个交换机一个是GS108T 一个是GS110T 看起来也都聚合了，难道是我设置不对。。？

mustleave

能调整lacp hash  l4-src-dst 么？ 用 layer4 去做哈希， 这样的话多条流(不同的四层端口）就可以走不同的路径了用来叠加带宽

coolbo

linux端口是有问题的，创建的端口都是双数，linux的hash会去掉最后一位，但是交换机就不行了，iperf多线程可以自己指定端口范围进行测试

coolbo

http://blog.hjc.im/linux-and-lacp-lag.html