CentOS6.4双网卡做端口聚合，但只有一个口在聚合口中

number321

服务器是DELL R720，网卡是Broadcom Corporation NetXtreme BCM5720 Gigabit Ethernet PCIe，安装了64位的CentOS6.4系统。

我将服务器其中的em1,em3两块千兆网卡做bond，设置成mode=0时能够正常工作，达到负载均衡的效果。

现在我希望能够将两块1G网卡带宽扩大至2G。设置为mode=4，并且在交换机那一端也做了端口汇聚的设置。但用netperf测试时，发现流量只走其中一块网卡走，并且查看 /proc/net/bonding/bond0 文件内容如下：

Ethernet Channel Bonding Driver: v3.6.0 (September 26, 2009)

Bonding Mode: IEEE 802.3ad Dynamic link aggregation
Transmit Hash Policy: layer2 (0)
MII Status: up
MII Polling Interval (ms): 100
Up Delay (ms): 0
Down Delay (ms): 0

802.3ad info
LACP rate: slow
Aggregator selection policy (ad_select): stable
Active Aggregator Info:
        Aggregator ID: 1
        Number of ports: 1
        Actor Key: 17
        Partner Key: 1
        Partner Mac Address: 00:00:00:00:00:00

Slave Interface: em1
MII Status: up
Speed: 1000 Mbps
Duplex: full
Link Failure Count: 0
Permanent HW addr: 90:b1:1c:5a:47:ef
Aggregator ID: 1
Slave queue ID: 0

Slave Interface: em3
MII Status: up
Speed: 1000 Mbps
Duplex: full
Link Failure Count: 0
Permanent HW addr: 90:b1:1c:5a:47:f1
Aggregator ID: 2
Slave queue ID: 0


Number of ports: 1 这里正常情况下应该是2吧。请问是什么原因导致我遇到的这个问题呢？

chenyx

交换机那边的聚合模式和linux的一样吗

number321

交换机那边也是设置成LACP方式的。但我不确定是不是设置一定正确，因为第一次做这个设置。

我想知道如果交换机那边没有做设置，或者设置不正确，是不是会导致我服务器这一端的两个网卡Aggregator ID不全都在LACP的ID中的情况。

chenyx

那你找网络管理员,查看下交换机端口组的状态吧,最好能在交换机上debug

number321

刚才确实是我交换机设置有问题，现在已经设置好了，查看信息如下

Bonding Mode: IEEE 802.3ad Dynamic link aggregation
Transmit Hash Policy: layer3+4 (1)
MII Status: up
MII Polling Interval (ms): 100
Up Delay (ms): 0
Down Delay (ms): 0

802.3ad info
LACP rate: slow
Aggregator selection policy (ad_select): stable
Active Aggregator Info:
        Aggregator ID: 3
        Number of ports: 2
        Actor Key: 17
        Partner Key: 410
        Partner Mac Address: d0:67:e5:d7:a3:ca

Slave Interface: em1
MII Status: up
Speed: 1000 Mbps
Duplex: full
Link Failure Count: 0
Permanent HW addr: 90:b1:1c:53:d8:f5
Aggregator ID: 3
Slave queue ID: 0

Slave Interface: em3
MII Status: up
Speed: 1000 Mbps
Duplex: full
Link Failure Count: 0
Permanent HW addr: 90:b1:1c:53:d8:f7
Aggregator ID: 3
Slave queue ID: 0

这样看起来应该是正确的。但实际传输的时候，我在交换机上看流量，仍然所有流量只会从其中一个口走，请问这是为什么呢？

number321

console#show lacp port-channel 1

Actor:
      system priority:                1
      system mac addr:                D067.E5D7.A3CC
Partner:
      system priority:                65535
      system mac addr:                90B1.1C53.D8F5

交换机上查看信息如下，我发现交换机上的Partner的MAC地址是em1的地址，不是Partner Mac Address的地址，会不会是这个原因导致。这个需要在什么地方来设置正确呢，是系统上面还是交换机上面

number321

请问我目前的配置还有什么地方有问题吗
我看了网上的很多相关配置的文章，感觉我的配置已经和别人说的一样了，就是不知道为什么会达不到流量同时走两个网口，达到2G的效果。

sinofeng

我也遇到您曾经遇到的问题，请问达到2G了吗？谢谢

q1208c

回复 6# number321

这个原因 的可能性比较大.

试着 把 em1  down一下. 看看流量会不会切换到 em3 上.