網卡bonding模式 - bond0、1、4配置

網卡bonding簡介

網卡綁定就是把多張物理網卡通過軟件虛擬成一個虛擬的網卡，配置完畢後，所有的物理網卡的ip和mac將會變成相同的。多網卡同時工作可以提高網絡速度，還可以實現網卡的負載均衡、冗餘。

bonding模式

1 round-robin(mode=0)

輪轉策略，輪流在每一個slave網卡上發送數據包，提供負載均衡和容錯能力。

2 active-backup(mode=1)

主備策略，只有一個slave被激活，只有當active的slave的接口down時，纔會激活其它slave接口。主備模式下發生一次故障切換，在新激活的slave接口上會發送一個或者多個gratuitous ARP。主salve接口上以及配置在接口上的所有VLAN接口都會發送gratuitous ARP，需要在這些接口上配置了至少一個IP地址。VLAN接口上發送的的gratuitous ARP將會附上適當的VLAN id。本模式提供容錯能力。

Gratuitous ARP也稱爲免費ARP，無故ARP。Gratuitous ARP不同於一般的ARP請求，它並非期待得到ip對應的mac地址，而是當主機啓動的時候，將發送一個Gratuitous arp請求，即請求自己的ip地址的mac地址。(來自百度百科：http://baike.baidu.com/view/10101910.htm)

3 XOR(mode=2)

基於所選擇的hash策略，本模式也提供負載均衡和容錯能力。

4 broadcast(mode=3)

廣播策略，向所有的slave接口發送數據包，本模式提供容錯能力。

5 802.3ad(mode=4)

動態鏈路聚合，根據802.3ad標準利用所有的slave建立聚合鏈路。slave接口的出口取決於傳輸的hash策略，默認策略是簡單的XOR策略，而hash策略則可以通xmit_hash_policy選項配置。

前提：每個slave網卡支持ethtool獲取速率和雙工狀態

交換機支持IEEE 802.3ad標準(可能需要配置啓用)

IEEE 802.3ad 是執行鏈路聚合的標準方法。從概念上講，將多個以太網適配器聚集到單獨的虛擬適配器方面與“以太通道（EtherChannel）”的功能相同，能提供更高的帶寬防止發生故障。例如，eth0 和 eth1 可以聚集到稱作 eth3 的 IEEE 802.3ad鏈路聚合；然後用 IP 地址配置接口 eth3。系統將這些聚集的適配器作爲一個適配器來考慮。因此，可以像在任何以太網適配器上一樣配置它們的 IP。(來自百度百科：http://baike.baidu.com/view/1996279.htm?fr=aladdin)

6 balance-tlb(mode=5)

自適應傳輸負載均衡：根據每個slave的負載(相對速度)決定從哪個接口發送數據包，從當前接口接收數據包。如果接收的slave接口故障，其它slave接口將接管它的mac地址繼續接收。

前提：每個slave網卡支持ethtool獲取速率。

7 balance-alb(mode=6)

自適應負載均衡：

前提：每個slave網卡支持ethtool獲取速率

每個slave網卡支持啓用時重新設置硬件地址

小結：

mode 1、5、6不需要交換機設置

mode 0、2、3、4需要交換機設置

缺省使用mode 0

bonding驅動加載


cat /boot/config-2.6.32-431.el6.x86_64 | grep -i bonding  

CONFIG_BONDING=m          # 這裏可以看出bonding驅動編譯成可以動態加載的內核模塊

[root@compute1 ~]# vim /etc/modprobe.d/bond.conf   # 開機自動加載bonding驅動

alias bond0 bonding

options bond0 miimon=100 mode=0   # miimon：多長時間檢查一次網絡，單位ms;

bonding模式0配置


vim  /etc/sysconfig/network-scripts/ifcfg-bond0         # 建立虛擬網卡bond0

DEVICE=bond0

IPADDR=10.10.10.1

NETMASK=255.255.255.0

ONBOOT=yes

BOOTPROTO=none

USERCTL=no

GATEWAY=10.10.10.254


vim  /etc/sysconfig/network-scripts/ifcfg-eth0 

DEVICE=eth0

BOOTPROTO=none

ONBOOT=yes

USERCTL=no

MASTER=bond0

SLAVE=yes


vim  /etc/sysconfig/network-scripts/ifcfg-eth1

DEVICE=eth1

BOOTPROTO=none

ONBOOT=yes

USERCTL=no

MASTER=bond0

SLAVE=yes

# 設置完成後，重啓網絡服務來使用bond0生效


service network restart  # bond模塊會自動加載


cat /proc/net/bonding/bond0  # 查看目前bonding的狀態

modprobe -r bonding;service network restart   # 讓bond模式生效

bonding純網卡配置文件方式

bonding模式1配置


#  具體操作步驟就下面這步不同，其它一致。

vim /etc/modprobe.d/bond.conf   

alias bond0 bonding

options bond0 miimon=100 mode=1    # 模式1

vim /etc/rc.d/rc.local   # eth0 eth1的工作順序(僅在主備模式下)

ifenslave bond0 eth0 eth1

注：在高可用的環境下，網卡配置bonding後，vip_nic要爲bond0

bonding模式4配置


#  具體操作步驟就下面這步不同，其它一致。

vim /etc/modprobe.d/bond.conf   

alias bond0 bonding

options bond0 miimon=100 mode=4 lacp_rate=1    # 模式4

盛科交換機的lacp配置參考：http://pan.baidu.com/s/1o8rL6II 《二層轉發保護》

注意的是：交換機和服務器連接的那塊要配置動態的channel-group

bond4下啓動vlan子接口


# 永久加載8021q module

cat > /etc/sysconfig/modules/8021q.modules << EOF

\#\!/bin/sh

if [ ! `lsmod | grep 8021q` ] ; then

        exec /sbin/modprobe 8021q >/dev/null 2>&1

fi

EOF

modprobe 8021q # 加載模塊

vim  /etc/sysconfig/network-scripts/ifcfg-bond0.110  # vlan子接口，發出去的包是帶有vlan tag 110的

DEVICE=bond0.110          # vlan子接口要“.”分隔

BOOTPROTO=none

ONBOOT=yes

USERCTL=no

VLAN=yes                  # 寫配置文件，就不要安裝vconfig來配置vlan子接口

IPADDR=192.168.110.3

PREFIX=24

bond4結合OpenStack ovs flat vlan模式


1、 採用linux bridge

    brctl addbr br-bond

    brctl addif br-bond bond0

    ifconfig br-bond 192.168.1.4/24   # 這樣配置是可以通的

2、 採用openvswitch

    ovs-vsctl add-br br-bond

    ovs-vsctl add-port br-bond bond0

    ifconfig br-bond 192.168.1.4/24   # 這樣配置是不通的

    如果進行如下操作，網絡是可以通的

    brctl addbr br-bond

    brctl addif br-bond bond0

    ifconfig br-bond 192.168.1.4/24  # 管理ip地址配置linux bridge上，不是配置在br-data上

    ovs-vsctl add-br br-data            # 創建一個br-data

    ovs-vsctl add-port br-data br-bond  # br-bond作爲ovs bridge的一個port，不然計算節點下的虛擬機網絡不通

    [root@sha-cloud002 ~]# cat /etc/sysconfig/network-scripts/ifcfg-br-bond  # br-data配置文件如下

    DEVICE=br-bond

    IPADDR=10.10.10.12

    NETMASK=255.255.255.0

    ONBOOT=yes

    NM_CONTROLLED="no"

    BOOTPROTO=none

    TYPE=Bridge

    DELAY=0  # prevent it waiting on interface start

# 這裏需要注意一下，如果是hp刀片服務器，網卡做bond後劃vlan子接口才能

和上端交換機通信。這時候配置需要調整下

    ovs-vsctl add-port br-data eth0.470（舉例vlan id:470）

    ovs-vsctl set Port eth0.470 tag=470(打了tag後相當於access口，access口出去的包是不帶vlan id的)