2. 程式人生 > 其它 >【硬體相關】網絡卡bond配置

【硬體相關】網絡卡bond配置

阿新 • • 發佈：2022-05-28

一、前言

參考文件：
Redhat：7.7. Using Channel Bonding

本文主要闡述如何配置網絡卡bond，以及不同bond模式區別差異

bonding是Linux提供的一種技術，它可以將兩個以上的網路介面繫結為一個邏輯介面，實現網路冗餘、負載均衡，總共支援以下7種模式

mode policy 模式特點 實現效果 交換機支援
0 balance-rr 輪詢模式，資料包從不同slave介面依次輪詢傳輸，
同一時刻只有一個slave網路介面工作		 網路冗餘
負載均衡		 需要
1 active-backup 主備模式，只有一個slave介面處於活躍狀態，只有
當主介面異常之後，備接口才會啟用工作		 網路冗餘 不需要
2 balance-xor 基於指定的傳輸hash策略傳輸資料包 網路冗餘
負載均衡		 需要
3 broadcast 在所有slave介面傳送所有資料包 網路冗餘 需要
4 802.3ad 需要交換機對所有slave介面建立埠組（lacp模式），
所有slave介面共享同樣的速率，根據傳輸頻寬自動匹配slave介面		 網路冗餘
負載均衡		 需要
5 balance-tlb 傳輸負載均衡模式，在每個slave介面上根據負載分配傳出
流量，若正在接收資料的slave故障，另一個slave接管失敗slave的MAC地址對外服務		 網路冗餘
負載均衡		 不需要
6 balance-alb 自適應性負載均衡模式，通過ARP協商實現接收和傳送負載均衡 網路冗餘
負載均衡		 不需要

二、網絡卡配置

叢集存在兩張雙口萬兆網絡卡，分別使用兩張萬兆網絡卡其中一個口配置bond，實現網路聚合效果

1、CentOS


 萬兆網絡卡01 萬兆網絡卡02
網絡卡名稱 enp2s0f0 enp130s0f0
bond配置 bond0 bond0

以下示例，將網絡卡enp2s0f0和網絡卡enp130s0f0聚合為bond0網絡卡，bond配置模式為bond6（mode=6）

注：如需更改bond模式，則更改mode為對應數值即可

1、備份現有網絡卡配置資訊

[root@node118 network-scripts]# cp ifcfg-enp2s0f0 backup-ifcfg-enp2s0f0 
[root@node118 network-scripts]# cp ifcfg-enp130s0f0 backup-ifcfg-enp130s0f0

2、新增以下網絡卡配置資訊，重啟網路服務即可

[root@node118 network-scripts]# cat ifcfg-enp2s0f0 
DEVICE=enp2s0f0
BOOTPROTO=none
ONBOOT=yes
NAME=enp2s0f0
TYPE=Ethernet
MASTER=bond0
SLAVE=yes
NM_CONTROLLED=no


[root@node118 network-scripts]# cat ifcfg-enp130s0f0 
DEVICE=enp130s0f0
BOOTPROTO=none
ONBOOT=yes
NAME=enp130s0f0
TYPE=Ethernet
MASTER=bond0
SLAVE=yes
NM_CONTROLLED=no


[root@node118 network-scripts]# cat ifcfg-bond0 
DEVICE=bond0
NAME=bond0
TYPE=Ethernet
NM_CONTROLLED=no
USERCTL=no
ONBOOT=yes
BOOTPROTO=static
BONDING_OPTS='mode=6 miimon=100'
IPADDR=172.16.21.118
NETMASK=255.255.255.0
GATEWAY=172.16.21.205
DNS1=114.114.114.114
DNS2=8.8.8.8


[root@node118 network-scripts]# systemctl restart network

2、Ubuntu


 萬兆網絡卡01 萬兆網絡卡02
網絡卡名稱 ens160 ens192
bond配置 bond0 bond0

以下示例，將網絡卡ens160和網絡卡ens192聚合為bond0網絡卡，bond配置模式為bond6（mode=6）
注：如需更改bond模式，則更改mode為對應數值即可

1、安裝ifenslave軟體包

root@node180:~# apt-cache search ifenslave
ifenslave - configure network interfaces for parallel routing (bonding)

root@node180:~# apt-get install ifenslave

2、備份現有網絡卡配置

root@node180:/etc/network# cp interfaces interfaces.bak

3、新增以下網絡卡配置檔案，重啟網路服務即可

root@node180:~# cat /etc/network/interfaces
source /etc/network/interfaces.d/*

auto lo
iface lo inet loopback

auto ens160
iface ens160 inet manual
bond-master bond0

auto ens192
iface ens192 inet manual
bond-master bond0

auto bond0
iface bond0 inet static
address 172.16.21.180
netmask 255.255.255.0
network 172.16.21.0
broadcast 172.16.21.255
gateway 172.16.21.205
dns-nameservers 114.114.114.114 8.8.8.8

bond-slaves none
bond-miimon 100
bond-mode 6

root@node180:~# /etc/init.d/networking restart

三、交換機配置

以bond4模式舉例，除了網絡卡配置資訊修改之外，同時需要修改交換機配置，示例為華為交換機（S6720-54C-EI-48S-AC）

1、配置說明

  • 筆記本通過Console線連線至交換機COM口，通過xshell連線至除錯會話
    注：
    1、可通過裝置管理器檢視COM埠號
    2、傳輸協議為SERIAL，波特率為9600，其他引數值為預設即可
    3、華為交換機預設使用者密碼為admin/[email protected]
  • 執行system-view命令進入乙太網埠檢視
<HUAWEI>system-view 
Enter system view, return user view with Ctrl+Z.
[HUAWEI]
  • 執行interface Eth-Trunk {埠組ID}命令進入鏈路聚合埠，執行mode lacp命令將埠組設定模式為LACP
[HUAWEI]interface Eth-Trunk 10
[HUAWEI-Eth-Trunk10]mode lacp 
[HUAWEI-Eth-Trunk10]display this
#
interface Eth-Trunk10
 mode lacp
#
return
[HUAWEI-Eth-Trunk10]quit
  • 執行interface XGigabitEthernet 0/0/{交換機埠號}進入交換機埠，執行eth-trunk {埠組ID}將當前交換機埠加入埠組
    注：如需取消設定，則執行undo eth-trunk即可
[HUAWEI]interface XGigabitEthernet 0/0/42
[HUAWEI-XGigabitEthernet0/0/42]eth-trunk 10
[HUAWEI-XGigabitEthernet0/0/42]display this
#
interface XGigabitEthernet0/0/42
 eth-trunk 10
#
return
  • 執行display eth-trunk檢視當前埠組配置
    注：需要把對應節點網絡卡配置修改為bond4，此時檢視對應埠組埠狀態為Selected 
[HUAWEI]display eth-trunk
Eth-Trunk80's state information is:
Local:
LAG ID: 80                  WorkingMode: LACP                                 
Preempt Delay: Disabled     Hash arithmetic: According to SIP-XOR-DIP         
System Priority: 32768      System ID: 1856-4421-3090                         
Least Active-linknumber: 1  Max Active-linknumber: 8                         
.
Operate status: up          Number Of Up Port In Trunk: 4                     
--------------------------------------------------------------------------------
ActorPortName          Status   PortType PortPri PortNo PortKey PortState Weight
XGigabitEthernet0/0/7  Selected 10GE     32768   1      20545   10111100  1     
XGigabitEthernet0/0/9  Selected 10GE     32768   2      20545   10111100  1     
XGigabitEthernet0/0/3  Selected 10GE     32768   3      20545   10111100  1     
XGigabitEthernet0/0/8  Selected 10GE     32768   4      20545   10111100  1     

Partner:
--------------------------------------------------------------------------------
ActorPortName          SysPri   SystemID        PortPri PortNo PortKey PortState
XGigabitEthernet0/0/7  65535    6891-d066-f634  255     1      15      10111100
XGigabitEthernet0/0/9  65535    6891-d066-f634  255     2      15      10111100
XGigabitEthernet0/0/3  65535    6891-d066-f634  255     3      15      10111100
XGigabitEthernet0/0/8  65535    6891-d066-f634  255     4      15      10111100

Eth-Trunk81's state information is:
Local:
LAG ID: 81                  WorkingMode: LACP                                 
Preempt Delay: Disabled     Hash arithmetic: According to SIP-XOR-DIP         
System Priority: 32768      System ID: 1856-4421-3090                         
Least Active-linknumber: 1  Max Active-linknumber: 8                          
Operate status: up          Number Of Up Port In Trunk: 2                     
--------------------------------------------------------------------------------
ActorPortName          Status   PortType PortPri PortNo PortKey PortState Weight
XGigabitEthernet0/0/5  Selected 10GE     32768   5      20801   10111100  1     
XGigabitEthernet0/0/1  Selected 10GE     32768   6      20801   10111100  1     

Partner:
--------------------------------------------------------------------------------
ActorPortName          SysPri   SystemID        PortPri PortNo PortKey PortState
XGigabitEthernet0/0/5  65535    6891-d067-426c  255     1      15      10111100
XGigabitEthernet0/0/1  65535    6891-d067-426c  255     2      15      10111100

四、相關說明

1、測試總結

1.1、分析說明

  • 1) bond0

a. 使用兩個網口輪詢傳送，提高發送能力，使用兩個服務端時，能夠達到理論上的頻寬的極限2G.但由於是輪詢傳送，會出現包亂序，導致重發。當傳送請求給兩個服務端時，從dstat來看流量，出口的頻寬已經達到極限

而iperf的結果看，每個服務端接收的流量只有8.7Gbit

抓包檢視有亂序和重發的現象，所以，應用不能使用到所有網口的頻寬。

b. 只有兩個節點時，傳送時輪詢傳送，效能的瓶頸在接收端。交換機在某一個時間段只往一個埠傳送包，這個時候傳送端兩個口總共只能傳送1G的流量。

  • 2) bond4

a. 兩個節點分別使用4個萬兆網口做bond4，由於所有slave介面MAC地址一樣，兩個節點對跑iperf時，只有1個萬兆網口工作，無法發揮4個萬兆網口的效能
注：如需發揮4個萬兆網口bond4效能，則需用4臺萬兆客戶端iperf壓測

[root@node85 ~]# ip ad
1: lo: <LOOPBACK,UP,LOWER_UP> mtu 65536 qdisc noqueue state UNKNOWN group default qlen 1000
    link/loopback 00:00:00:00:00:00 brd 00:00:00:00:00:00
    inet 127.0.0.1/8 scope host lo
       valid_lft forever preferred_lft forever
    inet6 ::1/128 scope host 
       valid_lft forever preferred_lft forever
4: enp24s0f0: <BROADCAST,MULTICAST,SLAVE,UP,LOWER_UP> mtu 1500 qdisc mq master bond0 state UP group default qlen 1000
    link/ether 68:91:d0:66:f6:34 brd ff:ff:ff:ff:ff:ff
5: enp24s0f1: <BROADCAST,MULTICAST,SLAVE,UP,LOWER_UP> mtu 1500 qdisc mq master bond0 state UP group default qlen 1000
    link/ether 68:91:d0:66:f6:34 brd ff:ff:ff:ff:ff:ff
6: enp25s0f0: <BROADCAST,MULTICAST,SLAVE,UP,LOWER_UP> mtu 1500 qdisc mq master bond0 state UP group default qlen 1000
    link/ether 68:91:d0:66:f6:34 brd ff:ff:ff:ff:ff:ff
7: enp25s0f1: <BROADCAST,MULTICAST,SLAVE,UP,LOWER_UP> mtu 1500 qdisc mq master bond0 state UP group default qlen 1000
    link/ether 68:91:d0:66:f6:34 brd ff:ff:ff:ff:ff:ff
8: enp59s0f0: <BROADCAST,MULTICAST,SLAVE,UP,LOWER_UP> mtu 1500 qdisc mq master bond1 state UP group default qlen 1000
    link/ether 68:91:d0:67:42:6c brd ff:ff:ff:ff:ff:ff
9: enp59s0f1: <BROADCAST,MULTICAST,SLAVE,UP,LOWER_UP> mtu 1500 qdisc mq master bond1 state UP group default qlen 1000
    link/ether 68:91:d0:67:42:6c brd ff:ff:ff:ff:ff:ff
10: bond0: <BROADCAST,MULTICAST,MASTER,UP,LOWER_UP> mtu 1500 qdisc noqueue state UP group default qlen 1000
    link/ether 68:91:d0:66:f6:34 brd ff:ff:ff:ff:ff:ff
    inet 172.16.21.85/24 brd 172.16.21.255 scope global bond0
       valid_lft forever preferred_lft forever
    inet6 fe80::6a91:d0ff:fe66:f634/64 scope link 
       valid_lft forever preferred_lft forever
11: bond1: <BROADCAST,MULTICAST,MASTER,UP,LOWER_UP> mtu 1500 qdisc noqueue state UP group default qlen 1000
    link/ether 68:91:d0:67:42:6c brd ff:ff:ff:ff:ff:ff
    inet 172.16.33.85/24 brd 172.16.33.255 scope global bond1
       valid_lft forever preferred_lft forever
    inet6 fe80::6a91:d0ff:fe67:426c/64 scope link 
       valid_lft forever preferred_lft forever
  • 3) bond5

a. bond5通過MAC地址來均衡出口的頻寬。但在傳送arp報文時，只發送一個埠的地址。所以入口的流量只走一個口。當兩個節點時，接收端的頻寬上限只有1G，客戶端理論上限也只有1G,兩個節點作為客戶端相似.

b. 兩個節點作為服務端時，bond5可以利用到兩個埠的頻寬，bond5通過演算法來均衡出口的頻寬，所以出口頻寬能達到2G.

  • 4) bond6

a. bond6是在bond0的基礎上，增加接收的負載均衡。bond6可以截獲arp的報文，通過修改MAC地址，使不同客戶端的可以跟不同埠進行通訊。當只有兩個節點時，客戶端收到arp地址只有一個，服務端接收的流量最大也只有1G.

b.使用2個客戶端或者2個服務端測試，客戶端和服務端都能利用到兩個接收發送的埠，所以頻寬都能達到2G.

1.2、分析總結

從上面的測試來看，bond0由於本身的機制，容易出現重發影響效能的缺點，並且，bond0本身沒有定義入口流量的均衡，效能的瓶頸在入口流量；bond5同理，入口的頻寬限制了網路的效能；
bond6在bond5的基礎上增加接收能力，在三節點以上規模的節點，出入口的流量都能達到2G的頻寬上限，但實際使用中發現網路流量並不穩定；
綜上所述，在條件允許情況下，要想實現網路冗餘和網路聚合效果，推薦使用bond4配置

注：bond0、bond4需要交換機支援（交換機埠繫結），bond5、bond6無需交換機支援（軟體配置即可）

相關推薦

【硬體相關】網絡卡bond配置

一、前言 參考文件： Redhat：7.7. Using Channel Bonding 本文主要闡述如何配置網絡卡bond，以及不同bond模式區別差異

Linux多網絡卡bond模式VS交換機鏈路聚合

專注網路運維，只發實用乾貨 您的關注是我更新的原動力 公眾號與博主同人，感謝支援。

LINUX網絡卡BOND的七種模式詳解

像Samba、Nfs這種共享檔案系統，網路的吞吐量非常大，就造成網絡卡的壓力很大，網絡卡bond是通過把多個物理網絡卡繫結為一個邏輯網絡卡，實現本地網絡卡的冗餘，頻寬擴容和負載均衡，具體的功能取決於採用的哪種模式

【工具相關】LSI MegaRAID卡配置管理

一、前言 官方手冊說明：StorCLI Reference Manual 華為伺服器操作維護說明：華為V2&V3伺服器 RAID控制卡 使用者指南 49

【硬體相關】PCIe元件配置說明

一、PCIe介紹 1、前言 1.1、PCIe概述 PCI Express（peripheral component interconnect express）是INTEL提出的新一代的匯流排介面，PCI Express採用了目前業內流行的點對點序列連線，比起PCI以及更早期的計算機匯

Linux 網絡卡 Bonding 配置

一、bonding技術  bonding(繫結)是一種將n個物理網絡卡在系統內部抽象(繫結)成一個邏輯網絡卡的技術，能夠提升網路吞吐量、實現網路冗餘、負載等功能，有很多優勢。

win10系統怎麼設定網絡卡優先順序【圖文】

網路連線分為有線和無線連線，很多經常使用無線網路的win10系統使用者們，希望在插入網線後能優先使用有線網路的話，要怎麼操作呢，其實我們可以通過設定網絡卡優先順序來實現，下面給大家分享一下具體的操作步驟。

Win10專業版怎麼檢視網絡卡屬性和萬能網絡卡【圖文】

越來越多的朋友開始使用win10系統，由於剛剛接觸新的系統，想深入瞭解一下網絡卡的屬性資訊。想知道這網絡卡是否是千兆網絡卡以及它的具體型號，但是Win10專業版該如何檢視網絡卡屬性和萬能網絡卡？系統城小編今天就

【Linux】安裝VMware之後不顯示虛擬網絡卡或者Connection timed out(連線不上)

提示：此種錯誤很大可能會在寫在後重灌之後出現 在安裝號VMWare之後，我們會使用一些視覺化的軟體來進行一些操作，但是在使用視覺化軟體進行操作的時候可能就會出現這種連線不上的問題。

【Shell實戰案例】輸入網絡卡的名字，來輸出網絡卡的IP

輸入網絡卡的名字，來輸出網絡卡的IP 一、問題： 輸入的字元不符合網絡卡名字規範，–>?名字符合規範，但是根本沒有這個網絡卡，–>?輸入的網絡卡有多個IP地址，–>?

【Linux伺服器雙IP配置】如何實現不同IP的雙網絡卡同時上網？

一、環境和知識預備 　　我遇到問題的生產機器是CentOS release 6.8系統，不過這並不影響問題的解決，本質上都是一樣的。

【學無止境】WIFI 6 AX200 無線網絡卡 連線 華為Q2S路由器

問題 換了新電腦，買了一個 WIFI 6 AX200 無線網絡卡。家中有兩個路由，一個是電信 \'天翼寬頻\' 入網贈送的路由器，一個是華為 \'Q2S\' 路由器。

【網路基礎】socket client 使用特定網絡卡

目錄前言正文 前言 李柱明部落格：https://i.cnblogs.com/posts/edit-done;postId=15487160 正文

linux下一個網絡卡配置多個ip【虛擬ip】

來自：https://www.cnblogs.com/wanghuaijun/p/6155832.html Linux下配置網絡卡ip別名何謂ip別名？用windows的話說，就是為一個網絡卡配置多個ip。什麼場合增加ip別名能派上用場？佈網需要、多ip訪問測試、特定軟體

【轉】Win10雙網絡卡優先順序設定

原文：https://www.cnblogs.com/idorax/p/6999482.html 宣告：本文與個人的技術興趣毫無關係，只是因為有迫不得已的實際需求，才不得不想辦法。所謂\"艱難困苦，玉汝於成\"，大概就是這個道理。（PS：標題我沒有寫錯

【操作教程】EasyCVR智慧邊緣閘道器如何配置雙網絡卡網路？

EasyCVR智慧邊緣閘道器是我們推出的一款軟硬一體的智慧終端裝置，可提供多協議的裝置接入、採集、AI智慧檢測與識別、處理、分發等服務。通過對視訊監控場景中的人、車、物進行抓拍、檢測與識別，對異常情況進行智慧提

dpdk 網絡卡硬體配置 + max_rx_queues + max_tx_queues

ixgbe_dev_info_get(struct rte_eth_dev *dev, struct rte_eth_dev_info *dev_info) { struct rte_pci_device *pci_dev = RTE_ETH_DEV_TO_PCI(dev);

Linux基礎之虛擬機器建立、網絡卡啟用、切換YUM源及使用者級別等相關內容-91

安裝方式 想學Linux，如何安裝才是正確的方式呢. pc可以選擇 -純系統 Linux或者windows

vmware虛擬機器環境下linux網絡卡做bond配置

vmware虛擬機器環境下linux網絡卡做bond配置vmware workstation 12 常規真機環境下，給網絡卡做bond配置如下（假設是bond0）:

linux 網絡卡多bond實踐

環境 系統版本 [root@host1 ~]# cat /etc/redhat-release CentOS Linux release 7.7.1908 (Core) 四個網絡卡eth0與eth2是nat模式，繫結到bond0；eth1與eth3是僅主機模式，繫結到bond1