LVS-DR叢集部署
資料包流向分析:
(1)客戶端傳送請求到Director Server (負載均衡器) ,請求的資料報文(源IP是CIP,目標IP是VIP)到達核心空間。
(2) Director Server和Real Server在同一個網路中,資料通過二層資料鏈路層來傳輸
(3)核心空間判斷資料包的目標IP是本機VIP,此時IPVS (IP虛擬伺服器)比對資料包請求的服務是否是叢集服務,是叢集服務就重新封裝資料包。修改源MAC地址為Director Server的MAC地址,修改目標MAC地址為Real Server的MAC地址,源IP地址與目標IP地址沒有改變,然後將資料包傳送給Real Server.
(4)到達Real Server的請求報文的MAC地址是自身的MAC地址,就接收此報文。資料包重新封裝報文(源IP地址為VIP, 目標IP為CIP) ,將響應報文通過10介面傳送給物理網絡卡然後向外發出。
(5) Real Server直接將響應報文傳送到客戶端。
DR模式的特點:
(1) Director Server和Real Server必須在同一個物理網路中
(2) Real Server可以使用私有地址,也可以使用公網地址。如果使用公網地址,可以通過網際網路對RIP進行直接訪問。
(3) Director Server作為群集的訪問入口,但不作為閘道器使用
(4)所有的請求報文經由Director Server,但回覆響應報文不能經過Director server.
(5) Real Server的閘道器不允許指向Director Server IP,即Real Server傳送的資料包不允許經過Director Server。
(6) Real Server上的lo介面配置VIP的IP地址
LVS-DR中的ARP問題
問題一
在LVS-DR負載均衡叢集中，負載均衡器與節點伺服器都要配置相同的VIP地址，在區域網中具有相同的IP地址。勢必會造成各伺服器ARP通訊的紊亂
- 當ARP廣播發送到LVS-DR叢集時，因為負載均衡器和節點伺服器都是連線到相同的網路上，它們都會接收到ARP廣播
- 只有前端的負載均衡器進行響應，其他節點伺服器不應該響應ARP廣播
解決方法：
對節點伺服器進行處理，使其不響應針對VIP的ARP請求
- 使用虛介面lo:0承載VIP地址
- 設定核心引數arp_ ignore=1: 系統只響應目的IP為本地IP的ARP請求
問題二
RealServer返回報文（源IP是VIP）經路由器轉發，重新封裝報文時，需要先獲取路由器的MAC地址，傳送ARP請求時，Linux預設使用IP包的源IP地址（即VIP）作為ARP請求包中的源IP地址，而不使用傳送介面的IP地址，路由器收到ARP請求後，將更新ARP表項，原有的VIP對應Director的MAC地址會被更新為VIP對應RealServer的MAC地址。
路由器根據ARP表項，會將新來的請求報文轉發給RealServer，導致Director的VIP失效
解決方法：
對節點伺服器進行處理，設定核心引數arp_announce=2：系統不使用IP包的源地址來設定ARP請求的源地址，而選擇傳送介面的IP地址
--------DR模式 LVS負載均衡叢集部署--------
DR 伺服器：192.168.80.10
Web 伺服器1：192.168.80.20
Web 伺服器2：192.168.80.30
NFS共享伺服器：192.168.80.18
vip：192.168.80.188
客戶端：192.168.80.200
1、配置負載排程器（192.168.80.10）
systemctl stop firewalld.service setenforce 0 modprobe ip_vs cat /proc/net/ip_vs yum -y install ipvsadm
（1）配置虛擬 IP 地址（VIP：192.168.80.188）
cd /etc/sysconfig/network-scripts/ cp ifcfg-ens33 ifcfg-ens33:0 #若隧道模式，複製為ifcfg-tunl0 vim ifcfg-ens33:0 DEVICE=ens33:0 ONBOOT=yes IPADDR=192.168.80.188 NETMASK=255.255.255.255 ifup ens33:0 ifconfig ens33:0 route add -host 192.168.80.188 dev ens33:0
（2）調整 proc 響應引數
由於 LVS 負載排程器和各節點需要共用 VIP 地址，應該關閉Linux 核心的重定向引數響應。 vim /etc/sysctl.conf net.ipv4.ip_forward = 0 net.ipv4.conf.all.send_redirects = 0 net.ipv4.conf.default.send_redirects = 0 net.ipv4.conf.ens33.send_redirects = 0 sysctl -p
（3）配置負載分配策略
ipvsadm-save > /etc/sysconfig/ipvsadm systemctl start ipvsadm ipvsadm -C ipvsadm -A -t 192.168.80.188:80 -s rr ipvsadm -a -t 192.168.80.188:80 -r 192.168.80.20:80 -g #若隧道模式，-g替換為-i ipvsadm -a -t 192.168.80.188:80 -r 192.168.80.30:80 -g ipvsadm ipvsadm -ln #檢視節點狀態，Route代表 DR模式
2、部署共享儲存（NFS伺服器：192.168.80.18）
systemctl stop firewalld.service systemctl disable firewalld.service setenforce 0 yum install nfs-utils rpcbind -y systemctl start nfs.service systemctl start rpcbind.service systemctl enable nfs.service systemctl enable rpcbind.service mkdir /opt/benet1 /opt/benet2 chmod 777 /opt/benet1 /opt/benet2 echo 'this is benet1 web!' > /opt/benet1/index.html echo 'this is benet2 web!' > /opt/benet2/index.html vim /etc/exports /opt/benet1 192.168.229.0/24(rw,sync) /opt/benet2 192.168.229.0/24(rw,sync) --釋出共享--- exportfs -rv
3、配置節點伺服器（192.168.80.20、192.168.80.30）
systemctl stop firewalld.service setenforce 0
（1）配置虛擬 IP 地址（VIP：192.168.80.188）
#此地址僅用作傳送Web響應資料包的源地址，並不需要監聽客戶機的訪問請求(改由排程器監聽並分發)。因此使用虛介面lo:0來承載VIP地址，併為本機新增一條路由記錄，將訪問VIP的資料限制在本地，以避免通訊紊亂。
cd /etc/sysconfig/network-scripts/ cp ifcfg-ens33 ifcfg-lo:0 vim ifcfg-lo:0 DEVICE=lo:0 ONBOOT=yes IPADDR=192.168.80.188 #和VIP保持一致 NETMASK=255.255.255.255 #注意：子網掩碼必須全為 1 ifup lo:0 ifconfig lo:0 route add -host 192.168.80.188 dev lo:0 #新增VIP本地訪問路由，將訪問VIP的資料限制在本地，以避免通訊紊亂 vim /etc/rc.local /sbin/route add -host 192.168.80.188 dev lo:0<br><br>chmod +x /etc/rc.local
（2）調整核心的ARP響應引數以阻止更新VIP的MAC地址，避免發生衝突
vim /etc/sysctl.conf ...... net.ipv4.conf.lo.arp_ignore = 1 #系統只響應目的IP為本地IP的ARP請求 net.ipv4.conf.lo.arp_announce = 2 #系統不使用IP包的源地址來設定ARP請求的源地址，而選擇傳送介面的IP地址 net.ipv4.conf.all.arp_ignore = 1 net.ipv4.conf.all.arp_announce = 2 sysctl -p 或者臨時新增 echo "1" >/proc/sys/net/ipv4/conf/lo/arp_ignore echo "2" >/proc/sys/net/ipv4/conf/lo/arp_announce echo "1" >/proc/sys/net/ipv4/conf/all/arp_ignore echo "2" >/proc/sys/net/ipv4/conf/all/arp_announce sysctl -p yum -y install nfs-utils rpcbind httpd systemctl start rpcbind systemctl start httpd
（3）共享掛載目錄
yum -y install nfs-utils rpcbind httpd systemctl start rpcbind systemctl start httpd --192.168.80.20--- mount.nfs 192.168.80.18:/opt/benet1 /var/www/html --192.168.80.30--- mount.nfs 192.168.80.18:/opt/benet2 /var/www/html
4、測試 LVS 群集
在客戶端使用瀏覽器訪問 http://192.168.80.188/