LVS原理詳解及部署之五：LVS+keepalived實現負載均衡&高可用
2014-01-15 00:22:13
標籤：LVS LVS調度算法 keepalived原理介紹 LVS+keepalived部署
原創作品，允許轉載，轉載時請務必以超鏈接形式標明文章 原始出處 、作者信息和本聲明。否則將追究法律責任。http://atong.blog.51cto.com/2393905/1351709
-------------------LVS專題------------------------
LVS原理詳解及部署之二：LVS原理詳解（3種工作方式8種調度算法）
LVS原理詳解及部署之五：LVS+keepalived實現負載均衡&高可用
-------------------------------------------------
本文我們主要講解的是LVS通過keepalived來實現負載均衡和高可用，而不是我們第三篇文章介紹的通過手動的方式來進行配置。通過腳本的方式來顯示RS節點的健康檢查和LVS的故障切換。此文會通過一個實例來講解，本文目錄如下：
一、實驗環境需求&準備
二、配置keepalived實現負載均衡&高可用
一、實驗環境需求&準備
我們這次實驗要完成的一個架構如下圖所示，我們通過LVS-DR-MASTER,LVS-DR-BACKUP作爲LVS負載均衡調度器，並且兩者之間通過keepalived來兩者之間的HA。keepalived本身就是爲了LVS爲開發的，所以說我們通過keepalived來進行LVS的配置就顯得十分的方便。而且keepalived是直接操作ip_vs不用通過ipvsadm，所以更加方便。
1）實驗架構圖&需求表：
| 角色 | IP地址 | 備註 |
| 主LVS調度器（MASTER) | 192.168.41.181 | 使用keepalived配置 |
| 備LVS調度器（BACKUP) | 192.168.41.251 | |
| HTTP服務器（RS1) | 192.168.41.31 | apache服務器（一般生產環境需要外網IP地址，這裏用內網IP地址替代） |
| HTTP服務器（RS2) | 192.168.41.33 | |
| 虛擬IP地址（VIP) | 192.168.41.249 | 虛擬IP地址 |
2）部署http服務器，驗證能正常訪問
這裏就不多費篇幅介紹了，就是要保證http能正常訪問。
二、配置keepalived實現負載均衡&高可用
1）安裝keepalived軟件
wget http://www.keepalived.org/software/keepalived-1.2.8.tar.gz
tar -zxf keepalived-1.2.8.tar.gz
cd keepalived-1.2.8
./configure --prefix=/usr/local/keepalived
make
make install
#配置keepalived的自啓動&拷貝keepalived的執行程序
cp /usr/local/keepalived/sbin/keepalived /usr/sbin/
cp /usr/local/keepalived/sbin/keepalived /usr/sbin/
cp /usr/local/keepalived/etc/sysconfig/keepalived /etc/sysconfig/
cp /usr/local/keepalived/etc/rc.d/init.d/keepalived /etc/init.d/
#開啓內核的轉發功能
vi /etc/sysctl net.ipv4.ip_forword = 1
2）配置LVS-DR-MASK的keepalived.conf配置文件
! Configuration File for keepalived global_defs { notification_email { [email protected] #設置報警郵箱，一般不再這做，而是用其他方式報警。 } notification_email_from keepalived@localhost #設定發送郵件地址 smtp_server 127.0.0.1 #設定發送郵件服務器 smtp_connect_timeout 30 #設定SMTP連接超時時間 router_id LVS_DEVEL #查閱說明文檔得知route_id配置是爲了標識當前節點，我將其設置爲NodeA。當然兩個節點的此項設置可相同，也可不相同。 } vrrp_instance VI_1 { #定義虛擬路由實例，不同實例ID不同。 state MASTER #定義服務器在keepalived中的角色主服務器 interface eth0 #定義進行檢測的端口eth0 virtual_router_id 51 #定義虛擬路由ID，同一個實例的主從一樣。 priority 100 #定義在虛擬路由器組的權限，越大越高 advert_int 1 #定義檢測時間間隔 authentication { #定義認證方式密碼，主從必須一樣 auth_type PASS auth_pass 1111 } virtual_ipaddress { #指定虛擬IP地址 192.168.41.249 } } virtual_server 192.168.41.249 80 { #定義虛擬服務，需指定IP地址和端口，空格隔開。 delay_loop 6 #定義RS運行情況監測時間間隔 lb_algo rr #定義負載調度算法 lb_kind DR #定義LVS的工作模式 nat_mask 255.255.255.0 #定義虛擬服務的mask persistence_timeout 50 #定義會話保持時間，S爲單位 protocol TCP #指定轉發協議 real_server 192.168.41.31 80 { #定義真實服務器IP地址和端口 weight 1 #定義RS的權重 TCP_CHECK{ #RS server健康檢查部分 connect_timeout 10 #定義超出10s連接超時 nb_get_retry 3 #定義重試次數 delay_before_retry 3 #定義重試時間間隔 connect_port 80 #定義健康檢查端口 } real_server 192.168.41.33 80 { weight 1 TCP_CHECK{ connect_timeout 10 nb_get_retry 3 delay_before_retry 3 connect_port 80 } } |
3）配置LVS-DR-BACKUP的keepalived.conf配置文件
! Configuration File for keepalived global_defs { notification_email { [email protected] #設置報警郵箱，一般不再這做，而是用其他方式報警。 } notification_email_from keepalived@localhost #設定發送郵件地址 smtp_server 127.0.0.1 #設定發送郵件服務器 smtp_connect_timeout 30 #設定SMTP連接超時時間 router_id LVS_DEVEL #負載均衡器標示，在局域網內是唯一的 } vrrp_instance VI_1 { #定義虛擬路由實例，不同實例ID不同。 state BACKUP #定義服務器在keepalived中的角色 interface eth0 #定義進行檢測的端口eth0 virtual_router_id 51 #定義虛擬路由ID，同一個實例的主從一樣。 priority 50 #定義在虛擬路由器組的權限，越大越高 advert_int 1 #定義檢測時間間隔 authentication { #定義認證方式密碼，主從必須一樣 auth_type PASS auth_pass 1111 } virtual_ipaddress { #指定虛擬IP地址 192.168.41.249 } } virtual_server 192.168.41.249 80 { #定義虛擬服務，需指定IP地址和端口，空格隔開。 delay_loop 6 #定義RS運行情況監測時間間隔 lb_algo rr #定義負載調度算法 lb_kind DR #定義LVS的工作模式 nat_mask 255.255.255.0 #定義虛擬服務的mask persistence_timeout 50 #定義會話保持時間，S爲單位 protocol TCP #指定轉發協議 real_server 192.168.41.31 80 { #定義真實服務器IP地址和端口 weight 1 #定義RS的權重 TCP_CHECK{ #RS server健康檢查部分 connect_timeout 10 #定義超出10s連接超時 nb_get_retry 3 #定義重試次數 delay_before_retry 3 #定義重試時間間隔 connect_port 80 #定義健康檢查端口 } real_server 192.168.41.33 80 { weight 1 TCP_CHECK{ connect_timeout 10 nb_get_retry 3 delay_before_retry 3 connect_port 80 } |
說明：這裏主LVS-DR-MASTER和LVS-DR-BACKUP之間的配置的差別就只有紅色部分：HA的角色（MASTER,BACKUP)和優先級不同，還有router_id。
4）客戶端配置LVS參數
客戶端需要做的工作就是綁定我們的VIP在lo口，並且進行ARP抑制，之前的文章已經提過此方法咯。現在我們就換成將配置寫成腳本來執行。
腳本內容：
[root@RS2 ~]# cat lvs-client.sh #!/bin/bask # . /etc/rc.d/init.d/functions VIP=( 192.168.41.249 ) function start(){ for ((i=0;i<`echo ${#VIP[*]}`;i++)) do echo ${i} ${VIP[$i]} ifconfig lo:${i} ${VIP[$i]} netmask 255.255.255.255 up route add -host ${VIP[$i]} dev lo done echo "1">/proc/sys/net/ipv4/conf/lo/arp_ignore echo "2">/proc/sys/net/ipv4/conf/lo/arp_announce echo "1">/proc/sys/net/ipv4/conf/all/arp_announce echo "2">/proc/sys/net/ipv4/conf/all/arp_announce } function stop(){ for ((i=0;i<${#VIP[*]};i++)) do echo ${i} ${VIP[$i]} ifconfig lo:${i} ${VIP[$i]} netmask 255.255.255.255 up route del -host ${VIP[$i]} dev lo:${i} done } case "$1" in start) start exit ;; stop) stop exit ;; *) echo "You must use $0:stop|start" ;; esac |
5）測試實驗結果
如果測試部成功可以按照三角的排查原理來進行排查，顯示client到RS端是否能通訊，LB到RS能否通訊，client到LB是否能通訊，client到VIP是否能夠通訊。並且查看LVS的運行狀態。一定要確保keepalived.conf這個配置文件是正確的。
本文出自 “從頭開始” 博客，請務必保留此出處http://atong.blog.51cto.com/2393905/1351709