LVS+DR模式+keepalived

原創 wx5d3a7feeb53cc 2019-11-30 14:06

LVS+DR模式+keepalived

上一篇博客我們說了三種模式，NAT,TUN,DR這次是DR+Keepalived

先了解什麼是Keepalived

keepalived採用VRRP熱備份協議實現Linux服務器的多機熱備功能
VRRP,虛擬路由冗雜協議，是針對路由器的一種備份解決方案

keepalived可以實現多機熱備，每個熱備組可有多臺服務器，最常用的就是雙機熱備
雙擊熱備的故障切換是由虛擬IP地址的飄逸來實現，適用於各種應用服務器

LVS-DR的ARP問題

在LVS-DR的負載均衡羣集中，負載均衡器與節點服務器都要配置相同的VIP地址
在局域網中具有相同的IP地址，勢必會造成服務器APR通信的紊亂
當一個ARP廣播發送到LVS-DR集羣時，因爲負載均衡器和節點服務器都是連接到相同的網絡上，它們都會接收到ARP廣播
此時只有前端的負載均衡器進行響應。其他節點服務器不應該響應ARP廣播

LVS-DR的ARP問題解決方案

對節點服務器進行處理，使其不響應針對VIP的ARP請求
使用虛接口lo:0承載VIP地址
設置內核參數arp_ignore=1:系統只響應目的IP爲本地IP的ARP請求

下面我們來做實驗

實驗規劃

我們需要五臺虛擬機
DR1 主服務器 192.168.100.201
DR4 備份服務器 192.168.100.202
web 5 192.168.100.221
web 7 192.168.100.222
vip 192.168.100.10
clent 192.168.100.50

把需要的LVS模塊，keepalived,http分別裝好

#1，4
[root@localhost ~]# yum install ipvsadm keepalived -y
#5，7
[root@localhost ~]# yum install httpd -y

第一臺主負載均衡調度器選擇僅主機模式，配置網卡

LVS+DR模式+keepalived

[root@localhost ~]# vim /etc/sysconfig/network-scripts/ifcfg-ens33 
BOOTPROTO=static #靜態
DEFROUTE=yes
IPV4_FAILURE_FATAL=no
IPV6INIT=yes
IPV6_AUTOCONF=yes

IPV6_DEFROUTE=yes
IPV6_FAILURE_FATAL=no
IPV6_ADDR_GEN_MODE=stable-privacy
NAME=ens33
UUID=849aa04e-1874-490f-8cb0-b2fde4b9a6f8
DEVICE=ens33
ONBOOT=yes
IPADDR=192.168.100.201 #地址
NETMASK=255.255.255.0 #子網 掩碼
GATEWAY=192.168.100.1 #網關
[root@localhost ~]# systemctl restart network #ch重啓網絡服務
[root@localhost ~]# ifconfig #查看固定地址是否生效

第二臺4備份負載均衡調度器，綁定僅主機模式，配置網卡

LVS+DR模式+keepalived

[root@localhost ~]# vim /etc/sysconfig/network-scripts/ifcfg-ens33 

BOOTPROTO=static
DEFROUTE=yes
IPV4_FAILURE_FATAL=no
IPV6INIT=yes
IPV6_AUTOCONF=yes
IPV6_DEFROUTE=yes
IPV6_FAILURE_FATAL=no
IPV6_ADDR_GEN_MODE=stable-privacy
NAME=ens33
UUID=c3f0a196-6819-4702-9b54-7cad18402591
DEVICE=ens33
ONBOOT=yes
IPADDR=192.168.100.202
NETMASK=255.255.255.0
GATEWAY=192.168.100.1
[root@localhost ~]# systemctl restart network
[root@localhost ~]# ifconfig

第三臺5web服務器綁定僅主機模式，配置網卡

LVS+DR模式+keepalived

[root@localhost ~]# vim /etc/sysconfig/network-scripts/ifcfg-ens33 

BOOTPROTO=static
DEFROUTE=yes
IPV4_FAILURE_FATAL=no
IPV6INIT=yes
IPV6_AUTOCONF=yes
IPV6_DEFROUTE=yes
IPV6_FAILURE_FATAL=no
IPV6_ADDR_GEN_MODE=stable-privacy
NAME=ens33
UUID=a6cf69fe-eb42-4a99-9239-0da4cdeae0c7
DEVICE=ens33
ONBOOT=yes
IPADDR=192.168.100.221
NETMASK=255.255.255.0
GATEWAY=192.168.100.1
[root@localhost ~]# systemctl restart network
[root@localhost ~]# ifconfig

第四臺7web服務器綁定僅主機模式，配置網卡

LVS+DR模式+keepalived

[root@localhost ~]# vim /etc/sysconfig/network-scripts/ifcfg-ens33 
BOOTPROTO=static
DEFROUTE=yes
IPV4_FAILURE_FATAL=no
IPV6INIT=yes
IPV6_AUTOCONF=yes
IPV6_DEFROUTE=yes
IPV6_FAILURE_FATAL=no
IPV6_ADDR_GEN_MODE=stable-privacy
NAME=ens33
UUID=447e510f-fea3-4b6c-8f47-d0c6319ead28
DEVICE=ens33
ONBOOT=yes
IPADDR=192.168.100.222
NETMASK=255.255.255.0
GATEWAY=192.168.100.1
[root@localhost ~]# systemctl restart network
[root@localhost ~]# ifconfig

配置第一臺1主服務器

[root@localhost ~]# vim /etc/sysctl.conf
net.ipv4.ip_forward=1
#proc響應關閉重定向功能
net.ipv4.conf.all.send_redirects = 0
net.ipv4.conf.default.send_redirects = 0
net.ipv4.conf.ens33.send_redirects = 0
[root@localhost ~]# sysctl -p #生效
net.ipv4.ip_forward = 1
net.ipv4.conf.all.send_redirects = 0
net.ipv4.conf.default.send_redirects = 0
net.ipv4.conf.ens33.send_redirects = 0

創建虛擬網卡

[root@localhost ~]# cd /etc/sysconfig/network-scripts/

[root@localhost network-scripts]# cp -p ifcfg-ens33 ifcfg-ens33:0
[root@localhost network-scripts]# vim ifcfg-ens33:0
100dd

DEVICE=ens33:0
ONBOOT=yes
IPADDR=192.168.100.10
NETMASK=255.255.255.0

[root@localhost network-scripts]# ifup ens33:0 #開啓網卡，這個網關是用來做虛擬IP的，相當於一給訪問入口

[root@localhost network-scripts]# ifconfig
[root@localhost network-scripts]# cd /etc/init.d/
[root@localhost init.d]# vim dr.sh
#!/bin/bash
GW=192.168.100.1
VIP=192.168.100.10
RIP1=192.168.100.221
RIP2=192.168.100.222
case "$1" in
start)
        /sbin/ipvsadm --save > /etc/sysconfig/ipvsadm
        systemctl start ipvsadm
        /sbin/ifconfig ens33:0 $VIP broadcast $VIP netmask 255.255.255.255 broadcast $VIP up
        /sbin/route add -host $VIP dev ens33:0
        /sbin/ipvsadm -A -t $VIP:80 -s rr
        /sbin/ipvsadm -a -t $VIP:80 -r $RIP1:80 -g
        /sbin/ipvsadm -a -t $VIP:80 -r $RIP2:80 -g
        echo "ipvsadm starting --------------------[ok]"
        ;;
        stop)
        /sbin/ipvsadm -C
        systemctl stop ipvsadm
        ifconfig ens33:0 down
        route del $VIP
        echo "ipvsadm stoped---------------------[ok]"
        ;;
        status)
        if [ ! -e /var/lock/subsys/ipvsadm ];then
        echo "ipvsadm stoped---------------"
        exit 1
                else
                echo "ipvsamd Runing ---------[ok]"
        fi
        ;;
        *)
        echo "Usage: $0 {start|stop|status}"
    exit 1
        esac
        exit 0
   [root@localhost init.d]# service dr.sh start
ipvsadm starting --------------------[ok]
[root@localhost init.d]# systemctl status ipvsadm

配置第一臺5web服務器

[root@localhost ~]# systemctl start httpd.service 
[root@localhost ~]# systemctl stop firewalld.service 
[root@localhost ~]# setenforce 0
[root@localhost ~]# cd /var/www/html/
[root@localhost html]# echo "this is accp web" > index.html
[root@localhost html]# cd /etc/sysconfig/network-scripts/
[root@localhost network-scripts]# cp ifcfg-lo ifcfg-lo:0
[root@localhost network-scripts]# vim ifcfg-lo:0
DEVICE=lo:0
IPADDR=192.168.100.10
NETMASK=255.255.255.0
ONBOOT=yes

[root@localhost network-scripts]# cd /etc/init.d/
[root@localhost init.d]# vim web.sh
#寫一個腳本讓它能響應調度服務器的控制，服務的啓動和關閉
#!/bin/bash
VIP=192.168.100.10
        case "$1" in
        start)
                ifconfig lo:0 $VIP netmask 255.255.255.255 broadcast $VIP
                /sbin/route add -host $VIP dev lo:0
                echo "1" >/proc/sys/net/ipv4/conf/lo/arp_ignore
                echo "2" >/proc/sys/net/ipv4/conf/lo/arp_announce
                echo "1" >/proc/sys/net/ipv4/conf/all/arp_ignore
                echo "2" >/proc/sys/net/ipv4/conf/all/arp_announce
                sysctl -p >/dev/null 2>&1
                echo "RealServer Start OK "
                ;;
        stop)
                ifconfig lo:0 down
                route del $VIP /dev/null 2>&1
                echo "0" >/proc/sys/net/ipv4/conf/lo/arp_ignore
                echo "0" >/proc/sys/net/ipv4/conf/lo/arp_announce
                echo "0" >/proc/sys/net/ipv4/conf/all/arp_ignore
                echo "0" >/proc/sys/net/ipv4/conf/all/arp_announce
                echo "RealServer Stopd"
                ;;
        *)
                echo "Usage: $0 {start|stop}"
                exit 1
        esac
        exit 0

[root@localhost init.d]# chmod +x web.sh
[root@localhost init.d]# service web.sh start
RealServer Start OK 
[root@localhost init.d]# ifup lo:0 #開啓虛擬網卡
[root@localhost network-scripts]# ifconfig
lo:0: flags=73<UP,LOOPBACK,RUNNING>  mtu 65536
        inet 192.168.100.10  netmask 255.255.255.0
        loop  txqueuelen 1  (Local Loopback)

[root@localhost network-scripts]# firefox "http://127.0.0.1/" & #用火狐瀏覽器去訪問回訪地址，放在後臺運行
[2] 17973

LVS+DR模式+keepalived

配置第二臺7web服務器

[root@localhost ~]# systemctl start httpd

[root@localhost ~]# systemctl stop firewalld.service 
[root@localhost ~]# setenforce 0

[root@localhost ~]# cd /var/www/html/
[root@localhost html]# echo "this is kgv web" > index.html
[root@localhost html]# cd /etc/sysconfig/network-scripts/
[root@localhost network-scripts]# cp ifcfg-lo ifcfg-lo:0
[root@localhost network-scripts]# vim ifcfg-lo:0
DEVICE=lo:0
IPADDR=192.168.100.10
NETMASK=255.255.255.0
ONBOOT=yes
[root@localhost network-scripts]# cd /etc/init.d/
[root@localhost init.d]# vim web.sh

#!/bin/bash
VIP=192.168.100.10
        case "$1" in
        start)
                ifconfig lo:0 $VIP netmask 255.255.255.255 broadcast $VIP
                /sbin/route add -host $VIP dev lo:0
                echo "1" >/proc/sys/net/ipv4/conf/lo/arp_ignore
                echo "2" >/proc/sys/net/ipv4/conf/lo/arp_announce
                echo "1" >/proc/sys/net/ipv4/conf/all/arp_ignore
                echo "2" >/proc/sys/net/ipv4/conf/all/arp_announce
                sysctl -p >/dev/null 2>&1
                echo "RealServer Start OK "
                ;;
        stop)
                ifconfig lo:0 down
                route del $VIP /dev/null 2>&1
                echo "0" >/proc/sys/net/ipv4/conf/lo/arp_ignore
                echo "0" >/proc/sys/net/ipv4/conf/lo/arp_announce
                echo "0" >/proc/sys/net/ipv4/conf/all/arp_ignore
                echo "0" >/proc/sys/net/ipv4/conf/all/arp_announce
                echo "RealServer Stopd"
                ;;
        *)
                echo "Usage: $0 {start|stop}"
                exit 1
        esac
        exit 0
[root@localhost init.d]# chmod +x web.sh 
[root@localhost init.d]# ifup lo:0
[root@localhost init.d]# service web.sh start
RealServer Start OK 
[root@localhost init.d]# firefox "http://127.0.0.1/" &
[1] 17916

LVS+DR模式+keepalived

去客戶端去測試一下，先設置同一網段的地址

LVS+DR模式+keepalived

去1主服務器測試能不能Ping通兩個web服務器

[root@localhost init.d]# ping 192.168.100.221
PING 192.168.100.221 (192.168.100.221) 56(84) bytes of data.
64 bytes from 192.168.100.221: icmp_seq=1 ttl=64 time=0.416 ms
64 bytes from 192.168.100.221: icmp_seq=2 ttl=64 time=0.420 ms
[root@localhost init.d]# ping 192.168.100.222
PING 192.168.100.222 (192.168.100.222) 56(84) bytes of data.
64 bytes from 192.168.100.222: icmp_seq=1 ttl=64 time=0.348 ms
64 bytes from 192.168.100.222: icmp_seq=2 ttl=64 time=0.490 ms

再去客戶端測試一下，我們的LVS沒問題

（我們刷新一下就跳出第二個網頁了）

LVS+DR模式+keepalived
LVS+DR模式+keepalived

去主服務器1配置keepalive

[root@localhost keepalived]# vim keepalived.conf

 10    smtp_server 127.0.0.1
 12    router_id LVS_01
22     virtual_router_id 10
 27         auth_pass abc123
30         192.168.100.10  #把原來的刪掉我們只需要一個

36 virtual_server 192.168.100.10 80 {
 39     lb_kind DR
45         TCP_CHECK {

43     real_server 192.168.100.221 80 {
 44         weight 1
 45         TCP_CHECK {
 46             connect_port 80
 47             connect_timeout 3
 48             nb_get_retry 3
 49             delay_before_retry 3
 50         }   
 51     }         
 52     real_server 192.168.100.222 80 {
 53         weight 1
 54         TCP_CHECK {
 55             connect_port 80
 56             connect_timeout 3

[root@localhost keepalived]# systemctl start keepalived.service 
[root@localhost keepalived]# systemctl status keepalived.service #查看狀態，如果沒起來在開啓一次
[root@localhost keepalived]# ip addr show dev ens33:0 #查看網卡有沒有被啓動起來
2: ens33: <BROADCAST,MULTICAST,UP,LOWER_UP> mtu 1500 qdisc pfifo_fast state UP qlen 1000
    link/ether 00:0c:29:c9:dd:05 brd ff:ff:ff:ff:ff:ff
    inet 192.168.100.201/24 brd 192.168.100.255 scope global ens33
       valid_lft forever preferred_lft forever
    inet 192.168.100.10/24 brd 192.168.100.255 scope global secondary ens33:0
       valid_lft forever preferred_lft forever
    inet6 fe80::e3c7:14af:6e4d:7216/64 scope link 
       valid_lft forever preferred_lft forever

同樣的配置第二臺備份的4服務器

[root@localhost ~]# systemctl stop firewalld.service 
[root@localhost ~]# setenforce 0
[root@localhost ~]# vim /etc/sysctl.conf
net.ipv4.ip_forward=1
#proc響應關閉重定向功能
net.ipv4.conf.all.send_redirects = 0
net.ipv4.conf.default.send_redirects = 0
net.ipv4.conf.ens33.send_redirects = 0
[root@localhost ~]# sysctl -p #生效
net.ipv4.ip_forward = 1
net.ipv4.conf.all.send_redirects = 0
net.ipv4.conf.default.send_redirects = 0
net.ipv4.conf.ens33.send_redirects = 0

創建虛擬網卡

[root@localhost ~]# cd /etc/sysconfig/network-scripts/

[root@localhost network-scripts]# cp -p ifcfg-ens33 ifcfg-ens33:0
[root@localhost network-scripts]# vim ifcfg-ens33:0
100dd

DEVICE=ens33:0
ONBOOT=yes
IPADDR=192.168.100.10
NETMASK=255.255.255.0
[root@localhost network-scripts]# service network restart
Restarting network (via systemctl):                        [  確定  ]

[root@localhost network-scripts]# ifup ens33:0 #開啓網卡，這個網關是用來做虛擬IP的，相當於一給訪問入口

[root@localhost network-scripts]# ifconfig
[root@localhost network-scripts]# cd /etc/init.d/
[root@localhost init.d]# vim dr.sh
#!/bin/bash
GW=192.168.100.1
VIP=192.168.100.10
RIP1=192.168.100.221
RIP2=192.168.100.222
case "$1" in
start)
        /sbin/ipvsadm --save > /etc/sysconfig/ipvsadm
        systemctl start ipvsadm
        /sbin/ifconfig ens33:0 $VIP broadcast $VIP netmask 255.255.255.255 broadcast $VIP up
        /sbin/route add -host $VIP dev ens33:0
        /sbin/ipvsadm -A -t $VIP:80 -s rr
        /sbin/ipvsadm -a -t $VIP:80 -r $RIP1:80 -g
        /sbin/ipvsadm -a -t $VIP:80 -r $RIP2:80 -g
        echo "ipvsadm starting --------------------[ok]"
        ;;
        stop)
        /sbin/ipvsadm -C
        systemctl stop ipvsadm
        ifconfig ens33:0 down
        route del $VIP
        echo "ipvsadm stoped---------------------[ok]"
        ;;
        status)
        if [ ! -e /var/lock/subsys/ipvsadm ];then
        echo "ipvsadm stoped---------------"
        exit 1
                else
                echo "ipvsamd Runing ---------[ok]"
        fi
        ;;
        *)
        echo "Usage: $0 {start|stop|status}"
    exit 1
        esac
        exit 0

[root@localhost init.d]# chmod +x dr.sh
[root@localhost init.d]# service dr.sh start
ipvsadm starting --------------------[ok]
[root@localhost init.d]# cd /etc/keepalived/
[root@localhost keepalived]# vim keepalived.conf 
 10    smtp_server 127.0.0.1
 12    router_id LVS_02
 20     state BACKUP
 22     virtual_router_id 10
 23     priority 99
27         auth_pass abc123
30         192.168.100.10

[root@localhost keepalived]# systemctl start keepalived.service 
[root@localhost keepalived]# systemctl status keepalived.service #查看狀態，如果沒起來在開啓一次

我們把主服務器1關掉，去客戶端去測試一下是不是還能Ping通

[root@localhost keepalived]# ifdown ens33:0

C:\Users\CHEN>ping 192.168.100.10

正在 Ping 192.168.100.10 具有 32 字節的數據:
來自 192.168.100.10 的回覆: 字節=32 時間<1ms TTL=64
來自 192.168.100.10 的回覆: 字節=32 時間<1ms TTL=64
來自 192.168.100.10 的回覆: 字節=32 時間<1ms TTL=64
來自 192.168.100.10 的回覆: 字節=32 時間<1ms TTL=6
發表評論
所有評論
還沒有人評論，想成為第一個評論的人麼? 請在上方評論欄輸入並且點擊發布.
相關文章

keepalived+LVS+nginx搭建高可用負載均衡(一)

操作系統：CentOS-7.8 keepalived版本：2.0.20 nginx版本：1.18.0 本篇文件主要是介紹keepalived和LVS的基本概念和基本操作，nginx相關知識錘子在之前的文章寫過，需要了解的可以參

爱做梦的锤子 2020-07-07 23:22:40

keepalived+LVS+nginx搭建高可用負載均衡（二）

操作系統：CentOS-7.8 keepalived版本：2.0.20 nginx版本：1.18.0 本篇是《keepalived+LVS+nginx搭建高可用負載均衡》的第二篇，上一篇主要是介紹了這些組件和基礎知識，以及基礎

爱做梦的锤子 2020-07-07 23:22:30

lvs集羣nat模式搭建

此實驗環境： 調度器：外網ip ：192.168.1.108 內網 192.168.200.129 節點1：ip 192.168.200.100   gw 192.168.200.129 節點2：ip 192.168.200.132  

网络迷男 2020-07-06 03:52:43

解鎖Nginx不一樣的知識

文章目錄1. web服務基礎2. web服務器和web框架3. nginx簡介(面試)4. nginx的安裝與配置5. nginx目錄結構6. nginx配置文件解析7. 默認web站點的配置8. nginx多虛擬主機9. ng

Erics-1996 2020-07-04 07:23:03

lvs集羣 NAT模式rr輪詢失敗或輪詢時間過長問題

首先，略過前面配置不提，director和rs1，2都是使用虛擬機。直接表現問題：director主機：curl vip  輪詢正常，但是使用物理機訪問vip輪詢失敗或者要等待好長時間。經過驗證發現：是虛機性能問題：起始狀態：Active

MUTTOU 2020-07-02 11:55:20

高可用與負載均衡（7）之聊聊Lvs-DR+Keepalived的解決方案

高可用與負載均衡（7）之聊聊Lvs-DR+Keepalived的解決方案參考文章： （1）高可用與負載均衡（7）之聊聊Lvs-DR+Keepalived的解決方案 （2）https://www.cnblogs.com/liaojiafa/

wangchaoqi1985 2020-06-30 07:41:05

從零安裝 lvs+keepalive+tomcat 實現nginx的高可用

    首先最終實現目標架構圖： 下面開始： 首先： 主nginx 服務器地址：192.168.37.110               從 nginx 服務器地址：192.168.37.111            192.168.3

南风沁雨 2020-06-27 18:38:14

【轉】LVS、Nginx、HAProxy、keepalive 的工作原理

當前大多數的互聯網系統都使用了服務器集羣技術，集羣是將相同服務部署在多臺服務器上構成一個集羣整體對外提供服務，這些集羣可以是 Web 應用服務器集羣，也可以是數據庫服務器集羣，還可以是分佈式緩存服務器集羣等等。 在實際應用中，在 Web

零点-一条路走到底 2020-06-25 23:30:06

LVS NAT模式下，CIP和RIP處於同一內網的問題以及解決方法

LVS NAT模式下，正常流程是，CIP向VIP發送一個數據包，Director修改DestIP爲RIP，RIP處理後反饋給VIP（GW）。如果CIP和RIP位於同一個網段，則會導致RIP不通過網關，直接將數據包發送到CIP。 解決方法1

jason15919882622 2020-06-25 03:48:55

LVS基本原理

LVS基本原理簡介負載調度器、真實服務器羣節點一起被稱爲LVS。LVS負載調度器（有時也稱爲負載平衡器），接收所服務的所有接入服務集羣的請求，並決定集羣中的哪個節點應該回復其請求。1)負載調度器（Director）：作爲整個集羣的前端，主

lwh9606 2020-06-23 03:26:59

ipvsadm 參數命令 詳解

http://junlee.blog.51cto.com/228061/247751 對ipvsadm 的命令參考，並根據自己使用的經驗，進行了一個簡單的翻譯，希望對ipvsadm 的使用者有一定的幫助。爲了更好的讓大家理解這份命令手冊

vempire 2020-06-23 00:48:38

LVS+keepalived高可用搭建

需準備4臺虛擬機（2臺web，2臺keepalived）   1、4臺虛擬機都需要lvs服務 # 創建文件 sudo vi /etc/init.d/realserver #!/bin/bash #description : start

wintero1 2020-06-21 13:20:29

詳細的網絡協議之ARP請求

對於 ARP 協議，你想知道的，可能包括以下幾點： ARP 是啥 爲啥需要 ARP ARP 是怎麼工作的 ARP 報文格式長啥樣 ARP 安全嗎 有哪些命令可以操作 ARP ARP 有哪些內核配置參數 帶着這

富士康质检员张全蛋 2020-06-21 04:21:21

面試官：關於負載均衡你瞭解多少 | Nginx面試題 | Nginx架構

面試官：關於負載均衡你瞭解多少，知道哪些常用框架？ 問題分析： 工作中小編也會經常接觸到 Nginx，比如美團的 Oceanus 框架，是一款 HTTP 服務治理框架，這個框架就是基於 Nginx和 ngx_lua 擴展的，主要提供服務註

王 炸 2020-06-17 08:47:16

lvs nat模式配置記錄

因爲項目需要， 需要做負載均衡，在對比了lvs、haproxy和nginx之後選擇了lvs，在此記錄下安裝過程和中間遇到的問題。   先上官方原理圖     Virtual Server via Network Address Tran

xiebaguzhi59094 2020-06-16 12:41:15