LVS DR模式搭建，keepalived+lvs

LVS DR模式搭建

• 準備工作
  • 三臺機器
  • 分發器，也叫調度器（簡寫爲dir），IP爲21.128
  • rs1,21.129
  • rs2,21.130
  • vip,21.100
  • 在dir上安裝ipvsadm
• dir上編寫腳本 vim /usr/local/sbin/lvs_dr.sh //內容如下

  #! /bin/bash
  echo 1 > /proc/sys/net/ipv4/ip_forward
  ipv=/usr/sbin/ipvsadm
  vip=192.168.21.100
  rs1=192.168.21.129
  rs2=192.168.21.130
  #注意這裏的網卡名字
  ifdown ens33
  ifup ens33
  ifconfig ens33:2 $vip broadcast $vip netmask 255.255.255.255 up
  route add -host $vip dev ens33:2
  $ipv -C
  $ipv -A -t $vip:80 -s rr
  $ipv -a -t $vip:80 -r $rs1:80 -g -w 1
  $ipv -a -t $vip:80 -r $rs2:80 -g -w 1

• 兩臺rs上也編寫腳本 vim /usr/local/sbin/lvs_rs.sh//內容如下

  #/bin/bash
  vip=192.168.21.100
  #把vip綁定在lo上，是爲了實現rs直接把結果返回給客戶端
  ifdown lo
  ifup lo
  ifconfig lo:0 $vip broadcast $vip netmask 255.255.255.255 up
  route add -host $vip lo:0
  #以下操作爲更改arp內核參數，目的是爲了讓rs順利發送mac地址給客戶端
  #參考文檔www.cnblogs.com/lgfeng/archive/2012/10/16/2726308.html
  echo "1" >/proc/sys/net/ipv4/conf/lo/arp_ignore
  echo "2" >/proc/sys/net/ipv4/conf/lo/arp_announce
  echo "1" >/proc/sys/net/ipv4/conf/all/arp_ignore
  echo "2" >/proc/sys/net/ipv4/conf/all/arp_announce

• 分別在dir上和兩個rs上執行這些腳本
• 測試
  • 在瀏覽器中輸入192.168.21.100測試
  • 由於訪問量太低，導致測試可能一直在一臺機器上，也可以在第四臺linux服務器上使用curl測試

    keepalived+lvs

• 完整架構需要兩臺服務器（角色爲dir）分別安裝keepalived軟件，目的是實現高可用，但keepalived本身也有負載均衡的功能，所以本次實驗可以只安裝一臺keepalived
• keepalived內置了ipvsadm的功能，所以不需要再安裝ipvsadm包，也不用編寫和執行那個lvs_dir的腳本
• 三臺機器分別爲：dir（安裝keepalived）21.128，rs1 21.129，rs2 21.130，vip 21.100

• 編輯keepalived配置文件 vim /etc/keepalived/keepalived.conf//內容請到https://coding.net/u/aminglinux/p/aminglinux-book/git/blob/master/D21Z/lvs_keepalived.conf 獲取

  vrrp_instance VI_1 {
  #備用服務器上爲 BACKUP
  state MASTER
  #綁定vip的網卡爲ens33，你的網卡和阿銘的可能不一樣，這裏需要你改一下
  interface ens33
  virtual_router_id 51
  #備用服務器上爲90
  priority 100
  advert_int 1
  authentication {
      auth_type PASS
      auth_pass aminglinux
  }
  virtual_ipaddress {
      192.168.21.100
  }
  }
  virtual_server 192.168.21.100 80 {
  #(每隔10秒查詢realserver狀態)
  delay_loop 10
  #(lvs 算法)
  lb_algo wlc
  #(DR模式)
  lb_kind DR
  #(同一IP的連接60秒內被分配到同一臺realserver)
  persistence_timeout 0
  #(用TCP協議檢查realserver狀態)
  protocol TCP
  
  real_server 192.168.21.129 80 {
      #(權重)
      weight 100
      TCP_CHECK {
      #(10秒無響應超時)
      connect_timeout 10
      nb_get_retry 3
      delay_before_retry 3
      connect_port 80
      }
  }
  real_server 192.168.21.130 80 {
      weight 100
      TCP_CHECK {
      connect_timeout 10
      nb_get_retry 3
      delay_before_retry 3
      connect_port 80
      }
   }
  }

• 執行ipvsadm -C 把之前的ipvsadm規則清空掉

  [root@akuilinux01 ~]# ipvsadm -C
  [root@akuilinux01 ~]# ipvsadm -ln
  IP Virtual Server version 1.2.1 (size=4096)
  Prot LocalAddress:Port Scheduler Flags
  -> RemoteAddress:Port           Forward Weight ActiveConn InActConn

• systemctl restart network 可以把之前的vip清空掉
• 兩臺rs上，依然要執行/usr/local/sbin/lvs_rs.sh腳本

  #/bin/bash
  vip=192.168.21.100
  #把vip綁定在lo上，是爲了實現rs直接把結果返回給客戶端
  ifdown lo
  ifup lo
  ifconfig lo:0 $vip broadcast $vip netmask 255.255.255.255 up
  route add -host $vip lo:0
  #以下操作爲更改arp內核參數，目的是爲了讓rs順利發送mac地址給客戶端
  #參考文檔www.cnblogs.com/lgfeng/archive/2012/10/16/2726308.html
  echo "1" >/proc/sys/net/ipv4/conf/lo/arp_ignore
  echo "2" >/proc/sys/net/ipv4/conf/lo/arp_announce
  echo "1" >/proc/sys/net/ipv4/conf/all/arp_ignore
  echo "2" >/proc/sys/net/ipv4/conf/all/arp_announce

• keepalived有一個比較好的功能，可以在一臺rs宕機時，不再把請求轉發過去

  [root@akuilinux03 ~]# systemctl stop nginx
  [root@akuilinux01 ~]# ipvsadm -ln
  IP Virtual Server version 1.2.1 (size=4096)
  Prot LocalAddress:Port Scheduler Flags
  -> RemoteAddress:Port           Forward Weight ActiveConn InActConn
  TCP  192.168.21.100:80 wlc
  -> 192.168.21.129:80            Route   100    2          3         

  擴展

• haproxy+keepalived
• nginx、lvs、haproxy比較
• keepalived中自定義腳本vrrp_script
• lvs dr模式只使用一個公網ip的實現方法