Docker Consul容器服務更新與發現

Docker Consul容器服務更新與發現
容器服務更新與發現拓撲圖

在consul服務器上部署nginx代理服務，registrator檢測到docker容器中的服務，註冊添加到consul中，consul-template根據consul中的服務信息，註冊寫入創建好的template模板中，設置nginx代理服務器識別consul-template生成的模板文件，外部網絡用戶通過訪問nginx代理服務器即可訪問docker容器內的nginx服務
Consul概述
（1）Consul是HashiCrop公司推出的開源工具，用於實現分佈式系統的服務發現與配置
（2）Consul的特性

• Consul支持健康檢查，允許存儲鍵值對
• 一致性協議採用Raft算法，用來保證服務的高可用
• 成員管理和消息廣播採用GOSSIP協議，支持ACL訪問控制
  （3）方便部署，與Docker等輕量級容器可無縫配合
  Consul所需的服務
  1.每個提供服務的節點上都要部署和運行Consul的agent
  Consul agent有兩種運行模式
• Server
• Client
  Server和Client只是Consul集羣層面的區分，與搭建在Cluster之上的應用服務無關
  2.consul-template
  是基於Consul的自動替換配置文件的應用
  可以查詢Consul中的服務目錄、Key、Key-values等
  特別適合動態的創建配置文件
  3.Gliderlabs/Registrator
  檢查容器運行狀態
  自動註冊和註銷docker容器的服務到服務配置中心
  目前支持Consul、Etcd和SkyDNS2
  實驗部署
  部署consul服務，實現部署nginx服務的自動發現和實現nginx的負載均衡服務
  一、構建自動發現的Docker服務架構
  1.建立Consul服務

  [root@consul ~]# mkdir consul
  [root@consul ~]# cp /opt/consul_0.9.2_linux_amd64.zip /root/consul/
  [root@consul ~]# cd /root/consul/
  [root@consul consul]# unzip consul_0.9.2_linux_amd64.zip
  [root@consul consul]# ls
  consul  consul_0.9.2_linux_amd64.zip
  [root@consul consul]# mv consul /usr/bin/
  [root@docker consul]# consul agent \    //使用代理功能
  -server \       //提供server功能
  -bootstrap \    //參與選舉爲領袖
  -ui \           //提供web訪問界面
  -data-dir=/var/lib/consul-data \        //參數存儲位置
  -bind=192.168.7.129 \       //綁定地址
  -client=0.0.0.0 \           //面對所有節點終端
  -node=consul-server01 &> /var/log/consul.log &  //指定本地節點名稱，指定日誌文件目錄，放在後臺運行

  2.查看集羣信息

  [root@consul consul]# consul members
  Node             Address             Status  Type    Build  Protocol  DC
  consul-server01  192.168.7.129:8301  alive   server  0.9.2  2         dc1
  [root@consul consul]# consul info | grep leader
  leader = true
  leader_addr = 192.168.7.129:8300

  3.通過httpd api獲取集羣信息

  [root@consul ~]# curl 127.0.0.1:8500/v1/status/peers    //查看集羣server成員
  [root@consul ~]# curl 127.0.0.1:8500/v1/status/leader   //查看領導者信息
  [root@consul ~]# curl 127.0.0.1:8500/v1/catalog/services    //註冊的所有服務
  [root@consul ~]# curl 127.0.0.1:8500/v1/catalog/nginx   //查看nginx服務信息
  [root@consul ~]# curl 127.0.0.1:8500/v1/catalog/nodes   //集羣節點詳細信息

  二、容器服務自動添加到nginx集羣
  1.安裝Gliderlabs/Registrator

  [root@docker ~]# docker run -d \
  --name=registrator \    //指定名稱
  --net=host \            //指定網絡
  -v /var/run/docker.sock:/tmp/docker.sock \    //指定數據卷
  --restart=always \      //restart功能
  gliderlabs/registrator:latest \
  -ip=192.168.7.168 \     //指定本地IP地址
  consul://192.168.7.129:8500

  2.添加nginx服務

  [root@docker ~]# docker run -itd -p:83:80 --name test-01 -h test01 nginx
  [root@docker ~]# docker run -itd -p:84:80 --name test-02 -h test02 nginx
  [root@docker ~]# docker ps -a
  CONTAINER ID        IMAGE                           COMMAND                  CREATED             STATUS              PORTS                NAMES
  960d01d212c4        nginx                           "nginx -g 'daemon of…"   4 seconds ago       Up 3 seconds        0.0.0.0:84->80/tcp   test-02
  bc075c1c3670        nginx                           "nginx -g 'daemon of…"   59 seconds ago      Up 57 seconds       0.0.0.0:83->80/tcp   test-01
  5dd120cd1232        gliderlabs/registrator:latest   "/bin/registrator -i…"   3 minutes ago       Up 3 minutes                             registrator

  3.驗證nginx服務是否註冊到consul
  
  
  在consul服務器上查看服務

  [root@consul consul]# curl 127.0.0.1:8500/v1/catalog/services
  {"consul":[],"nginx":[]}

  4.準備template nginx模板文件

  [root@consul ~]# vim /root/consul/nginx.ctmpl
  upstream http_backend {
  {{range service "nginx"}}
  server {{.Address}}:{{.Port}};
  {{end}}
  }
  server {
  listen 83;
  server_name localhost 192.168.7.129;
  access_log /var/log/nginx/kgc.cn-access.log;
  index index.html index.php;
  location / {
  proxy_set_header HOST $host;
  proxy_set_header X-Real-IP $remote_addr;
  proxy_set_header Client-IP $remote_addr;
  proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for;
  proxy_pass http://http_backend;
   }
  }

  5.編譯安裝並配置nginx

  [root@consul ~]# yum install gcc pcre-devel zlib-devel -y
  [root@consul ~]# tar zxvf nginx-1.12.0.tar.gz -C /opt
  [root@consul ~]# cd /opt/nginx-1.12.0
  [root@consul ~]# ./configure --prefix=/usr/local/nginx
  [root@consul ~]# make && make install
  [root@consul ~]# vim /usr/local/nginx/conf/nginx.conf
  http {
    include       mime.types;
    include       vhost/*.conf;   //添加虛擬主機目錄
    default_type  application/octet-stream;
  #創建虛擬主機目錄
  [root@consul ~]# mkdir /usr/local/nginx/conf/vhost
  #創建日誌文件目錄
  [root@consul ~]# mkdir /var/log/nginx
  #啓動nginx
  /usr/local/nginx/sbin/nginx

  6.配置並啓動template
  上傳consul-template_0.19.3_linux_amd64.zip到/root/consul目錄下

  [root@consul consul]# unzip consul-template_0.19.3_linux_amd64.zip
  [root@consul consul]# mv consul-template /usr/bin
  [root@consul consul]# consul-template -consul-addr 192.168.7.129:8500 \
  -template "/root/consul/nginx.ctmpl:/usr/local/nginx/conf/vhost/aaa.conf:/usr/local/nginx/sbin/nginx -s reload" \
  --log-level=info
  #啓動後，會在vhost目錄下自動生成aaa.conf配置文件
  [root@consul ~]# ls /usr/local/nginx/conf/vhost/
  abc.conf    

  7.增加一個nginx容器節點，測試服務發現及配置更新功能（在registrator服務端增加

  [root@docker ~]# docker run -itd -p:85:80 --name test-03 -h test03 nginx`

  consul服務器監控會有提示自動更新