概述
K8S集羣部署有幾種方式：kubeadm、minikube和二進制包。前兩者屬於自動部署，簡化部署操作。而在生成環境中一般使用二進制包部署，以下就是使用二進制包部署Kubernetes集羣。
架構總規劃圖
環境準備
三臺主機，一臺作爲master節點，二臺作爲node節點。
其中master節點需要安裝以下組件
kube-apiserver、kube-controller-manager、kube-scheduler、etcd
node節點需要安裝以下組件
kubelet、kube-proxy、docker、flannel、etcd
組件介紹
Flanner：Flannel是針對Kubernetes設計的一個網絡規劃服務，簡單來說，它的功能是讓集羣中的不同節點主機創建的Docker容器都具有全集羣唯一的虛擬IP地址。但在默認的Docker配置中，每個Node的Docker服務會分別負責所在節點容器的IP分配。Node內部得容器之間可以相互訪問,但是跨主機(Node)網絡相互間是不能通信。Flannel設計目的就是爲集羣中所有節點重新規劃IP地址的使用規則，從而使得不同節點上的容器能夠獲得"同屬一個內網"且"不重複的"IP地址，並讓屬於不同節點上的容器能夠直接通過內網IP通信。
部署流程
從官方網站上下載二進制包
部署etcd存儲
etcd存儲在master節點和node節點都需要部署，首先在master節點部署
編輯腳本下載官方cfssl包
vim cfssl.sh
curl -L https:#pkg.cfssl.org/ R1.2/cfssl_linux-amd64 -o /usr/local/bin/cfssl
curl -L https:#pkg.cfssl.org/ R1.2/cfssljson_linux-amd64 -o /usr/local/bin/cfssljson
curl -L https:#pkg.cfssl.org/ R1.2/cfssl-certinfo_linux-amd64 -o /usr/local/bin/cfssl-certinfochmod +x /usr/local/bin/cfssl /usr/local/bin/cfssljson /usr/local/bin/cfssl-certinfo
執行腳本
bash cfssl.sh
此時cd /usr/local/bin/目錄生成三個文件
cfssl：是生成證書工具
cfssljson：通過傳入json文件生成證書
cfssl-certinfo：是查看證書信息
給這三個文件添加執行權限
chmod 777 cfssl cfssl-certinfo cfssljson
定義ca證書，生成證書
構建好二個腳本，生成證書
第一個腳本 vim etcd-cert.sh
定義ca證書
證書籤名
cfssl gencert -ca=ca.pem -ca-key=ca-key.pem -config=ca-config.json -profile=www server-csr.json | cfssljson -bare server
上述命令生成所需證書
第二個腳本vim etcd.sh
腳本配置完成，重新加載，開啓etcd以及設置開機自啓動，關閉防火牆，增強性安全功能
systemctl daemon-reload
systemctl enable etcd
systemctl restart etcd
systemctl stop firewalld.service
setenforce 0
創建k8s目錄，將二個腳本移動至目錄下
mkdir k8s
cd k8s/
mkdir etcd-cert
mv etcd-cert.sh etcd-cert
解壓ETCD 二進制包
tar zxvf etcd-v3.3.10-linux-amd64.tar.gz
配置文件，命令文件，證書
mkdir /opt/etcd/{cfg,bin,ssl} -p
mv etcd-v3.3.10-linux-amd64/etcd etcd-v3.3.10-linux-amd64/etcdctl /opt/etcd/bin/
證書拷貝
cp etcd-cert/.pem /opt/etcd/ssl/
進入卡住狀態等待其他節點加入
bash etcd.sh etcd01 192.168.142.129 etcd02=https:/ /192.168.142.130:2380,etcd03=https:/ /192.168.149.131:2380
使用另外一個會話打開，會發現etcd進程已經開啓
ps -ef | grep etcd
拷貝證書去其他節點
scp -r /opt/etcd/ [email protected]:/opt/
scp -r /opt/etcd/ [email protected]:/opt/
啓動腳本拷貝其他節點
scp /usr/lib/systemd/system/etcd.service [email protected]:/usr/lib/systemd/system/
scp /usr/lib/systemd/system/etcd.service [email protected]:/usr/lib/systemd/system/
在node01節點的操作
修改etcd文件
vim /opt/etcd/cfg/etcd
修改名稱和地址
[Member]
ETCD_NAME="etcd02"
ETCD_DATA_DIR="/var/lib/etcd/default.etcd"
ETCD_LISTEN_PEER_URLS="https:/ /192.168.142.130:2380"
ETCD_LISTEN_CLIENT_URLS="https:/ /192.168.142.130:2379"[Clustering]
ETCD_INITIAL_ADVERTISE_PEER_URLS="https:/ /192.168.142.130:2380"
ETCD_ADVERTISE_CLIENT_URLS="https:/ /192.168.142.130:2379"
ETCD_INITIAL_CLUSTER="etcd01=http//192.168.142.129:2380,etcd02=https:/ /192.168.14.130:2380,etcd03=https:/ /192.168.142.131:2380"
ETCD_INITIAL_CLUSTER_TOKEN="etcd-cluster"
ETCD_INITIAL_CLUSTER_STATE="new"
啓動服務
systemctl start etcd
systemctl status etcd
3.在node02節點的操作
修改etcd文件
vim /opt/etcd/cfg/etcd
修改名稱和地址
[Member]
ETCD_NAME="etcd03"
ETCD_DATA_DIR="/var/lib/etcd/default.etcd"
ETCD_LISTEN_PEER_URLS="https:#192.168.142.131:2380"
ETCD_LISTEN_CLIENT_URLS="https:#192.168.142.131:2379"[Clustering]
ETCD_INITIAL_ADVERTISE_PEER_URLS="https:#192.168.142.131:2380"
ETCD_ADVERTISE_CLIENT_URLS="https:#192.168.142.131:2379"
ETCD_INITIAL_CLUSTER="etcd01=https:#192.168.142.129:2380,etcd02=https:#192.168.142.130:2380,etcd03=https:#192.168.142.131:2380"
ETCD_INITIAL_CLUSTER_TOKEN="etcd-cluster"
ETCD_INITIAL_CLUSTER_STATE="new"
啓動服務
systemctl start etcd
部署 flannel
寫入分配的子網段到ETCD中，供flannel使用
/opt/etcd/bin/etcdctl --ca-file=ca.pem --cert-file=server.pem --key-file=server-key.pem --endpoints="https:/ /192.168.149.131:2379,h ttps://192.168.220.140:2379,https:/ /192.168.220.136:2379 set /core os.com /network/config '{ "Network": "172.17.0.0/16", "Backend": {"Type": "vxlan"}}'
拷貝軟件包到所有的 node 節點
scp flannel-v0.10.0-linux-amd64.tar.gz [email protected]:/root
scp flannel-v0.10.0-linux-amd64.tar.gz [email protected]:/root
所有 node 節點將壓縮包解壓：
tar zvxf flannel-v0.10.0-linux-amd64.tar.gz
在node節點上，先創建k8s工作工作目錄：
mkdir /opt/kubernetes/{cfg,bin,ssl} -p
mv mk-docker-opts.sh flanneld /opt/kubernetes/bin/*
創建flanner腳本 vim flannel.sh
啓動並設置開啓自啓
systemctl daemon-reload
systemctl enable flanneld
systemctl restart flanneld
啓動flanner網絡功能
bash flannel.sh https:// 19 2.1 68.220.131:2379,https:/ /192.168.220.140:2379,http s://192.168.220.136:2379
at /run/flannel/subnet.env
DOCKER_OPT_BIP="--bip=172.17.53.1/24"
DOCKER_OPT_IPMASQ="--ip-masq=false"
DOCKER_OPT_MTU="--mtu=1450"DOCKER_NETWORK_OPTIONS=" --bip=172.17.53.1/24 --ip-masq=false --mtu=1450"
重啓docker
systemctl daemon-reload
systemctl restart docker
查看flanner網絡
