文章目錄
k8s集羣：k8s-master01、k8s-node01、k8s-node02
虛機：vmware
系統：centos7
進行下列安裝之前已在vmware上安裝了3臺虛擬系統。
一、網絡配置
三臺虛擬安裝完後需要配置網絡，確保虛機中能上網，以便能訪問到docker hub，下載鏡像，注意需配置成靜態網絡。
1、配置vmware網絡
編輯 ——> 虛擬網絡編輯器
三臺虛擬機網絡均配置的僅主機模式。
2、配置網關
在windows上配置網關，確保三臺虛擬機均能上網。
3、配置三臺虛擬機網絡
配置三臺虛擬機網絡時，確保三臺虛機的IP地址與vmware配置的地址處於一個網段內。
進入第一臺虛機，執行
vi /etc/sysconfig/network-scripts/ifcfg-ens33
編輯網絡如下：
TYPE=Ethernet
PROXY_METHOD=none
BROWSER_ONLY=no
BOOTPROTO=static
DEFROUTE=yes
IPV4_FAILURE_FATAL=no
IPV6INIT=yes
IPV6_AUTOCONF=yes
IPV6_DEFROUTE=yes
IPV6_FAILURE_FATAL=no
IPV6_ADDR_GEN_MODE=stable-privacy
NAME=ens33
UUID=3915aa13-92a6-401f-b17d-ceb4fd218641
DEVICE=ens33
ONBOOT=yes
IPADDR=192.168.137.100
NETMASK=255.255.255.0
GATEWAY=192.168.137.1
DNS1=192.168.137.1
DNS2=8.8.8.8
同樣方式，第二臺虛機配置如下：
TYPE=Ethernet
PROXY_METHOD=none
BROWSER_ONLY=no
BOOTPROTO=static
DEFROUTE=yes
IPV4_FAILURE_FATAL=no
IPV6INIT=yes
IPV6_AUTOCONF=yes
IPV6_DEFROUTE=yes
IPV6_FAILURE_FATAL=no
IPV6_ADDR_GEN_MODE=stable-privacy
NAME=ens33
UUID=e8259262-0c11-4dce-bac4-6a4d8d8f81ce
DEVICE=ens33
ONBOOT=yes
IPADDR=192.168.137.10
NETMASK=255.255.255.0
GATEWAY=192.168.137.1
DNS1=192.168.137.1
第三臺虛機配置如下：
TYPE=Ethernet
PROXY_METHOD=none
BROWSER_ONLY=no
BOOTPROTO=static
DEFROUTE=yes
IPV4_FAILURE_FATAL=no
IPV6INIT=yes
IPV6_AUTOCONF=yes
IPV6_DEFROUTE=yes
IPV6_FAILURE_FATAL=no
IPV6_ADDR_GEN_MODE=stable-privacy
NAME=ens33
UUID=8e6f6c81-be6a-4fab-93c6-a2c905013b07
DEVICE=ens33
ONBOOT=yes
IPADDR=192.168.137.20
NETMASK=255.255.255.0
GATEWAY=192.168.137.1
DNS1=192.168.137.1
通過上述後，三臺虛機均配置成了靜態的IP，執行ping www.baidu.com是否通。
二、初始化安裝系統
以下命令分別在三臺虛擬機中執行。
1、設置主機名以及配置映射
在三臺虛擬機中分別配置映射/etc/hosts
192.168.137.100 k8s-master01
192.168.137.10 k8s-node01
192.168.137.20 k8s-node02
其中IP地址分別三臺虛擬機的地址。
在192.168.137.100上執行
hostnamectl set-hostname k8s-master01
在192.168.137.10上執行
hostnamectl set-hostname k8s-node01
在192.168.137.20上執行
hostnamectl set-hostname k8s-node02
2、安裝依賴包
yum install -y conntrack ntpdate ntp ipvsadm ipset jq iptables curl sysstat libseccomp wget vim net-tools git
3、設置防火牆規則
systemctl stop firewalld && systemctl disable firewalld
yum -y install iptables-services && systemctl start iptables && systemctl enable iptables && iptables -F && service iptables save
4、關閉虛擬內存
因爲容易導致pod運行在虛擬內存中
swapoff -a && sed -i '/swap/s/^\(.*\)$/#\1/g' /etc/fstab
5、關閉SELINUX
setenforce 0 && sed -i 's/^SELINUX=.*/SELINUX=disable/' /etc/selinux/config
6、調整內核參數
cat > kubernetes.conf <<EOF
net.bridge.bridge-nf-call-iptables=1
net.bridge.bridge-nf-call-ip6tables=1
net.ipv4.ip_forward=1
net.ipv4.tcp_tw_recycle=1
vm.swappiness=0
vm.overcommit_memory=1
vm.panic_on_oom=0
fs.inotify.max_user_instances=8192
fs.inotify.max_user_watches=1048576
fs.file-max=52706963
fs.nr_open=52706963
net.ipv6.conf.all.disable_ipv6=1
net.netfilter.nf_conntrack_max=2310720
EOF
cp kubernetes.conf /etc/sysctl.d/kubernetes.conf
sysctl -p /etc/sysctl.d/kubernetes.conf
7、關閉系統不需要的服務
systemctl stop postfix && systemctl disable postfix
8、設置rsyslogd和systemd journald日誌，只啓動systemd journald
mkdir /var/log/journal #持久化保存日誌
mkdir /etc/systemd/journald.conf.d
cat > /etc/systemd/journald.conf.d/99-prophet.conf <<EOF
[Journal]
#持久化保存磁盤
Storage=persistent
#壓縮歷史日誌
Compress=yes
SyncIntervalSec=5m
RateLimitInterval=30s
RateLimitBurst=1000
#最大佔用空間
SystemMaxUse=10G
#單日誌文件最大
SystemMaxFileSize=200M
#日誌保存時間2周
MaxRetentionSec=2week
#不將日誌轉發到syslog
ForwardToSyslog=no
EOF
10、升級內核，並設置從新內核啓動
rpm -Uvh http://www.elrepo.org/elrepo-release-7.0-3.el7.elrepo.noarch.rpm
yum --enablerepo=elrepo-kernel install -y kernel-lt
grub2-set-default 'CentOS Linux (4.4.224-1.el7.elrepo.x86_64) 7 (Core)'
三、kubeadm安裝部署
如不特殊說明，命令都在master節點執行。
1、kube-proxy開啓ipvs的前置條件
modprobe br_netfilter
cat > /etc/sysconfig/modules/ipvs.modules <<EOF
#!/bin/bash
modprobe -- ip_vs
modprobe -- ip_vs_rr
modprobe -- ip_vs_wrr
modprobe -- ip_vs_sh
modprobe -- nf_conntrack_ipv4
EOF
chmod 755 /etc/sysconfig/modules/ipvs.modules && bash /etc/sysconfig/modules/ipvs.modules && lsmod | grep -e ip_vs -e nf_conntrack_ipv4
2、安裝docker
yum install -y yum-untils device-mapper-persistent-data lvm2
yum-config-manager --add-repo http://mirrors.aliyun.com/docker-ce/linux/centos/docker-ce.repo
yum update -y && yum install -y docker-ce
啓動docker，並設置開機自動啓動
systemctl start docker
systemctl enable docker
mkdir /etc/docker
cat > /etc/docker/daemon.json <<EOF
{
"exec-opts": ["native.cgroupdriver=systemd"],
"log-driver": "json-file",
"log-opts": {
"max-size": "100m"
}
}
EOF
mkdir -p /etc/systemd/system/docker.service.d
重啓docker
systemctl daemon-reload && systemctl restart docker && systemctl enable docker
3、安裝kubeadm
cat <<EOF > /etc/yum.repos.d/kubernetes.repo
[kubernetes]
name=Kubernetes
baseurl=https://mirrors.aliyun.com/kubernetes/yum/repos/kubernetes-el7-x86_64
enabled=1
gpgcheck=0
repo_gpgcheck=1
gpgkey=https://mirrors.aliyun.com/kubernetes/yum/doc/yum-key.gpg https://mirrors.aliyun.com/kubernetes/yum/doc/rpm-package-key.gpg
EOF
yum -y install kubeadm-1.15.1 kubectl-1.15.1 kubelet-1.15.1
重新啓動虛機
reboot
4、下載google鏡像
在k8s-master01節點上執行，從https://mp.csdn.net/console/upDetailed下載google鏡像 kubeadm-basic.images.tar.gz
解壓
tar -zxvf kubeadm-basic.images.tar.gz
創建kube-load.sh腳本，用來安裝google鏡像
#!/bin/bash
ls /root/kubeadm-basic.images > /tmp/kube-load.txt
cd /root/kubeadm-basic.images
for i in $( cat /tmp/kube-load.txt )
do
docker load -i $i
done
rm -rf /tmp/kube-load.txt
複製到k8s-node01和k8s-node02虛機上
scp -r kubeadm-basic.images kube-load.sh root@k8s-node01:/root/
分別在三臺虛機上安裝google鏡像，執行腳本kube-load.sh
./kube-load.sh
5、初始化主節點（只在主節點中執行）
kubeadm config print init-defaults > kubeadm-config.yaml
修改kubeadm-config.yaml的內容如下，主要改master節點的地址以及k8s的版本
apiVersion: kubeadm.k8s.io/v1beta2
bootstrapTokens:
- groups:
- system:bootstrappers:kubeadm:default-node-token
token: abcdef.0123456789abcdef
ttl: 24h0m0s
usages:
- signing
- authentication
kind: InitConfiguration
localAPIEndpoint:
advertiseAddress: 192.168.137.100 #修改爲主節點的地址
bindPort: 6443
nodeRegistration:
criSocket: /var/run/dockershim.sock
name: k8s-master01
taints:
- effect: NoSchedule
key: node-role.kubernetes.io/master
---
apiServer:
timeoutForControlPlane: 4m0s
apiVersion: kubeadm.k8s.io/v1beta2
certificatesDir: /etc/kubernetes/pki
clusterName: kubernetes
controllerManager: {}
dns:
type: CoreDNS
etcd:
local:
dataDir: /var/lib/etcd
imageRepository: k8s.gcr.io
kind: ClusterConfiguration
kubernetesVersion: v1.15.1 #修改安裝的版本
networking:
dnsDomain: cluster.local
podSubnet: "10.244.0.0/16"
serviceSubnet: 10.96.0.0/12
scheduler: {}
---
apiVersion: kubeproxy.config.k8s.io/v1alpha1
kind: KubeProxyConfiguration
featureGates:
SupportIPVSProxyMode: true
mode: ipvs
寫入日誌
kubeadm init --config=kubeadm-config.yaml --experimental-upload-certs | tee kubeadm-init.log
添加k8s認證
mkdir -p $HOME/.kube
sudo cp -i /etc/kubernetes/admin.conf $HOME/.kube/config
sudo chown $(id -u):$(id -g) $HOME/.kube/config
安裝flannel插件
wget https://raw.githubusercontent.com/coreos/flannel/master/Documentation/kube-flannel.yml
kubectl create -f kube-flannel
添加node節點，打開kubeadm-init.log文件，複製如下內容分別在兩個node節點執行
kubeadm join 192.168.137.100:6443 --token abcdef.0123456789abcdef \
--discovery-token-ca-cert-hash sha256:211b108de62475c36dcff88ef957e0ea6370a8e1d5769cf7d43fc9fddd15a45c
四、驗證
安裝完成後，執行 kubectl get node查看集羣的節點
可以看出，已經成功啓動一個master節點，兩個node節點