Docker（十）--K8s管理docker集羣

原創 zy66996 2020-07-01 17:18

一.概念解釋

Kubernetes的名字來自希臘語，意思是“舵手” 或 “領航員”。K8s是將8個字母“ubernete”替換爲“8”的縮寫。
Kubernetes是Google開源的一個容器編排引擎，它支持自動化部署、大規模可伸縮、應用容器化管理。在生產環境中部署一個應用程序時，通常要部署該應用的多個實例以便對應用請求進行負載均衡。
在Kubernetes中，我們可以創建多個容器，每個容器裏面運行一個應用實例，然後通過內置的負載均衡策略，實現對這一組應用實例的管理、發現、訪問，而這些細節都不需要運維人員去進行復雜的手工配置和處理。

特點：

  • 可移植: 支持公有云，私有云，混合雲，多重雲（multi-cloud）
  • 可擴展: 模塊化，插件化，可掛載，可組合
  • 自動化: 自動部署，自動重啓，自動複製，自動伸縮/擴展

二.構建K8s管理集羣

1.清除實驗環境(server1、server2、server3操作相同)

  • 清除列表管理(之前部署swarm的集羣)
[root@server1 ~]# docker service ls
[root@server1 ~]# docker service rm web
[root@server1 ~]# docker stack rm portainer
  • 清理卷
[root@server1 ~]# docker volume ls
[root@server1 ~]# docker volume prune
  • 刪除容器
[root@server1 ~]# docker rm -f  `docker ps -aq`
  • 刪除網絡
[root@server1 ~]# docker network ls
[root@server1 ~]# docker network rm we_net1
  • 節點離開swarm集羣
[root@server1 ~]# docker swarm leave -f
  • 禁用swap分區
[root@server1 ~]# swapoff -a
[root@server1 ~]# vim /etc/fstab

在這裏插入圖片描述
在這裏插入圖片描述

[root@server2 ~]# swapoff -a
[root@server2 ~]# vim /etc/fstab 

[root@server3 ~]# swapoff -a
[root@server3 ~]# vim /etc/fstab

2.爲server1,server2,server3安裝軟件包

[root@server1 ~]# ls
cri-tools-1.13.0-0.x86_64.rpm  kubectl-1.15.0-0.x86_64.rpm  kubernetes-cni-0.7.5-0.x86_64.rpm
kubeadm-1.15.0-0.x86_64.rpm    kubelet-1.15.0-0.x86_64.rpm
[root@server1 ~]# yum install * -y
[root@server1 ~]# scp * server2:
[root@server1 ~]# scp * server3:

[root@server2 ~]# ls
cri-tools-1.13.0-0.x86_64.rpm  kubectl-1.15.0-0.x86_64.rpm  kubernetes-cni-0.7.5-0.x86_64.rpm
kubeadm-1.15.0-0.x86_64.rpm    kubelet-1.15.0-0.x86_64.rpm
[root@server2 ~]# yum install *

[root@server3 ~]# ls
cri-tools-1.13.0-0.x86_64.rpm  kubectl-1.15.0-0.x86_64.rpm  kubernetes-cni-0.7.5-0.x86_64.rpm
kubeadm-1.15.0-0.x86_64.rpm    kubelet-1.15.0-0.x86_64.rpm
[root@server3 ~]# yum install * -y

3.所有節點導入相關鏡像

[root@server1 ~]# for i in *.tar; do docker load -i $i ;done

在這裏插入圖片描述
4.將鏡像傳給server2、server3，並導入鏡像

[root@server1 ~]# scp *.tar server2:
[root@server1 ~]# scp *.tar server3:

在這裏插入圖片描述

[root@server2 ~]# for i in *.tar; do docker load -i $i ;done

在這裏插入圖片描述

[root@server3 ~]# for i in *.tar; do docker load -i $i ;done

在這裏插入圖片描述

5.在所有節點的/etc/sysctl.d/k8s.conf內寫入內容並查看

[root@server1 ~]# vim /etc/sysctl.d/k8s.conf
[root@server1 ~]# cat /etc/sysctl.d/k8s.conf
net.bridge.bridge-nf-call-ip6tables = 1
net.bridge.bridge-nf-call-iptables = 1
[root@server1 ~]# scp /etc/sysctl.d/k8s.conf server2:/etc/sysctl.d/
k8s.conf                                                                      100%   79     0.1KB/s   00:00    
[root@server1 ~]# scp /etc/sysctl.d/k8s.conf server3:/etc/sysctl.d/
k8s.conf           

[root@server1 ~]# sysctl --system

在這裏插入圖片描述
在這裏插入圖片描述
在這裏插入圖片描述
在這裏插入圖片描述
6.在server1，server2,server3開啓kubelet服務（此時查看狀態仍未開啓）

[root@server1 ~]# systemctl start kubelet
[root@server1 ~]# systemctl enable kubelet

在這裏插入圖片描述
在這裏插入圖片描述
在這裏插入圖片描述

6.初始化管理節點

[root@server1 ~]# kubeadm init --pod-network-cidr=10.244.0.0/16 --apiserver-advertise-address=172.25.31.1

在這裏插入圖片描述
在這裏插入圖片描述注意：如果第一次初始化集羣失敗，需要執行命令"kubeadm reset"進行重置，重置之後再執行初始化集羣的命令，進行集羣初始化。

7.創建用戶kubeadm，並賦予所有權限

[root@server1 k8s]# useradd kubeadm
[root@server1 k8s]# vim /etc/sudoers

在這裏插入圖片描述

8.切換到kubeadm用戶下創建文件並將其複製

[root@server1 ~]# su - kubeadm 
[kubeadm@server1 ~]$ mkdir -p $HOME/.kube
[kubeadm@server1 ~]$ sudo cp -i /etc/kubernetes/admin.conf $HOME/.kube/config
[kubeadm@server1 ~]$ sudo chown $(id -u):$(id -g) $HOME/.kube/config
[kubeadm@server1 ~]$ exit
logout

9.在server1上配置 kubectl 命令補齊功能:

[kubeadm@server1 ~]$ echo "source <(kubectl completion bash)" >> .bashrc
[kubeadm@server1 ~]$ logout
[root@server1 ~]# su - kubeadm

在這裏插入圖片描述

10.在server1上將kube-flannel.yml文件發送到/home/k8s目錄下。因爲kube-flannel.yml文件原來的/root/k8s目錄下，普通用戶k8s無法訪問

[root@server1 ~]# cp kube-flannel.yml /home/kubeadm/
[root@server1 ~]# su - kubeadm 
Last login: Fri Aug  9 14:25:33 CST 2019 on pts/0
[kubeadm@server1 ~]$ ls
kube-flannel.yml
[kubeadm@server1 ~]$ kubectl apply -f kube-flannel.yml
clusterrole.rbac.authorization.k8s.io/flannel created
clusterrolebinding.rbac.authorization.k8s.io/flannel created
serviceaccount/flannel created
configmap/kube-flannel-cfg created
daemonset.extensions/kube-flannel-ds-amd64 created
daemonset.extensions/kube-flannel-ds-arm64 created
daemonset.extensions/kube-flannel-ds-arm created
daemonset.extensions/kube-flannel-ds-ppc64le created
daemonset.extensions/kube-flannel-ds-s390x created

11.在所有節點導入flannel

[root@server1 ~]# docker load -i flannel.tar 
cd7100a72410: Loading layer  4.403MB/4.403MB
3b6c03b8ad66: Loading layer  4.385MB/4.385MB
93b0fa7f0802: Loading layer  158.2kB/158.2kB
4165b2148f36: Loading layer  36.33MB/36.33MB
b883fd48bb96: Loading layer   5.12kB/5.12kB
Loaded image: quay.io/coreos/flannel:v0.10.0-amd64
[root@server1 ~]# scp flannel.tar server2:
flannel.tar                             100%   43MB  43.2MB/s   00:00    
[root@server1 ~]# scp flannel.tar server3:
flannel.tar                             100%   43MB  43.2MB/s   00:0

server2:

[root@server2 ~]# docker load  -i flannel.tar 
cd7100a72410: Loading layer  4.403MB/4.403MB
3b6c03b8ad66: Loading layer  4.385MB/4.385MB
93b0fa7f0802: Loading layer  158.2kB/158.2kB
4165b2148f36: Loading layer  36.33MB/36.33MB
b883fd48bb96: Loading layer   5.12kB/5.12kB
Loaded image: quay.io/coreos/flannel:v0.10.0-amd64

server3：

[root@server3 ~]# docker load -i flannel.tar 
cd7100a72410: Loading layer  4.403MB/4.403MB
3b6c03b8ad66: Loading layer  4.385MB/4.385MB
93b0fa7f0802: Loading layer  158.2kB/158.2kB
4165b2148f36: Loading layer  36.33MB/36.33MB
b883fd48bb96: Loading layer   5.12kB/5.12kB
Loaded image: quay.io/coreos/flannel:v0.10.0-amd64

11.在server2和server3上加載ipvs內核模塊並使其臨時生效

[root@server2 ~]# modprobe ip_vs_wrr
[root@server2 ~]# modprobe ip_vs_rr
[root@server2 ~]# modprobe ip_vs_sh
[root@server2 ~]# modprobe ip_vs

[root@server3 ~]# modprobe ip_vs_wrr
[root@server3 ~]# modprobe ip_vs_rr
[root@server3 ~]# modprobe ip_vs_sh
[root@server3 ~]# modprobe ip_vs

12.server2、server3加入節點

[root@server3 ~]# kubeadm join 172.25.31.1:6443 --token pu2qxd.7i5itunef7xta8wg \
>     --discovery-token-ca-cert-hash sha256:d2999b6e117e399234cf47884a183229aabb834dc700ecacf42449c9d36a0074

在這裏插入圖片描述

[root@server2 ~]# kubeadm join 172.25.31.1:6443 --token pu2qxd.7i5itunef7xta8wg \
>     --discovery-token-ca-cert-hash sha256:d2999b6e117e399234cf47884a183229aabb834dc700ecacf42449c9d36a0074

在這裏插入圖片描述13.獲取默認namespace（default）下的pod，查看所有節點的狀態是否都是ready，查看pods狀態是否是running

[kubeadm@server1 ~]$ kubectl get nodes
[kubeadm@server1 ~]$ kubectl get pods --all-namespaces

在這裏插入圖片描述
14.查看master狀態

[kubeadm@server1 ~]$ kubectl get cs
[kubeadm@server1 ~]$ kubectl get node
[kubeadm@server1 ~]$  kubectl get all -n kube-system

在這裏插入圖片描述
在這裏插入圖片描述
注意：
1.master節點要求cpu>=2
2.

三.佈置UI界面

1.在所有節點導入kubernetes-dashboard.tar鏡像

server1：
在這裏插入圖片描述server2:
在這裏插入圖片描述server3:
在這裏插入圖片描述
2.獲取或者自己編寫kubernetes-dashboard.yaml併發送到/home/kubeadm/

[root@server1 ~]# cp kubernetes-dashboard.yaml /home/kubeadm/
[root@server1 ~]# cd /home/kubeadm/
[root@server1 kubeadm]# ls
kube-flannel.yml  kubernetes-dashboard.yaml

# Copyright 2017 The Kubernetes Authors.
#
# Licensed under the Apache License, Version 2.0 (the "License");
# you may not use this file except in compliance with the License.
# You may obtain a copy of the License at
#
#     http://www.apache.org/licenses/LICENSE-2.0
#
# Unless required by applicable law or agreed to in writing, software
# distributed under the License is distributed on an "AS IS" BASIS,
# WITHOUT WARRANTIES OR CONDITIONS OF ANY KIND, either express or implied.
# See the License for the specific language governing permissions and
# limitations under the License.

# ------------------- Dashboard Secret ------------------- #

apiVersion: v1
kind: Secret
metadata:
  labels:
    k8s-app: kubernetes-dashboard
  name: kubernetes-dashboard-certs
  namespace: kube-system
type: Opaque

---
# ------------------- Dashboard Service Account ------------------- #

apiVersion: v1
kind: ServiceAccount
metadata:
  labels:
    k8s-app: kubernetes-dashboard
  name: kubernetes-dashboard
  namespace: kube-system

---
# ------------------- Dashboard Role & Role Binding ------------------- #

kind: Role
apiVersion: rbac.authorization.k8s.io/v1
metadata:
  name: kubernetes-dashboard-minimal
  namespace: kube-system
rules:
  # Allow Dashboard to create 'kubernetes-dashboard-key-holder' secret.
- apiGroups: [""]
  resources: ["secrets"]
  verbs: ["create"]
  # Allow Dashboard to create 'kubernetes-dashboard-settings' config map.
- apiGroups: [""]
  resources: ["configmaps"]
  verbs: ["create"]
  # Allow Dashboard to get, update and delete Dashboard exclusive secrets.
- apiGroups: [""]
  resources: ["secrets"]
  resourceNames: ["kubernetes-dashboard-key-holder", "kubernetes-dashboard-certs"]
  verbs: ["get", "update", "delete"]
  # Allow Dashboard to get and update 'kubernetes-dashboard-settings' config map.
- apiGroups: [""]
  resources: ["configmaps"]
  resourceNames: ["kubernetes-dashboard-settings"]
  verbs: ["get", "update"]
  # Allow Dashboard to get metrics from heapster.
- apiGroups: [""]
  resources: ["services"]
  resourceNames: ["heapster"]
  verbs: ["proxy"]
- apiGroups: [""]
  resources: ["services/proxy"]
  resourceNames: ["heapster", "http:heapster:", "https:heapster:"]
  verbs: ["get"]

---
apiVersion: rbac.authorization.k8s.io/v1
kind: RoleBinding
metadata:
  name: kubernetes-dashboard-minimal
  namespace: kube-system
roleRef:
  apiGroup: rbac.authorization.k8s.io
  kind: Role
  name: kubernetes-dashboard-minimal
subjects:
- kind: ServiceAccount
  name: kubernetes-dashboard
  namespace: kube-system

---
# ------------------- Dashboard Deployment ------------------- #

kind: Deployment
apiVersion: apps/v1
metadata:
  labels:
    k8s-app: kubernetes-dashboard
  name: kubernetes-dashboard
  namespace: kube-system
spec:
  replicas: 1
  revisionHistoryLimit: 10
  selector:
    matchLabels:
      k8s-app: kubernetes-dashboard
  template:
    metadata:
      labels:
        k8s-app: kubernetes-dashboard
    spec:
      containers:
      - name: kubernetes-dashboard
        image: k8s.gcr.io/kubernetes-dashboard-amd64:v1.10.1
        ports:
        - containerPort: 8443
          protocol: TCP
        args:
          - --auto-generate-certificates
          # Uncomment the following line to manually specify Kubernetes API server Host
          # If not specified, Dashboard will attempt to auto discover the API server and connect
          # to it. Uncomment only if the default does not work.
          # - --apiserver-host=http://my-address:port
        volumeMounts:
        - name: kubernetes-dashboard-certs
          mountPath: /certs
          # Create on-disk volume to store exec logs
        - mountPath: /tmp
          name: tmp-volume
        livenessProbe:
          httpGet:
            scheme: HTTPS
            path: /
            port: 8443
          initialDelaySeconds: 30
          timeoutSeconds: 30
      volumes:
      - name: kubernetes-dashboard-certs
        secret:
          secretName: kubernetes-dashboard-certs
      - name: tmp-volume
        emptyDir: {}
      serviceAccountName: kubernetes-dashboard
      # Comment the following tolerations if Dashboard must not be deployed on master
      tolerations:
      - key: node-role.kubernetes.io/master
        effect: NoSchedule

---
# ------------------- Dashboard Service ------------------- #

kind: Service
apiVersion: v1
metadata:
  labels:
    k8s-app: kubernetes-dashboard
  name: kubernetes-dashboard
  namespace: kube-system
spec:
  ports:
    - port: 443
      targetPort: 8443
  selector:
    k8s-app: kubernetes-dashboard

3.切換用戶

[root@server1 kubeadm]# su - kubeadm 
Last login: Fri Aug  9 14:57:20 CST 2019 on pts/0
[kubeadm@server1 ~]$ ls
kube-flannel.yml  kubernetes-dashboard.yaml
[kubeadm@server1 ~]$ vim kubernetes-dashboard.yaml 
[kubeadm@server1 ~]$ kubectl create -f kubernetes-dashboard.yaml

在這裏插入圖片描述
4.更改type

[kubeadm@server1 ~]$ kubectl edit service kubernetes-dashboard -n kube-system
service/kubernetes-dashboard edited
##編輯類型type：NodePort

在這裏插入圖片描述

5.獲取NodePort

[kubeadm@server1 ~]$ kubectl describe svc kubernetes-dashboard -n kube-system
[kubeadm@server1 ~]$ kubectl get pods -n kube-system

在這裏插入圖片描述
在這裏插入圖片描述6.新建用戶，用來管理UI界面

[kubeadm@server1 ~]$ vim dashboard-admin.yaml
[kubeadm@server1 ~]$ kubectl create -f dashboard-admin.yaml 
serviceaccount/admin-user created
clusterrolebinding.rbac.authorization.k8s.io/admin-user created

文件內容：

apiVersion: v1
kind: ServiceAccount
metadata:
  name: admin-user
  namespace: kube-system

---

apiVersion: rbac.authorization.k8s.io/v1
kind: ClusterRoleBinding
metadata:
  name: admin-user
roleRef:
  apiGroup: rbac.authorization.k8s.io
  kind: ClusterRole
  name: cluster-admin
subjects:
- kind: ServiceAccount
  name: admin-user
  namespace: kube-system

7.獲取令牌（token）

[kubeadm@server1 ~]$ kubectl get secrets -n kube-system | grep admin
admin-user-token-zgt2v                           kubernetes.io/service-account-token   3      3m54s
[kubeadm@server1 ~]$ kubectl describe secrets admin-user-token-zgt2v -n kube-system

在這裏插入圖片描述

測試：

瀏覽器輸入：https://172.25.31.1:31912
在這裏插入圖片描述

在這裏插入圖片描述
在這裏插入圖片描述

注意：

  • 確保每個節點都加入鏡像
  • 每個節點都要有網關，並能上網，（剛開始要連網）
發表評論
所有評論
還沒有人評論，想成為第一個評論的人麼? 請在上方評論欄輸入並且點擊發布.
相關文章

日貨列表

毋忘國恥 愛我中華抵制日貨 匹夫有責日貨最好的替代品是中國人的尊嚴和對後代的責任感 1、家用電器及辦工器材等 　 索尼_SONY 佳能_CANON　J

luhaiman 2020-07-06 09:54:57

這4大決定性因素，讓你明白孩子爲什麼只選擇小天才電話手錶

在互聯網時代的衆多數碼產品中，有一款產品是孩子們必不可少的，那就是兒童電話手錶。兒童電話手錶對於小孩子的重要性相當於成年人對手機的需求。有了電話手錶，家長不僅可以跟孩子進行視頻通話，還可以看到孩子的具體位置，除了能夠滿足家長和孩子

艾永亮超级产品 2020-07-04 07:59:12

Nginx 的功能實現——基於Rhel7.3系列

主機環境：rhel7.3 selinux and firewalld disabled 主機名 ip 服務 server1 172.25.26.1 nginx server2 172.25.26.2 nginx

偶尔偶尔 2020-07-03 18:28:09

運用 Zabbix 構建企業大型監控系統——服務監控項的添加（httpd、nginx、mysql）

主機環境：rhel7.3 selinux and firewalld disabled 主機名 ip 服務 server1 172.25.254.1 zabbix server2 172.25.254.2 age

偶尔偶尔 2020-07-03 18:28:09

Mysql 的主從複製、基於gtid的主從複製和半同步複製

主機環境：rhel7.3 selinux and firewalld disabled 主機名 ip 服務 server3 172.25.254.3 mysql server4 172.25.254.4 mysq

偶尔偶尔 2020-07-03 18:28:09

Docker 容器與 swarm 集羣實戰——docker 數據卷

一、docker 卷管理基礎 如果不加-v指定卷位置，默認創建 [root@server1 ~]# docker run -d --name registry -p 5000:5000 registry:2 683706271

偶尔偶尔 2020-07-03 18:28:09

三臺服務器之對比

樓主主要對CDIO實作中接觸的三臺服務器進行比較: A：學生雲Ubuntu 14.04.2 LTS（原第二小組服務器） B：企業雲CentOS release 6.5 (Final)標配(A組服務器) C：企業雲CentOS

nanphonfy 2020-07-02 11:52:37

ansible自動化運維之playbook

編寫apache安裝文件 [devlops@server1 ansible]$ ls ansible.cfg inventory [devlops@server1 ansible]$ vim playbook.yml [devl

zy66996 2020-07-01 17:18:24

Docker（二）--搭建系統鏡像（ubuntu）以及強制推出容器後的恢復

一.概念解釋 1.鏡像的分層結構 共享宿主機的kerne base鏡像提供的是最小的Linux發行版 同一docker主機支持運行多種Linux發行版 採用分層結構的最大好處是:共享資源 2.Copy-on-Write可寫容

zy66996 2020-07-01 17:18:24

saltstack中的jinja模塊

1.編輯文件，添加jinja模塊 [root@server1 apache]# cat install.sls install-apache: pkg.installed: - pkgs: - httpd

zy66996 2020-07-01 17:18:13

Zabbix（五）--java環境監控和使用proxy服務代理

一.java環境監控 1.安裝tomcat和jdk環境 rpm -ivh jdk-8u121-linux-x64.rpm ##jdk環境可以直接安裝 tar zxf apache-tomcat-8.5.24.tar.gz -C

zy66996 2020-07-01 17:18:12

MFS分佈式文件系統簡介及其部署

實驗環境： server1：172.25.16.1 master server2：172.25.16.2 chunk server server3：172.25.16.3 chunk server found

zy66996 2020-07-01 17:18:12

Docker（ 八）docker的安全以及安全加固

一.基礎知識 1.Docker容器的安全性,很大程度上依賴於Linux系統自身,評 估Docker的安全性時,主要考慮以下幾個方面: Linux內核的命名空間機制提供的容器隔離安全 Linux控制組機制對容器資源的控制能力安全。

zy66996 2020-07-01 17:18:11

saltstack數據系統Grains和Pillar

一.Grains簡介 grains是Saltstack最重要的組件之一，grains的作用是收集被控主機的基本信息，這些信息通常都是一些靜態的數據，包括CPU、內核、操作系統、虛擬化等，在服務器端可以根據這些信息進行靈活定製，管理

zy66996 2020-07-01 17:18:11

ansible的安裝和部署

一.ansible介紹 簡介： 開源部署工具 開發語言：Python 特點：SSH協議通訊，全平臺，無需編譯，模塊化部署管理 作用：推送Playbook進行遠程節點快速部署 優點： 輕量級無客戶端（Agentless） 使用

zy66996 2020-07-01 17:18:11