kubernetes（2）k8s环境搭建：kubeadm安装、二进制方式安装

悠悠 2024-04-06 10:29 57阅读 0赞

## 环境平台规划 ##

k8s里面之前我们了解过，主要的内容是master和node，所有这里可以划分为

1.  单master集群
2.  多master集群

### 单master集群 ###

![在这里插入图片描述][4756815e31384bf892bea84409677155.png]

缺点：master挂掉后，便不能去管理node节点了

### 多master集群 ###

与之前的区别便是多了master

![在这里插入图片描述][2f624f2cd63e445db9b9ec8a5e300f87.png]

## 服务器硬件要求 ##

### 测试环境 ###

master：cpu至少两核，内存4g以上，硬盘至少20g以上

node：cpu至少4核以上，内存8g+，硬盘40g+

### 生产环境 ###

master：cpu至少8核，内存16g以上，硬盘至少100g以上

node：cpu至少16核以上，内存64g+，硬盘500g+

## 搭建方式 ##

### 概述 ###

常见的有两种方式  
方式1，Kubeadm ：

1.  Kubeadm 是一个 K8s 部署工具，`提供 kubeadm init 和 kubeadm join`，用于快速部署 Kubernetes 集群。
2.  不需要我们再去做额外的处理，只需要使用上面的两个命令去见操作
3.  官方地址：[https://kubernetes.io/docs/reference/setup-tools/kubeadm/kubeadm/][https_kubernetes.io_docs_reference_setup-tools_kubeadm_kubeadm]
4.  Kubeadm 降低部署门槛，但屏蔽了很多细节，遇到问题很难排查

方式2，二进制包,

1.  从 github 下载发行版的二进制包，手动部署每个组件，组成 Kubernetes 集群。
2.  如果想更容易可控，推荐使用二进制包部署 Kubernetes 集群，虽然手动部署麻烦点，期间可以学习很多工作原理，也利于后期维护。

下面便去搭建一个单master集群

### 方式一：kubeadm ###

#### 了解 ####

kubeadm 是官方社区推出的一个用于快速部署 kubernetes 集群的工具，这个工具能通过两条指令完成一个kubernetes 集群的部署：

1.  创建一个 Master 节点`kubeadm init`
2.  将 Node 节点加入到当前集群中`$ kubeadm join <Master 节点的 IP 和端口 >`

#### 第一步：服务器环境(安装三台虚拟机) ####

要求

- 一台或多台机器，操作系统 CentOS7.x-86_x64
    - 硬件配置：2GB 或更多 RAM，2 个 CPU 或更多 CPU，硬盘 30GB 或更多
    - 集群中所有机器之间网络互通
    - 可以访问外网，需要拉取镜像
    - 禁止 swap 分区

详细的自己去百度

这三台虚拟机中，有两台作为node，另一台作为master

#### 第二步：对虚拟机的环境初始化 ####

三台机器都需要做下面的步骤

##### 关闭防火墙 #####

# 关闭防火墙
    systemctl stop firewalld
    systemctl disable firewalld

##### 关闭selinux #####

# 关闭selinux
    
    # 永久
    sed -i 's/enforcing/disabled/' /etc/selinux/config
    
    # 临时关闭
    setenforce 0

##### 关闭swap #####

# 关闭swap
    swapoff -a  # 临时
    sed -ri 's/.*swap.*/#&/' /etc/fstab    # 永久

##### 根据规划设置主机名 #####

# 根据规划设置主机名
    hostnamectl set-hostname <hostname>

设置主机名

hostnamectl set-hostname k8smaster
    hostnamectl set-hostname k8snode1
    hostnamectl set-hostname k8snode2

##### 在master添加hosts #####

只是这种master的机器上设置

# 在master添加hosts
    cat >> /etc/hosts << EOF
    192.168.44.146 k8smaster
    192.168.44.145 k8snode1
    192.168.44.144 k8snode2
    EOF

##### 将桥接的IPv4流量传递到iptables的链 #####

三个机器上都需要去设置

# 将桥接的IPv4流量传递到iptables的链
    cat > /etc/sysctl.d/k8s.conf << EOF
    net.bridge.bridge-nf-call-ip6tables = 1
    net.bridge.bridge-nf-call-iptables = 1
    EOF

sysctl --system  # 生效

##### 时间同步 #####

# 时间同步
    yum install ntpdate -y
    ntpdate time.windows.com

#### 第三步：所有节点安装Docker、kubeadm、kubelet ####

Kubernetes默认CRI（容器运行时）为Docker，因此先安装Docker。

##### 安装Docker #####

下载

$ wget https://mirrors.aliyun.com/docker-ce/linux/centos/docker-ce.repo -O /etc/yum.repos.d/docker-ce.repo

安装

$ yum -y install docker-ce-18.06.1.ce-3.el7

设置为开机自启

$ systemctl enable docker && systemctl start docker

查看docker的version

$ docker --version
    Docker version 18.06.1-ce, build e68fc7a

更换阿里云的docker仓库

$ cat > /etc/docker/daemon.json << EOF
    {
      "registry-mirrors": ["https://b9pmyelo.mirror.aliyuncs.com"]
    }
    EOF

查看是否更新成功

$ docker info

如果是下面的内容则证明修改成功

#### 附：添加阿里云YUM软件源 ####

方便后面去下载等

$ cat > /etc/yum.repos.d/kubernetes.repo << EOF
    [kubernetes]
    name=Kubernetes
    baseurl=https://mirrors.aliyun.com/kubernetes/yum/repos/kubernetes-el7-x86_64
    enabled=1
    gpgcheck=0
    repo_gpgcheck=0
    gpgkey=https://mirrors.aliyun.com/kubernetes/yum/doc/yum-key.gpg https://mirrors.aliyun.com/kubernetes/yum/doc/rpm-package-key.gpg
    EOF

##### 安装kubeadm，kubelet和kubectl #####

由于版本更新频繁，这里指定版本号部署：

安装kubeadm，kubelet和kubectl

yum install -y kubelet-1.18.0 kubeadm-1.18.0 kubectl-1.18.0

设置成开机启动

systemctl enable kubelet

#### 第四步：部署Kubernetes Master ####

只是需要在192.168.31.61（Master节点上面）执行。

1.  对master节点进行初始化操作，这时候docker便会去拉取对应的镜像
    
        kubeadm init \
          --apiserver-advertise-address=192.168.44.146 \
          --image-repository registry.aliyuncs.com/google_containers \
          --kubernetes-version v1.18.0 \
          --service-cidr=10.96.0.0/12 \
          --pod-network-cidr=10.244.0.0/16
    
    上面的命令执行完后，出现下面的信息则证明执行成功了  
    ![在这里插入图片描述][948126812bc446c7a70265d011887711.png]
    
    查看docker的镜像  
    ![在这里插入图片描述][d24635dafe734a429ad972075559497b.png]
2.  由于默认拉取镜像地址k8s.gcr.io国内无法访问，这里指定阿里云镜像仓库地址。
3.  使用kubectl工具：
    
        mkdir -p $HOME/.kube
        sudo cp -i /etc/kubernetes/admin.conf $HOME/.kube/config
        sudo chown $(id -u):$(id -g) $HOME/.kube/config
    
    ![在这里插入图片描述][051b69827161405a8bf24816763ad24f.png]
    
    查看node节点
    
        kubectl get nodes
    
    ![在这里插入图片描述][4aeb77506c8b459586032bd7f90e37f6.png]

#### 第五步：将节点加入到master中 ####

在之前master初始化后，会出现下面的内容，下面所使用的命令便是直接复制的这一段内容  
![在这里插入图片描述][dcb3f7e2070345f68bbe00363aeed866.png]

在192.168.1.12/13（在Node节点上）执行。

1.  向集群添加新节点，执行在kubeadm init输出的kubeadm join命令：
    
        $ kubeadm join 192.168.1.11:6443 --token esce21.q6hetwm8si29qxwn \
            --discovery-token-ca-cert-hash sha256:00603a05805807501d7181c3d60b478788408cfe6cedefedb1f97569708be9c5
2.  上面的token有效期为24小时，当过期之后，该token就不可用了。这时就需要重新创建token，操作如下：
    
        kubeadm token create --print-join-command

现在回到master服务器上，使用命令查看节点信息，可以发现节点已经完成了添加，现在这些节点的状态不太对，所以还需要去配置一下网络  
![在这里插入图片描述][96f52f0fc4e443fc845b76a009285d0a.png]

#### 第六步：部署CNI网络插件 ####

1、下载

wget https://raw.githubusercontent.com/coreos/flannel/master/Documentation/kube-flannel.yml

默认镜像地址无法访问，sed命令修改为docker hub镜像仓库。

2、安装yum源

kubectl apply -f https://raw.githubusercontent.com/coreos/flannel/master/Documentation/kube-flannel.yml

3、查看是否运行起来了

kubectl get pods -n kube-system

![在这里插入图片描述][43dca51f2be540c48b27ba9a43f7d19e.png]

4、查看节点是否都成功运行了  
![在这里插入图片描述][5a6e767f9483412ab4f114845be03ad5.png]

#### 第七步：测试kubernetes集群 ####

在Kubernetes集群中创建一个pod，验证是否正常运行：

1.  拉取nginx镜像
    
        kubectl create deployment nginx --image=nginx
    
    ![在这里插入图片描述][37678d9689e44e3281160789fbda3919.png]
2.  暴露端口，使通过网络可以去进行访问
    
        kubectl expose deployment nginx --port=80 --type=NodePort
3.  查看状态
    
        $ kubectl get pod,svc
    
    ![在这里插入图片描述][11e9d140f158478297e43f40ffa52588.png]

打开浏览器，进行访问  
![在这里插入图片描述][1f582d385cac4ad59c12a7a891a16fe3.png]

### 方式二：二进制方式搭建k8s集群 ###

#### 第一步：选择服务器（两台虚拟机） ####

要求

在这里选择了两台虚拟机，一台作为master，一台作为node

#### 第二步：初始化服务器（两台虚拟机初始化） ####

##### 关闭防火墙 #####

临时关闭防火墙

systemctl stop firewalld

永久关闭防火墙

systemctl disable firewalld

##### 关闭 selinux #####

永久关闭

sed -i 's/enforcing/disabled/' /etc/selinux/config

临时关闭

setenforce 0

##### 关闭 swap #####

临时关闭

swapoff -a

永久关闭

sed -ri 's/.*swap.*/#&/' /etc/fstab

##### 根据规划设置主机名 #####

hostnamectl set-hostname <hostname>

![在这里插入图片描述][950a67dde723476885af46a2df7a87cb.png]  
![在这里插入图片描述][655fdbfd05164f479c7af72f4ac0605c.png]

##### 在 master 添加 hosts #####

cat >> /etc/hosts << EOF
    192.168.44.147 m1
    192.168.44.148 n1
    EOF

##### 将桥接的 IPv4 流量传递到 iptables 的链 #####

先执行下面的命令

cat > /etc/sysctl.d/k8s.conf << EOF
    net.bridge.bridge-nf-call-ip6tables = 1
    net.bridge.bridge-nf-call-iptables = 1
    EOF

然后进行生效生效

sysctl --system

##### 时间同步 #####

先进行进行安装

yum install ntpdate -y

然后进行时间同步

ntpdate time.windows.com

#### 第三步：为etcd和apiserver生成自签证书 ####

##### 准备 cfssl 证书生成工具 #####

cfssl 是一个开源的证书管理工具，使用 json 文件生成证书，相比 openssl 更方便使用。

找任意一台服务器操作，这里用 Master 节点

1.  首先，依次执行下面的命令，将对应的包下载并移动到对应的目录
    
        wget https://pkg.cfssl.org/R1.2/cfssl_linux-amd64
        
        wget https://pkg.cfssl.org/R1.2/cfssljson_linux-amd64
        
        wget https://pkg.cfssl.org/R1.2/cfssl-certinfo_linux-amd64
        
        chmod +x cfssl_linux-amd64 cfssljson_linux-amd64 cfssl-certinfo_linux-amd64
        
        mv cfssl_linux-amd64 /usr/local/bin/cfssl
        
        mv cfssljson_linux-amd64 /usr/local/bin/cfssljson
        
        mv cfssl-certinfo_linux-amd64 /usr/bin/cfssl-certinfo
2.  进入上面移动到的目录下面，查看文件  
    ![在这里插入图片描述][f3158ef81fb14413aa4f0f975e6216d3.png]
3.  执行脚本，查看执行后的情况  
    ![在这里插入图片描述][ccfc49db317e43ecb234249d7725dc66.png]
4.  查看下面的脚本文件内容，可以发现两行内容，第一行的内容便是对证书进行初始化操作  
    ![在这里插入图片描述][81e5ab27aa794d6a82c335e33539aa6a.png]
5.  初始化证书
    
        cfssl gencert -initca ca-csr.json | cfssljson -bare ca -
    
    ![在这里插入图片描述][ce789110979d4434a42f73cd63aa16cf.png]
6.  初始化操作结束后，会生成两个文件，查看这两个文件
    
        ls *pem
    
    ![在这里插入图片描述][62cd14c7e11540a7b210f24fc2dfe368.png]
7.  查看json文件
    
        cat server-csr.json
    
    ![在这里插入图片描述][2ead94afd73746fe812b351edd440997.png]
8.  修改上面hosts里面的ip，改为当前的网络ip  
    ![在这里插入图片描述][6a9d1de7ab2d40c7b7e38bdb43acb549.png]
9.  执行之前脚本里面的第二行内容
    
        cfssl gencert -ca=ca.pem -ca-key=ca-key.pem -config=ca-config.json -profile=www server-csr.json | cfssljson -bare server
    
    ![在这里插入图片描述][e2bf81dede804432a998ea52d9671f54.png]  
    查看进行结果  
    ![在这里插入图片描述][73bdc8b1e4a9402e9aebd5b0125e7bc5.png]  
    ![在这里插入图片描述][9fb8a1ab78f64623ae2b62bdeeec7d53.png]
10. 查看server相关的内容
    
        ls server*
    
    如下，这些便是最终生成的证书文件  
    ![在这里插入图片描述][f3bfdc0fe2fc45139a3ff2d788850ee6.png]

#### 第四步：部署etcd集群 ####

1.  从 Github 下载二进制文件  
    下载地址：[https://github.com/etcd-io/etcd/releases/download/v3.4.9/etcd-v3.4.9-linux-amd64.tar.gz][https_github.com_etcd-io_etcd_releases_download_v3.4.9_etcd-v3.4.9-linux-amd64.tar.gz]
2.  将下载的tar.gz解压，并查看其解压的内容  
    ![在这里插入图片描述][e91259f25c844050a47b9380c2acce6f.png]  
    ![在这里插入图片描述][e7f7ce833c9241fe909f60cf9f10874a.png]  
    将etcd.service这个文件复制到system里面
    
        cp etcd.service /usr/lib/systemd/system/
    
    ![在这里插入图片描述][6d746ee5cc5b45ae980522d6b8adcb71.png]
3.  将ssl目录下面的证书替换为之前生成的证书  
    删除ssl目录下面的内容  
    ![在这里插入图片描述][75a9cf1d0038441b84629db192b37fe7.png]  
    将之前生成的证书文件复制过来
    
        cp /root.TLS/etcd/{ca.server,server-key}.pem ssl/
    
    ![在这里插入图片描述][dd050ac6202b4eca84fdaaec2eaa41c4.png]  
    ![在这里插入图片描述][553cfd3c86184b9e874a22e83d07d843.png]
4.  查看etcd的配置文件，并修改目录里面的etcd.conf配置文件  
    ![在这里插入图片描述][e126a2a9a067469a82bb22ef2c11dabf.png]  
    修改为如下的ip，现在只是两台

![在这里插入图片描述][82314824076b446fba6c84de4b51d4af.png]

1.  将当前etcd里面的内容发送到其他的服务器中去
    
        scp -r etcd root@192.168.44.148:/opt/
    
    ![在这里插入图片描述][282a2d6e300a4e17a1cba8c6c512d02a.png]  
    进入发送到的服务器中，查看是否发送成功  
    ![在这里插入图片描述][56ff66e5a68149869112d6e4c09d7a8c.png]  
    证明发送成功了
2.  将之前生成的其他文件也一起发送到node节点中  
    ![在这里插入图片描述][7f6b4b2b07d749b3bdde2615347de734.png]
3.  在其他节点中分别修改 etcd.conf 配置文件中的节点名称和当前服务器 IP  
    ![在这里插入图片描述][c6c1b95cfcf7410cb3f13e09053779e4.png]  
    进行修改  
    ![在这里插入图片描述][f70345a107a449b6bf0fb487d19275f8.png]
4.  在master节点上设置：启动并设置开机启动  
    重加载
    
        systemctl daemon-reload
    
    执行
    
        systemctl start etcd
    
    设置开机启动
    
        systemctl enable etcd
5.  查看状态  
    master  
    ![在这里插入图片描述][bb5dec10dcc6402cad6a471b682ecdab.png]  
    node
    
    ![在这里插入图片描述][e8393508853f4e24a6c8542036d90f5d.png]

#### 第五步：为APIServer自签证书 ####

有许多的node节点，及一个master节点，master节点的入口称为apiserver，在访问过程中，apiserver是通过https的方式进行访问的，所有需要对其做一个证书的自签，有下面的两种方式进行访问

1.  添加可信赖的ip列表
2.  发送请求时，携带ca证书进行发送
    
    > 一些场景中不能携带，所以一般使用第一种方式

方式一实现的步骤：

1.  进入下面的目录中  
    ![在这里插入图片描述][27562ff532734defa56d0b59cc5e9817.png]
2.  查看两个json文件内容  
    kube-proxy-csr.json  
    ![在这里插入图片描述][d63a0fdce03444efbff93d72ae93693a.png]  
    server-ccsr.json，这里面便展示了可信赖的ip列表  
    ![在这里插入图片描述][2c7ed937e70b4e23b464f5642f882dc1.png]
3.  修改server-ccsr.json文件内容，添加可信赖的ip列表，上面的是修改过的  
    ![在这里插入图片描述][42b83e994c7640b1af65b2f0234afef5.png]
4.  执行下面的sh文件  
    ![在这里插入图片描述][b617c7a2f2e64745b9bfa81a483e2070.png]  
    执行完后，便会生成自签证书（pen文件），如下：  
    ![在这里插入图片描述][7de71c5c119a4304ab59a607b0e5679a.png]

#### 第六步：部署master组件 ####

在git上面现在对应的文件

下载地址：[https://github.com/kubernetes/kubernetes/blob/master/CHANGELOG/CHANGELOG-1.18.md\#v1183][https_github.com_kubernetes_kubernetes_blob_master_CHANGELOG_CHANGELOG-1.18.md_v1183]  
注：打开链接你会发现里面有很多包，下载一个 server 包（如下）就够了，包含了 Master 和 Worker Node 二进制文件。  
![在这里插入图片描述][748930419ecb420486cdbf34d754e589.png]

将下载的文件放到linux的root目录下，解压二进制包  
![在这里插入图片描述][69e588af9331420cb2444d307f2d3a45.png]  
解压结果  
![在这里插入图片描述][f1b592f50678451183453239691a6218.png]

##### 6.1 目录结构查看及配置文件的修改 #####

进入kubernetes目录，查看里面的内容，

1.  进入bin目录：可以发现里面全是可执行的文件  
    ![在这里插入图片描述][487790eefee6489aa88f648c4c93bd95.png]
2.  进入cfg，这里面全是组件的一些配置文件  
    ![在这里插入图片描述][f7e949cd488e462d8157a7f65c8f2af7.png]
3.  查看剩下的目录内容，logs和ssl目录里面的内容都为空  
    ![在这里插入图片描述][be1526fcbf3e462cb609367b98446a28.png]
4.  将之前生成的证书文件复制到ssl目录下面  
    ![在这里插入图片描述][61f636b237784652ad3a657592ec54b4.png]  
    因为目前暂时不需要kube-proxy\*文件，所以将这些都删除掉  
    ![在这里插入图片描述][973a0848b10e4433b5d8a88533a56fb1.png]
5.  查看配置文件  
    ![在这里插入图片描述][0c6485c59b8747ab9c8fb14224a56131.png]  
    查看kube-apiserver.conf文件，这个文件里面的内容需要修改  
    ![在这里插入图片描述][fbfe7ec4353748ce8d69b2ccebc0caab.png]  
    查看kube-controller-manager.conf文件，这个文件里面的内容不需要去修改  
    ![在这里插入图片描述][7caf115c4ae0458497c1203bb73efa2f.png]  
    查看kube-sheduler.conf配置文件，这个文件也不需要去进行修改  
    ![在这里插入图片描述][b010f965b6bc4460bd89a42bb86eaa80.png]

查看kube-apiserver.conf文件，该文件内容说明：  
![在这里插入图片描述][fbfe7ec4353748ce8d69b2ccebc0caab.png]  
注：上面两个\\ \\ 第一个是转义符，第二个是换行符，使用转义符是为了使用 EOF 保留换行符。

1.  –logtostderr：启用日志
2.  —v：日志等级
3.  –log-dir：日志目录
4.  –etcd-servers：etcd 集群地址
5.  –bind-address：监听地址
6.  –secure-port：https 安全端口
7.  –advertise-address：集群通告地址
8.  –allow-privileged：启用授权
9.  –service-cluster-ip-range：Service 虚拟 IP 地址段
10. –enable-admission-plugins：准入控制模块
11. –authorization-mode：认证授权，启用 RBAC 授权和节点自管理
12. –enable-bootstrap-token-auth：启用 TLS bootstrap 机制
13. –token-auth-file：bootstrap token 文件
14. –service-node-port-range：Service nodeport 类型默认分配端口范围
15. –kubelet-client-xxx：apiserver 访问 kubelet 客户端证书
16. –tls-xxx-file：apiserver https 证书
17. –etcd-xxxfile：连接 Etcd 集群证书
18. –audit-log-xxx：审计日志

修改 kube-apiserver.conf文件的内容步骤：更换配置文件的ip地址

1.  位置1  
    ![在这里插入图片描述][355189cf42c649a89ce40868edf3ea6b.png]
2.  位置2  
    ![在这里插入图片描述][caf885f09dec4ba59ddc64f78619760d.png]
3.  位置3  
    ![在这里插入图片描述][ee8fee29077c43eca670d8b2c39b0543.png]

最后保存退出

##### 6.2 启动并设置开机启动 #####

在启动前面，先做下面的步骤：

1.  将之前的kubernetes目录放到opt目录下面  
    ![在这里插入图片描述][99d47f4b65d5459da5f9ec91b31d3d17.png]
2.  将剩余的service文件放到system目录里面去，变为可执行文件  
    ![在这里插入图片描述][ab7fd679982a403e91b8de3bcfedf125.png]
3.  将kubectl这个目录放到system这个目录里面去  
    ![在这里插入图片描述][911f9bb627804b3b8e14ba9e349f4b96.png]

最后，依次执行下面的三行命令：

systemctl daemon-reload
    systemctl start kube-apiserver
    systemctl enable kube-apiserver

1.  启动，并查看进程，便发现启动成功了  
    ![在这里插入图片描述][842320affe7d484c9f63baefb3141079.png]
2.  剩下的两个命令也是一样的操作  
    ![在这里插入图片描述][0412b58661f44f3fa200dba31c2c8f5e.png]
3.  设置开机启动
    
        for i in ${ls /opt/kubernetes/bin};do systemctl enable $i;done
    
    ![在这里插入图片描述][8fe3523294ce4c84b1b5db65d511ddb5.png]

现在可以进入logs目录查看日志信息  
![在这里插入图片描述][a26bbc60ec7f40ce8bbfd6776e1cc8f0.png]  
下面便是启动信息  
![在这里插入图片描述][c8b60e502bb24b5aa67f449377f9d75c.png]

现在便可以在~目录下，直接使用kubectl命令了，如下  
![在这里插入图片描述][e041ef99aa9f4406af073cce833c9aa7.png]

##### 6.3 授权 kubelet-bootstrap 用户允许请求证 #####

直接执行下面的这段命令即可

kubectl create clusterrolebinding kubelet-bootstrap \
    --clusterrole=system:node-bootstrapper \
    --user=kubelet-bootstrap

#### 第七步：部署node组件 ####

下面的操作都是在node节点下进行的

##### 7.1 docker安装 #####

docker下载地址：[https://download.docker.com/linux/static/stable/x86\_64/docker-19.03.9.tgz][https_download.docker.com_linux_static_stable_x86_64_docker-19.03.9.tgz]

安装步骤：

1.  解压压二进制包
    
        tar zxvf docker-19.03.9.tgz
    
    ![在这里插入图片描述][59fbe9e38b2b451d81a1407304e987f3.png]
2.  移动目录  
    将docker这个文件移动到usr的bin目录下
    
        mv docker/*  /usr/bin/
    
    将docker.service移动到system目录下
    
        mv docker.service /usr/lib/systemd/system
    
    将daemon.json文件放到etc目录下的docker文件夹里面
    
        mkdir /etc/docker
        mv daemon.json /etc/docker/
    
    ![在这里插入图片描述][b712ca9575bc41c5a1e3f668ff5b9bee.png]
3.  修改配置文件的内容，设置为阿里云镜像
    
        {
        	"registry-mirrors": ["https://b9pmyelo.mirror.aliyuncs.com"]
        }
4.  启动并设置开机启动
    
        systemctl daemon-reload
    
    启动
    
        systemctl start docker
    
    开机启动
    
        systemctl enable docker
    
    ![在这里插入图片描述][618d6a23530d42889621886b350921ea.png]

##### 7.2 kubelet、kube-proxy #####

解压之前下载的**kubernetes-node-linux-amd64.tar.gz**包，后面会有这些文件  
执行步骤：

1.  解压并移动对应的文件  
    将service可执行文件移动到system目录下面  
    ![在这里插入图片描述][5b57f56f540e4ad487643b8a56e3bf42.png]  
    将kubernetes移动到opt目录下去  
    ![在这里插入图片描述][324eb37db86045a198c0f692239bf1c6.png]
2.  修改kubernetes里面的配置文件  
    修改bootstrap.kubeconfig文件里面  
    ![在这里插入图片描述][af9a8e74fc014ec49c1de80bf788ef90.png]  
    将配置文件里面的`ip修改为当前master节点的ip`  
    ![在这里插入图片描述][bde56c6514634c40af4eda535776cc7f.png]  
    修改kub-proxy.conf配置文件内容  
    ![在这里插入图片描述][fde2c2b51aa84b0aad1ce10eadbfb142.png]  
    将配置文件里面的`ip修改为当前master节点的ip`  
    ![在这里插入图片描述][57a51613154447529a5e7516c5062bc2.png]  
    修改kubelet.conf配置文件  
    ![在这里插入图片描述][8e0a3a608c7e4585bff36e9ce54d52b4.png]  
    `修改主机名称为当前node节点的主机名称n1`  
    ![在这里插入图片描述][a1e1be2213b94e3a8d351b620cddebe9.png]  
    修改kubelet.proxy-config.yml文件  
    ![在这里插入图片描述][6466b58c25524baf92f1c12e5f42aa83.png]  
    修改主机名称为当前node节点的主机名称n1  
    ![在这里插入图片描述][c85b0bd63ffc4a2cac2cd52111c0c71f.png]
3.  查看是否还要遗漏的ip没有修改  
    可以发现，都已经修改了  
    ![在这里插入图片描述][16a6fa35118d4e8b923bd4d96aa70019.png]
4.  在当前node节点中添加自签证书，这个自签证书从之前在master节点的中去获取  
    查看master节点中自签证书  
    ![在这里插入图片描述][390e41e9152c4d11b2ae897a15cdb6d6.png]  
    上面的自签证书是从master节点中的另一个目录复制过来的，这里我们进入之前生成自签证书的原目录去  
    ![在这里插入图片描述][a6e5fedccdb44e13b767a47d960b94ba.png]  
    将node节点对应的自签证书复制到node节点的服务器中  
    ![在这里插入图片描述][6286c769969c45079ce2f5401d306c2d.png]  
    查看是否发送到node节点中  
    ![在这里插入图片描述][8a49e30d8a334d93a0409ac393d64ee6.png]
5.  启动kubelet并设置开机启动  
    重启
    
        systemctl daemon-reload
    
    启动
    
        systemctl start kubelet
    
    设置开机启动
    
        systemctl enable kubelet
    
    ![在这里插入图片描述][304d2c4e76c343548e42d9ec51df4c77.png]
6.  启动kube-proxy并设置开机启动  
    重启
    
        systemctl daemon-reload
    
    启动
    
        systemctl start kube-proxy
    
    设置开机启动
    
        systemctl enable  kube-proxy
    
    ![在这里插入图片描述][9564a5f83ece4075a94f329cea696825.png]
7.  批准 kubelet 证书申请并加入集群  
    在master节点查看授权请求，会发现这里有一个授权请求
    
        kubectl get csr
    
    ![在这里插入图片描述][2669856a754d4d3d8563a39e371d4df6.png]  
    对这个授权请求进行批准，后面的名字是上面查看授权请求的NAME
    
        kubectl certificate approve node-csr-xxx
    
    在master节点查看节点，我们便发现之前的node节点已经被添加进去了
    
        kubectl get c
    
    ![在这里插入图片描述][52bb87ac221d473297091f5c4126a95d.png]  
    这里由于网络插件还没有部署，节点会没有准备就绪 NotReady

#### 第七步：部署CNI集群网络 ####

首先准备好 CNI 二进制文件：  
下载地址：  
[https://github.com/containernetworking/plugins/releases/download/v0.8.6/cni-plugins-linux-amd64-v0.8.6.tg][https_github.com_containernetworking_plugins_releases_download_v0.8.6_cni-plugins-linux-amd64-v0.8.6.tg]  
**这个链接好像过期了，各位到时候自己在网上找吧**

下面的操作都在node节点下进行  
操作步骤如下：

1.  创建bin和net.d目录
    
        mkdir /opt/cni/bin /etc/cin/net.d -p
    
    ![在这里插入图片描述][225459978035469cb9470914fa67109b.png]
2.  进入cni目录  
    ![在这里插入图片描述][12e7e92a35fc44cdab79d66641424615.png]
3.  将解压cni内容移动到之前的cni目录下
    
        tar cni-xxx -C /opt/cni/bin/
    
    ![在这里插入图片描述][2a1d8cded303493eadae830ec7966fed.png]  
    在上面的bin目录下查看解压后的内容  
    ![在这里插入图片描述][47c8643c68c04c59a5206385539a8985.png]

现在开始在master节点进行操作

1.  下载文件
    
        wget https://raw.githubusercontent.com/coreos/flannel/master/Documentation/kube-flannel.yml
2.  执行该文件
    
        kubectl apply -f kube-flannel.yml
    
    ![在这里插入图片描述][cbe0628a8a4c45d1a71cf06f3af8e310.png]
3.  查看状态
    
        kubectl get pods -n kube-system
    
    ![在这里插入图片描述][cd945e5cc1de4965a4adb7638ccaacee.png]  
    查看node节点状态，现在node节点便成为了准备的状态了  
    ![在这里插入图片描述][9a5d37696fda4044b7b4033551787db9.png]

#### 第八步：测试kubernetes集群 ####

首先，下载nginx镜像

kubectl create deployment nginx --image=nginx

其次，对外暴露一个端口

kubectl expose deployment nginx --port=80 --type=NodePort

然后，查看

kubectl get pod,svc

![在这里插入图片描述][514ac49da5ff4e59bdf265a8019cea88.png]

最后，在浏览器使用任意一个node节点的ip便可以去访问了  
![在这里插入图片描述][530f45079d8b4f93be2da2d24dc466d2.png]

### 总结 ###

![在这里插入图片描述][df7040838cba459795dea9141e7790d9.png]

[4756815e31384bf892bea84409677155.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/06/8ff40cdffc1a4a629b03157638c1e41e.png
[2f624f2cd63e445db9b9ec8a5e300f87.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/06/a0f41474c5c44f9fabf51359ca8ee8b4.png
[https_kubernetes.io_docs_reference_setup-tools_kubeadm_kubeadm]: https://kubernetes.io/docs/reference/setup-tools/kubeadm/kubeadm/
[948126812bc446c7a70265d011887711.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/06/efaf82ee1b1a4d1bbe398132714c2b59.png
[d24635dafe734a429ad972075559497b.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/06/2d2c6affabac45e18ea563935c4fca36.png
[051b69827161405a8bf24816763ad24f.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/06/c0ad976cda9d46acba193b8e2f690012.png
[4aeb77506c8b459586032bd7f90e37f6.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/06/7c3bd079a8844894b70a2ce152fa9f50.png
[dcb3f7e2070345f68bbe00363aeed866.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/06/a9449bbeb9b443eda6e2a31842248230.png
[96f52f0fc4e443fc845b76a009285d0a.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/06/b512e736f87c4f879ab9c94ed295fa5a.png
[43dca51f2be540c48b27ba9a43f7d19e.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/06/5efcd41e88a24b77ac756a4800d62863.png
[5a6e767f9483412ab4f114845be03ad5.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/06/f148e76c1e9a49cca89d6c8fe7fcf63a.png
[37678d9689e44e3281160789fbda3919.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/06/4593581bc70e4927b9f540356def800f.png
[11e9d140f158478297e43f40ffa52588.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/06/5d49376e282e4bdfab016fd42b0bc757.png
[1f582d385cac4ad59c12a7a891a16fe3.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/06/3505626b728e4817ad644d4faa7ecda9.png
[950a67dde723476885af46a2df7a87cb.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/06/b3f93c927f194b5bb6235a4fb457aef8.png
[655fdbfd05164f479c7af72f4ac0605c.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/06/43f79c88585440b8ac48bf94190a933a.png
[f3158ef81fb14413aa4f0f975e6216d3.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/06/bb0b813745274e35af622f32fb18cad1.png
[ccfc49db317e43ecb234249d7725dc66.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/06/8d8c95a16820436aba3ae70466e83846.png
[81e5ab27aa794d6a82c335e33539aa6a.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/06/286504e5cf59444b89022e80ce17ff0b.png
[ce789110979d4434a42f73cd63aa16cf.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/06/f9f729a7125e4403becfa702d28827c2.png
[62cd14c7e11540a7b210f24fc2dfe368.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/06/eee324c8fc674d1aba195c0f55be2996.png
[2ead94afd73746fe812b351edd440997.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/06/09163435137143588c24fc45fb27fcc9.png
[6a9d1de7ab2d40c7b7e38bdb43acb549.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/06/d9759226462f405593eb38aee6af9ef8.png
[e2bf81dede804432a998ea52d9671f54.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/06/eb4e1d33e18f491699fdd2798e23b05c.png
[73bdc8b1e4a9402e9aebd5b0125e7bc5.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/06/f585b67be9e24b08a532ca1ec2257984.png
[9fb8a1ab78f64623ae2b62bdeeec7d53.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/06/dc0630c422ed4a14bce218f6a3dbb17b.png
[f3bfdc0fe2fc45139a3ff2d788850ee6.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/06/84658db062ea41ea8db8313681462b04.png
[https_github.com_etcd-io_etcd_releases_download_v3.4.9_etcd-v3.4.9-linux-amd64.tar.gz]: https://github.com/etcd-io/etcd/releases/download/v3.4.9/etcd-v3.4.9-linux-amd64.tar.gz
[e91259f25c844050a47b9380c2acce6f.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/06/05b09ef3fc2f40ef80baef6416048c4d.png
[e7f7ce833c9241fe909f60cf9f10874a.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/06/b2c3853c0a514193bb96522cc101acf3.png
[6d746ee5cc5b45ae980522d6b8adcb71.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/06/d7161d51f99046a2998052dc5aa31ad8.png
[75a9cf1d0038441b84629db192b37fe7.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/06/f5e2395ccd244fc69f5ee84a79c2b43b.png
[dd050ac6202b4eca84fdaaec2eaa41c4.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/06/c437fb3382e14e1eb96d8f69e1de8211.png
[553cfd3c86184b9e874a22e83d07d843.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/06/5d6b1b7cd23047318f11fb299fe658e9.png
[e126a2a9a067469a82bb22ef2c11dabf.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/06/286b49d9bf7a4fcfa4b53d67910a3010.png
[82314824076b446fba6c84de4b51d4af.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/06/fe3256cf890a470abf87cfb725053c98.png
[282a2d6e300a4e17a1cba8c6c512d02a.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/06/0ffaf7293b404218b29970237d6c8eb9.png
[56ff66e5a68149869112d6e4c09d7a8c.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/06/0d20319febfb47d890ed4324b81aa26a.png
[7f6b4b2b07d749b3bdde2615347de734.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/06/926e72552b0e4750b65b87ec413f47d3.png
[c6c1b95cfcf7410cb3f13e09053779e4.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/06/7752daec98bf4228a2cb65c115fcad5b.png
[f70345a107a449b6bf0fb487d19275f8.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/06/f57592b15604406f8dfae43d4c123a4d.png
[bb5dec10dcc6402cad6a471b682ecdab.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/06/38fb0004f3a34e36aa5d67d312675b49.png
[e8393508853f4e24a6c8542036d90f5d.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/06/a77621529b5f42d58f6dfd214ee76566.png
[27562ff532734defa56d0b59cc5e9817.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/06/86b832bd0fc64549821af02cad142484.png
[d63a0fdce03444efbff93d72ae93693a.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/06/df120d6ff90547fb8acbacf4c2966be3.png
[2c7ed937e70b4e23b464f5642f882dc1.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/06/2b58c89507aa46b2adf69a79999591bd.png
[42b83e994c7640b1af65b2f0234afef5.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/06/f2de4b22bde147028e54f212578f5cff.png
[b617c7a2f2e64745b9bfa81a483e2070.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/06/9e8731e3ff6e4fd0b9c40cc5224b09ed.png
[7de71c5c119a4304ab59a607b0e5679a.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/06/3cca7843c7ee44e4902590cb47e86a51.png
[https_github.com_kubernetes_kubernetes_blob_master_CHANGELOG_CHANGELOG-1.18.md_v1183]: https://github.com/kubernetes/kubernetes/blob/master/CHANGELOG/CHANGELOG-1.18.md#v1183
[748930419ecb420486cdbf34d754e589.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/06/95631679f8d94410a08d724f1e54f795.png
[69e588af9331420cb2444d307f2d3a45.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/06/fe4af7a26f644261a1ae4dc609b69833.png
[f1b592f50678451183453239691a6218.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/06/3ef87b74d3a0486398a8d1c3c02fcaf8.png
[487790eefee6489aa88f648c4c93bd95.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/06/e768a71477694d82898a4a07e7d668d9.png
[f7e949cd488e462d8157a7f65c8f2af7.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/06/a4afe4976c5c411386b98f5644ea049f.png
[be1526fcbf3e462cb609367b98446a28.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/06/0b4ab613f77c4ec988c6a9546e6aaa2c.png
[61f636b237784652ad3a657592ec54b4.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/06/776d11742ba04106ae516f98dbdeac61.png
[973a0848b10e4433b5d8a88533a56fb1.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/06/9be0d560b2e043809e359b1c35604f04.png
[0c6485c59b8747ab9c8fb14224a56131.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/06/f9788934885644a5b7bfdd613555882d.png
[fbfe7ec4353748ce8d69b2ccebc0caab.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/06/9bd7dd5a3e1e4bf7a01cbac40bcd1eb7.png
[7caf115c4ae0458497c1203bb73efa2f.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/06/6ef6ae7beec94a598c2702727eda9fd1.png
[b010f965b6bc4460bd89a42bb86eaa80.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/06/9cd341a173d541c8a7a983bd11a1a950.png
[355189cf42c649a89ce40868edf3ea6b.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/06/32738044355546f7aa3407c1c12fe19e.png
[caf885f09dec4ba59ddc64f78619760d.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/06/82eb98e66eec433a99b0dc025fe2a3a9.png
[ee8fee29077c43eca670d8b2c39b0543.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/06/b7884995d8ce4af581fe5e16bff1542e.png
[99d47f4b65d5459da5f9ec91b31d3d17.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/06/1afecc24708542ef928fa980348ef047.png
[ab7fd679982a403e91b8de3bcfedf125.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/06/3318f3c3209e427aad7304e9add19679.png
[911f9bb627804b3b8e14ba9e349f4b96.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/06/85afe80c8b6e4abd844c239e1ebcef8a.png
[842320affe7d484c9f63baefb3141079.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/06/6a68dbd2bcea44d68ea7546adaa683f5.png
[0412b58661f44f3fa200dba31c2c8f5e.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/06/571abde35c5249a199b549433ad5a7a6.png
[8fe3523294ce4c84b1b5db65d511ddb5.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/06/987453920c3d4c8e9ad3c0862357f1e1.png
[a26bbc60ec7f40ce8bbfd6776e1cc8f0.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/06/e6211b2b5b2146879e705fde40228b85.png
[c8b60e502bb24b5aa67f449377f9d75c.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/06/b1a66b7c607a48ac810d15917840cc89.png
[e041ef99aa9f4406af073cce833c9aa7.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/06/d82492b08c8f402982f4178e95ac984c.png
[https_download.docker.com_linux_static_stable_x86_64_docker-19.03.9.tgz]: https://download.docker.com/linux/static/stable/x86_64/docker-19.03.9.tgz
[59fbe9e38b2b451d81a1407304e987f3.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/06/bba0f8ae1845411a8a7338b212ad1e05.png
[b712ca9575bc41c5a1e3f668ff5b9bee.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/06/8d1f8f7535ff4e138652d5b10e82236e.png
[618d6a23530d42889621886b350921ea.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/06/018d572b3796418cb2dbabde6daff68b.png
[5b57f56f540e4ad487643b8a56e3bf42.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/06/949d966dd4304003afe3b55672d5a109.png
[324eb37db86045a198c0f692239bf1c6.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/06/4647600d9f2a4ed09425ad9db8be1d5e.png
[af9a8e74fc014ec49c1de80bf788ef90.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/06/8571c439466040369eee718e7ba7e18b.png
[bde56c6514634c40af4eda535776cc7f.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/06/02f7cc9437c747b3b691cb6cf1b5a5a4.png
[fde2c2b51aa84b0aad1ce10eadbfb142.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/06/9d34f6fcdbbf4baabc1e3fc4e81955c9.png
[57a51613154447529a5e7516c5062bc2.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/06/bdcbbf436eee4958a4c7f54edbefc793.png
[8e0a3a608c7e4585bff36e9ce54d52b4.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/06/66284241632f4a4db6404de7bf3a7adf.png
[a1e1be2213b94e3a8d351b620cddebe9.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/06/33865c1d25334601a674b43bf0ddd938.png
[6466b58c25524baf92f1c12e5f42aa83.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/06/6af4c68f438a4f91a39ce0ad49c16b47.png
[c85b0bd63ffc4a2cac2cd52111c0c71f.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/06/da5d3efe6ad743439f8cbc5f88ed86fa.png
[16a6fa35118d4e8b923bd4d96aa70019.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/06/b05b7539fd4c49e0933a3f660098d0af.png
[390e41e9152c4d11b2ae897a15cdb6d6.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/06/d736a6dd1ee74f02ae73df74e3978ace.png
[a6e5fedccdb44e13b767a47d960b94ba.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/06/5e75424d15724a9ea1e29e1e45300aa0.png
[6286c769969c45079ce2f5401d306c2d.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/06/3de768a1ea724dc1a7d30c31c339cdbc.png
[8a49e30d8a334d93a0409ac393d64ee6.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/06/8c390a0a23104365a797cfe49de9d2c1.png
[304d2c4e76c343548e42d9ec51df4c77.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/06/c133185dc4744309bcf5702864f455a6.png
[9564a5f83ece4075a94f329cea696825.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/06/0a3e258f565c4facb2149fa78b5c9a0c.png
[2669856a754d4d3d8563a39e371d4df6.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/06/94c288513f894352bca8e7622f7be41d.png
[52bb87ac221d473297091f5c4126a95d.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/06/07d02ebeff2d4b5b84f3943259b61ce1.png
[https_github.com_containernetworking_plugins_releases_download_v0.8.6_cni-plugins-linux-amd64-v0.8.6.tg]: https://github.com/containernetworking/plugins/releases/download/v0.8.6/cni-plugins-linux-amd64-v0.8.6.tg
[225459978035469cb9470914fa67109b.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/06/9f9e3b89b0604af980c5be7e72a3b2c9.png
[12e7e92a35fc44cdab79d66641424615.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/06/12b41e73ae564b4c9c53016aaad8f5b0.png
[2a1d8cded303493eadae830ec7966fed.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/06/b8e4e18b605940838dab070696b3058f.png
[47c8643c68c04c59a5206385539a8985.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/06/05addf463545451faa295ce61673fafd.png
[cbe0628a8a4c45d1a71cf06f3af8e310.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/06/beb9802e44524459a3e83fa38ef9c23f.png
[cd945e5cc1de4965a4adb7638ccaacee.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/06/f5c5df5dcb0247d580f7ff89fa2b0228.png
[9a5d37696fda4044b7b4033551787db9.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/06/57f7a759e3e54e3f920d35846e65b614.png
[514ac49da5ff4e59bdf265a8019cea88.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/06/f63b0c313b184a32a4f875ce41bd61de.png
[530f45079d8b4f93be2da2d24dc466d2.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/06/c8522071815f40c8adcbfc28ead32afb.png
[df7040838cba459795dea9141e7790d9.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/06/efa0caae12544ffebe53be32add040ca.png