【kubernetes 系列1】基于kubernetes构建Docker集群环境

系统管理员 2022-02-14 13:47 229阅读 0赞

## 基础知识： ##

kubernetes是google公司基于docker所做的一个分布式集群，有以下组件组成

**etcd: **高可用存储共享配置和服务发现，作为与minion机器上的flannel配套使用，作用是使每台 minion上运行的docker拥有不同的ip段，最终目的是使不同minion上正在运行的docker containner都有一个与别的任意一个containner（别的minion上运行的docker containner）不一样的IP地址。

**flannel:** 网络结构支持

**kube-apiserver:** 不论通过kubectl还是使用remote api 直接控制，都要经过apiserver

**kube-controller-manager:** 对replication controller, endpoints controller, namespace controller, and serviceaccounts controller的循环控制，与kube-apiserver交互，保证这些controller工作

**kube-scheduler:** Kubernetes scheduler的作用就是根据特定的调度算法将pod调度到指定的工作节点（minion）上，这一过程也叫绑定（bind)

**kubelet:** Kubelet运行在Kubernetes Minion Node上. 它是container agent的逻辑继任者

**kube-proxy:** kube-proxy是kubernetes 里运行在minion节点上的一个组件, 它起的作用是一个服务代理的角色

1、系统架构图：

![1087716-20170411111532391-899038129.png][]

2、业务场景架构图

图为GIT+Jenkins+Kubernetes+Docker+Etcd+confd+Nginx+Glusterfs架构：  
![1087716-20170401135152164-1257503094.png][]

## 环境： ##

centos7系统机器三台：  
10.18.18.16    ukr\_server1    用来安装kubernetes master  
10.18.18.7    ukr\_server2    用作kubernetes minion （minion1）  
10.18.19.8    ukr\_server3    用作kubbernetes minion (minion2)

###     一、关闭系统运行的防火墙及selinux ###

**1。如果系统开启了防火墙则按如下步骤关闭防火墙（所有机器）**

systemctl stop firewalld 
    systemctl disable firewalld

**2.关闭selinux**

setenforce 0
    sed -i '/^SELINUX=/cSELINUX=disabled' /etc/sysconfig/selinux

### 二、MASTER安装配置 ###

**1. 安装并配置Kubernetes master(yum 方式)**

yum -y install etcd kubernetes-master flannel

**2. 相关组件的配置**  
**a) 配置etcd（这里只配置单机，非集群模式）**  
\#vim /etc/etcd/etcd.conf

ETCD_NAME=default
    ETCD_DATA_DIR="/var/lib/etcd/default.etcd"
    ETCD_LISTEN_CLIENT_URLS="http://0.0.0.0:2379"
    ETCD_ADVERTISE_CLIENT_URLS="http://localhost:2379"

**b) 配置kubernetes apiserver**  
vim /etc/kubernetes/apiserver

KUBE_API_ADDRESS="--address=0.0.0.0"
    KUBE_API_PORT="--port=8080"
    KUBELET_PORT="--kubelet_port=10250"
    KUBE_ETCD_SERVERS="--etcd_servers=http://127.0.0.1:2379"
    # 10.1.0.0/16 这个网络下面会被创建，需要保持网络一致
    KUBE_SERVICE_ADDRESSES="--service-cluster-ip-range=10.1.0.0/16" 
    # PS：KUBE_ADMISSION_CONTROL中的ServiceAccount需要去掉
    KUBE_ADMISSION_CONTROL="--admission_control=NamespaceLifecycle,NamespaceExists,LimitRanger,SecurityContextDeny,ResourceQuota"
    KUBE_API_ARGS=""

**c)在etcd中定义flannel网络**

etcdctl mk /atomic.io/network/config '{"Network":"10.1.0.0/16"}'

PS：这里需要和/etc/kubernetes/apiserver 中的KUBE\_SERVICE\_ADDRESSES中设置的一致

**d) 配置flanneld**  
vi /etc/sysconfig/flanneld

FLANNEL_ETCD_ENDPOINTS="http://0.0.0.0:2379"
    FLANNEL_ETCD_PREFIX="/atomic.io/network"

**3. 启动服务，设置随机启动，显示服务状态**  
对etcd, kube-apiserver, kube-controller-manager，kube-scheduler，flanneld 服务操作脚本

for SERVICES in etcd kube-apiserver kube-controller-manager kube-scheduler; 
    do 
    systemctl restart $SERVICES
    systemctl enable $SERVICES
    systemctl status $SERVICES
    done

至此master配置完成，运行kubectl get nodes可以查看有多少minion在运行，以及其状态。

### 三、MINION安装配置(每台minion机器都按如下安装配置) ###

**1. 环境安装和配置**

yum -y install flannel kubernetes

**2. 相关组件的配置**  
**a) 配置kubernetes连接的服务端IP(kube service服务和etcd服务)**  
\#vim /etc/kubernetes/config

KUBE_MASTER="--master=http://10.18.18.16:8080"
    KUBE_ETCD_SERVERS="--etcd_servers=http://10.18.18.16:2379"

**b）配置kubernetes kubelet**  
\#vim /etc/kubernetes/kubelet

KUBELET_ADDRESS="--address=0.0.0.0"
    KUBELET_PORT="--port=10250"
    # 这里是node节点的ip地址（10.18.18.7、10.18.19.8）
    KUBELET_HOSTNAME="--hostname_override=10.18.18.7"
    # 指定Master节点的API Server
    KUBELET_API_SERVER="--api_servers=http://10.18.18.16:8080"
    KUBELET_ARGS=""

**c).配置flannel网络**  
\#vim /etc/sysconfig/flanneld

FLANNEL_ETCD_ENDPOINTS="http://10.18.18.16:2379"
    FLANNEL_ETCD_PREFIX="/atomic.io/network"

PS：其中atomic.io与上面etcd中的Network对应  
   
**3. 启动、设置、查看服务**

for SERVICES in flanneld kube-proxy kubelet docker; 
    do 
    systemctl restart $SERVICES
    systemctl enable $SERVICES
    systemctl status $SERVICES
    done

两个node节点已经部署完成

### 四、配置完成验证安装 ###

切换master上，查看节点的状态：

kubectl get nodes
    NAME         STATUS    AGE
    10.18.18.7   Ready     1d
    10.18.19.8   Ready     1d

[1087716-20170411111532391-899038129.png]: /images/20220214/0e01ab0e25684826ace0945455be949e.png
[1087716-20170401135152164-1257503094.png]: /images/20220214/581484939dae415eb788081b7229475c.png