《Kubernetes部署篇：kube-proxy组件设置ipvs模式(建议使用此模式)》

客官°小女子只卖身不卖艺 2022-09-12 01:58 429阅读 0赞

### 文章目录 ###

*  一、修改配置文件
 *  二、部署nginx
 *   *  2.1、nginx yaml文件
     *  2.2、部署nginx
     *  2.3、查看ipvs
 *  总结：整理不易，如果对你有帮助，可否点赞关注一下？

--------------------

# 一、修改配置文件 #

**要切换kube-proxy的模式，必须修改kubeadm.config，然后使用kubeadm reset和再init整个cluster**

# 根据实际部署环境修改信息：
    vim kubeadm-config.yaml
    
    apiVersion: kubeadm.k8s.io/v1beta2
    kind: ClusterConfiguration
    kubernetesVersion: v1.20.6
    controlPlaneEndpoint: "192.168.1.18:6443"  #虚拟ip和端口
    imageRepository: k8s.gcr.io
    apiServer:
      timeoutForControlPlane: 4m0s
      certSANs:
      - 192.168.1.18 #虚拟ip
      - 192.168.1.13 #master1ip
      - 192.168.1.14 #master2ip
      - 192.168.1.15 #master3ip
      - "k8s-master-13" #master1主机名
      - "k8s-master-14" #master2主机名
      - "k8s-master-15" #master3主机名
      extraArgs:
        authorization-mode: "Node,RBAC"
        service-node-port-range: 30000-36000  #定义服务端口范围
    networking:
      dnsDomain: cluster.local
      serviceSubnet: "10.96.0.0/16"  #service网段
      podSubnet: "10.244.0.0/16"     #pod网段
    ---
    #开启ipvs模式，增加内容
    apiVersion: kubeproxy.config.k8s.io/v1alpha1
    kind:  KubeProxyConfiguration
    mode: ipvs

--------------------

# 二、部署nginx #

## 2.1、nginx yaml文件 ##

---
    apiVersion: v1
    kind: Service
    metadata:
      name: nginx-svc
      labels:
        app: nginx
    spec:
      type: NodePort
      ports:
      - port: 8083
        targetPort: 8083
        protocol: TCP
        nodePort: 31087
      selector:
        app: nginx
    ---
    apiVersion: apps/v1
    kind: StatefulSet
    metadata:
      name: nginx
    spec:
      serviceName: "nginx"
      podManagementPolicy: Parallel
      replicas: 1
      updateStrategy:
        type: RollingUpdate
      selector:
        matchLabels:
          app: nginx
      template:
        metadata:
          labels:
            app: nginx
        spec:
          containers:
          - name: nginx
            image: nginx:latest
            imagePullPolicy: IfNotPresent
            ports:
              - containerPort: 8083

## 2.2、部署nginx ##

kubectl create -f nginx.yaml

**如下图所示：**  
![在这里插入图片描述][32820abbb0e24b72b28f204705f93633.png]

## 2.3、查看ipvs ##

**通过上图可以看到nginx-svn的cluster服务ip为10.96.51.165,而在k8s中cluster service的VIP会被绑定到每个node的kube-ipvs0虚拟网卡上，而且这些ipvs使用的NIC的状态是DOWN，只是作为绑定VIP使用，如下所示：**  
![在这里插入图片描述][5217ed8e9483471abced55df1f9a8820.png]  
**使用ipvs之后，iptables已经没有load balance的信息。如下所示：**  
![在这里插入图片描述][watermark_type_ZHJvaWRzYW5zZmFsbGJhY2s_shadow_50_text_Q1NETiBA5Lic5Z-O57ud56We_size_20_color_FFFFFF_t_70_g_se_x_16]  
**这里需要说明的是由于所有从主机经由IPVS调度进入POD的数据包都会经过MASQUERADE，所以数据包实际上经过了DNAT(by IPVS)和SNAT(by iptables MASQUERADE)，数据包在POD返回的时候一定会返回到原来node所在的IPVS。所以经由flannel的帮助，kubernnetes的IPVS解决方案完全满足IPVS NAT模式需要director和backend在同一个LAN的需求，事实上，这种模式更加类似于IPVS的FULLNAT模式。**

**通过cluster IP访问nginx service之后的ipvs统计信息，如下所示：**  
![在这里插入图片描述][watermark_type_ZHJvaWRzYW5zZmFsbGJhY2s_shadow_50_text_Q1NETiBA5Lic5Z-O57ud56We_size_20_color_FFFFFF_t_70_g_se_x_16 1]

--------------------

# 总结：整理不易，如果对你有帮助，可否点赞关注一下？ #

更多详细内容请参考：[企业级K8s集群运维实战][K8s]

[32820abbb0e24b72b28f204705f93633.png]: /images/20220828/9476c1d126634498a24342e94b6ead12.png
[5217ed8e9483471abced55df1f9a8820.png]: /images/20220828/e2bc18f1281c4cb1b56ebcbd6a9e27e4.png
[watermark_type_ZHJvaWRzYW5zZmFsbGJhY2s_shadow_50_text_Q1NETiBA5Lic5Z-O57ud56We_size_20_color_FFFFFF_t_70_g_se_x_16]: /images/20220828/68d9157b848b433d9d94c3ae3765f7b9.png
[watermark_type_ZHJvaWRzYW5zZmFsbGJhY2s_shadow_50_text_Q1NETiBA5Lic5Z-O57ud56We_size_20_color_FFFFFF_t_70_g_se_x_16 1]: /images/20220828/2862dde5a9c241c4a83eeaa0ff7c49ce.png
[K8s]: https://blog.csdn.net/m0_37814112/category_10856504.html?spm=1001.2014.3001.5482