OpenStack_部署(t版)

落日映苍穹つ 2021-07-26 23:31 1091阅读 0赞

### OpenStack部署 ###

*  一.虚拟机资源信息
 *   *   *  1.控制节点CT
         *  2.计算节点C1
         *  3.计算节点C2
     *  二.部署思路
     *   *  三.资源规划
         *  四.基础环境配置
         *  1. 修改添加NAT网卡配置
         *  2.关闭防火墙和系统安全机制、修改主机名
         *   *  3.安装基础环境依赖包
         *  4.VMnet1网卡配置参数
         *   *   *   *  1).查看VMnet1网卡名称
             *  2).修改VMnet1网卡配置
         *  5.配置主机映射文件
     *  6.三台节点做免交互
     *   *  7.配置DNS，配置控制节点时间同步
         *   *  8.配置计算节点时间同步
             *  所有节点，配置计划性任务，每隔两分钟时间同步一次
         *  三.系统环境配置
         *  1.安装、配置MariaDB
         *   *   *  控制节点ct（192.168.184.11）
         *  2.添加MySQL子配置文件，增加如下内容
         *  3.执行MariaDB 安装配置脚本
     *  4.安装RabbitMQ
     *   *  5.安装memcached
         *  1.修改memcached配置文件
         *  6.安装etcd
         *  1.修改etcd配置文件
         *  2.开机自启动、开启服务，检测端口

# 一.虚拟机资源信息 #

### 1.控制节点CT ###

CPU：双核双线程-CPU虚拟化开启  
内存：8G 硬盘：300G  
双网卡：VM1-（局域网） 和 NAT-（外网）  
操作系统：Centos 7.6（版本1810及以上）-最小化安装

### 2.计算节点C1 ###

CPU：双核双线程-CPU虚拟化开启  
内存：8G 硬盘：300G  
双网卡：VM1-（局域网） 和 NAT-（外网）  
操作系统：Centos 7.6（版本1810及以上）-最小化安装

### 3.计算节点C2 ###

CPU：双核双线程-CPU虚拟化开启  
内存：8G 硬盘：300G  
双网卡：VM1-（局域网） 和 NAT-（外网）  
操作系统：Centos 7.6（版本1810及以上）-最小化安装

注释：如果内存不够，可减少内存大小，最小内存6G  
![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L1dzeHlp_size_16_color_FFFFFF_t_70_pic_center]

## 二.部署思路 ##

1.配置操作系统+OpenStack运行环境  
2.配置OpenStack平台基础服务（rabbitmq、mariadb、memcache、Apache)  
3.配置OpenStack keystone组件  
4.配置OpenStack Glance组件  
5.配置placement服务  
6.配置OpenStack Nova组件  
7.配置OpenStack Neutron组件  
8.配置OpenStack dashboard组件  
9.配置OpenStack Cinder组件  
10.常用云主机操作

### 三.资源规划 ###

<table> 
 <thead> 
  <tr> 
   <th>主机名</th> 
   <th>内存</th> 
   <th>硬盘</th> 
   <th>网卡</th> 
   <th>系统</th> 
  </tr> 
 </thead> 
 <tbody> 
  <tr> 
   <td>控制节点CT</td> 
   <td>8</td> 
   <td>300</td> 
   <td>VM:192.168.153.10 NAT:192.168.133.70</td> 
   <td>Centos7.6</td> 
  </tr> 
  <tr> 
   <td>计算节点c1</td> 
   <td>8</td> 
   <td>300</td> 
   <td>VM:192.168.153.20 NAT:192.168.133.80</td> 
   <td>Centos7.6</td> 
  </tr> 
  <tr> 
   <td>计算节点c2</td> 
   <td>8</td> 
   <td>300</td> 
   <td>VM:192.168.153.30 NAT:192.168.133.90</td> 
   <td>Centos7.6</td> 
  </tr> 
 </tbody> 
</table>

### 四.基础环境配置 ###

CT VM:192.168.153.10 NAT:192.168.133.70
    C1 VM:192.168.153.20 NAT:192.168.133.80
    C2 VM:192.168.153.30 NAT:192.168.133.90
    下面以CT为列，其他的注意修改成对应的ip

### 1. 修改添加NAT网卡配置 ###

*  所有节点都需要修改
 *  修改完成可连接xshell等安全终端内使用复制粘贴

BOOTPROTO=static			#修改网卡配置参数，修改为静态IP
    ONBOOT=yes					#开启设备开机启动
    
    IPADDR=192.168.133.70  		#添加字段，静态模式IP自定义
    NETMASK=255.255.255.0		#添加字段，设置网段
    GATEWAY=192.168.133.2		#添加字段，设置网关
    DNS1=192.168.133.2			#添加字段，设置DNS服务器
    IPV4_ROUTE_METRIC=90		#设置网卡优先级，默认100，越低优先级越高，防止出现两张网卡为了抢占优先级导致无法连接问题
    
    systemcrl restart network

![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L1dzeHlp_size_16_color_FFFFFF_t_70_pic_center 1]![在这里插入图片描述][20210519184005255.png_pic_center]

![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L1dzeHlp_size_16_color_FFFFFF_t_70_pic_center 2]

![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L1dzeHlp_size_16_color_FFFFFF_t_70_pic_center 3]

![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L1dzeHlp_size_16_color_FFFFFF_t_70_pic_center 4]

### 2.关闭防火墙和系统安全机制、修改主机名 ###

主机名ip映射、节点免交互登陆、时间同步

控制节点ct（192.168.133.70）

systemctl stop firewalld
    setenforce 0
    hostnamectl set-hostname ct
    su -

计算节点c1（192.168.133.80）

systemctl stop firewalld
    setenforce 0
    hostnamectl set-hostname c1
    su -

计算节点c2（192.168.133.90）

systemctl stop firewalld
    setenforce 0
    hostnamectl set-hostname c2
    su -

![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L1dzeHlp_size_16_color_FFFFFF_t_70_pic_center 5]

#### 3.安装基础环境依赖包 ####

（都需重复安装，保证每个组件都是最新）

*  都要安装

yum -y install \
    net-tools \
    bash-completion \
    vim \
    gcc gcc-c++ \
    make \
    pcre  pcre-devel \
    expat-devel \
    cmake  \
    bzip2 \
    lrzsz
    
    #-----------------------模块解释------------------------
    net-tools           ifconfig命令行工具
    bash-completion     辅助自动补全工具
    vim                 vim工具
    gcc gcc-c++         编译环境
    make                编译器
    pcre pcre-devel     是一个Perl库，包括 perl 兼容的正则表达式库
    expat-devel         Expat库，Expat是一个面向流的xml解析器
    cmake               CMake是一个跨平台的编译工具，CMkae目前主要使用场景是作为make的上层工具，产生可移植的makefile文件
    lrzsz               可使用rz、sz命令上传、下载数据

OpenStack 的 train 版本仓库源安装包，同时安装 OpenStack 客户端和 openstack-selinux 安装包

yum -y install \
    centos-release-openstack-train \
    python-openstackclient \
    openstack-selinux \
    openstack-utils
    
    #----------------模块解释------------------------------
    centos-release-openstack-train  train版本包
    python-openstackclient          安装openstack客户端
    openstack-selinux               安装selinux自动管理，这里selinux是关闭的
    openstack-utils                 方便后续直接可以通过命令行方式修改配置文件

![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L1dzeHlp_size_16_color_FFFFFF_t_70_pic_center 6]

![在这里插入图片描述][20210520015814634.png_pic_center]

### 4.VMnet1网卡配置参数 ###

*  所有节点

###### 1).查看VMnet1网卡名称 ######

ifconfig  	  
    
    例：ens34: flags=4163<UP,BROADCAST,RUNNING,MULTICAST>  mtu 1500

#### 2).修改VMnet1网卡配置 ####

cd /etc/sysconfig/network-scripts/
    
    vim ifcfg-ens34
    #修改
    BOOTPROTO=static
    ONBOOT=yes
    
    #末行添加
    IPADDR=192.168.153.10			#根据网段，设置VMnet1网段的IP，自定义
    NETMASK=255.255.255.0			#设置掩码
    
    systemctl restart network		#重启网卡
    ifconfig						#再次查看，是否修改完成

![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L1dzeHlp_size_16_color_FFFFFF_t_70_pic_center 7]  
![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L1dzeHlp_size_16_color_FFFFFF_t_70_pic_center 8]  
![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L1dzeHlp_size_16_color_FFFFFF_t_70_pic_center 9]![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L1dzeHlp_size_16_color_FFFFFF_t_70_pic_center 10]

### 5.配置主机映射文件 ###

*  所有节点  
    将VMnet1IP与主机名注入到主机映射文件中，用于区分主机，便于相互访问

echo '192.168.153.10 ct' >> /etc/hosts
    echo '192.168.153.20 c1' >> /etc/hosts
    echo '192.168.153.30 c2' >> /etc/hosts

![在这里插入图片描述][20210519192011673.png_pic_center]  
![在这里插入图片描述][20210519192017925.png_pic_center]![在这里插入图片描述][20210519192024649.png_pic_center]

## 6.三台节点做免交互 ##

*  创建非对称密钥，上传公钥文件

所有节点，我这里只示范一台，其余都需配置

ssh-keygen -t rsa
    #一路回车
    ssh-copy-id ct
    ssh-copy-id c1
    ssh-copy-id c2

![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L1dzeHlp_size_16_color_FFFFFF_t_70_pic_center 11]  
![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L1dzeHlp_size_16_color_FFFFFF_t_70_pic_center 12]

![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L1dzeHlp_size_16_color_FFFFFF_t_70_pic_center 13]

### 7.配置DNS，配置控制节点时间同步 ###

*  所有节点

echo 'nameserver 114.114.114.114' >> /etc/resolv.conf

![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L1dzeHlp_size_16_color_FFFFFF_t_70_pic_center 14]

*  控制节点ct（192.168.133.70）

yum install chrony -y
    
    vim /etc/chrony.conf 
    
    #server 0.centos.pool.ntp.org iburst 
    #server 1.centos.pool.ntp.org iburst 
    #server 2.centos.pool.ntp.org iburst 
    #server 3.centos.pool.ntp.org iburst 
    
    server ntp6.aliyun.com iburst		#配置阿里云时钟服务器源
    allow 192.168.153.0/24				#允许192.168.153.0/24网段的主机来同步时钟服务
    		
    #使用chronyc sources命令查询时间同步信息
    
    systemctl enable chronyd
    systemctl restart chronyd
    chronyc sources

![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L1dzeHlp_size_16_color_FFFFFF_t_70_pic_center 15]  
![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L1dzeHlp_size_16_color_FFFFFF_t_70_pic_center 16]  
![在这里插入图片描述][20210519194540295.png_pic_center]

#### 8.配置计算节点时间同步 ####

vim /etc/chrony.conf
    
    #server 0.centos.pool.ntp.org iburst 
    #server 1.centos.pool.ntp.org iburst 
    #server 2.centos.pool.ntp.org iburst 
    #server 3.centos.pool.ntp.org iburst 
    
    server ct iburst		#配置阿里云时钟服务器源，同步指向控制节点ct
    
    systemctl enable chronyd.service
    systemctl restart chronyd.service		
    chronyc sources

![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L1dzeHlp_size_16_color_FFFFFF_t_70_pic_center 17]  
![在这里插入图片描述][20210519195013489.png_pic_center]

#### 所有节点，配置计划性任务，每隔两分钟时间同步一次 ####

crontab -e		
    */2 * * * * /usr/bin/chronyc sources >>/var/log/chronyc.log
    
    crontab -l

![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L1dzeHlp_size_16_color_FFFFFF_t_70_pic_center 18]

### 三.系统环境配置 ###

### 1.安装、配置MariaDB ###

##### 控制节点ct（192.168.184.11） #####

yum -y install mariadb mariadb-server python2-PyMySQL
    
    
    mariadb：是mysql的一个分支，是一款完全兼容mysql的开源软件
    mariadb-server：数据库服务
    python2-PyMySQL：用于openstack的控制端连接mysql所需要的模块，如果不安装，则无法连接数据库；此包只安装在控制端

![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L1dzeHlp_size_16_color_FFFFFF_t_70_pic_center 19]

yum -y install libibverbs

![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L1dzeHlp_size_16_color_FFFFFF_t_70_pic_center 20]

*  libibverbs：远程直接内存访问

### 2.添加MySQL子配置文件，增加如下内容 ###

*  控制节点ct（192.168.133.70）

vim /etc/my.cnf.d/openstack.cnf
    
    [mysqld]
    bind-address = 192.168.153.10
    default-storage-engine = innodb
    innodb_file_per_table = on
    max_connections = 4096
    collation-server = utf8_general_ci
    character-set-server = utf8

![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L1dzeHlp_size_16_color_FFFFFF_t_70_pic_center 21]

bind-address = 192.168.153.10 #控制节点局域网地址
    default-storage-engine = innodb #默认存储引擎
    innodb_file_per_table = on #每张表独立表空间文件
    max_connections = 4096 #最大连接数
    collation-server = utf8_general_ci #默认字符集
    character-set-server = utf8

#开机自启动、开启服务
    
    systemctl enable mariadb
    systemctl start mariadb

![在这里插入图片描述][20210519200744444.png_pic_center]

### 3.执行MariaDB 安装配置脚本 ###

*  控制节点ct（192.168.133.70）

mysql_secure_installation
    
    Enter current password for root (enter for none): 	#输入当前root密码，回车
    OK, successfully used password, moving on...
    Set root password? [Y/n] Y							#是否需要更改root密码，Y确认
    Remove anonymous users? [Y/n] Y						#是否移除其他用户，Y确认移除
     ... Success!
    Disallow root login remotely? [Y/n] n				#是否不允许root用户远程登陆，输入n，允许root用户远程登陆
     ... skipping.
    Remove test database and access to it? [Y/n] Y 		#是否删除test测试库，Y确认删除
    Reload privilege tables now? [Y/n] Y 				#是否刷新规则，Y确认刷新

![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L1dzeHlp_size_16_color_FFFFFF_t_70_pic_center 22]  
![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L1dzeHlp_size_16_color_FFFFFF_t_70_pic_center 23]

## 4.安装RabbitMQ ##

*  控制节点ct（192.168.133.70）
 *  所有创建虚拟机的指令，控制端都会发送到rabbitmq，node节点监听rabbitmq

yum -y install rabbitmq-server

===配置服务，启动RabbitMQ服务，并设置其开机启动===
    systemctl enable rabbitmq-server.service
    systemctl start rabbitmq-server.service
    
    ===创建消息队列用户,用于controler和 计算节点连接rabbitmq的认证（关联）===
    rabbitmqctl add_user openstack RABBIT_PASS
    
    ===配置openstack用户的操作权限(正则，配置读写权限）===
    rabbitmqctl set_permissions openstack ".*" ".*" ".*"
    
    查看rabbitmq插件列表
    rabbitmq-plugins list

![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L1dzeHlp_size_16_color_FFFFFF_t_70_pic_center 24]  
![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L1dzeHlp_size_16_color_FFFFFF_t_70_pic_center 25]

开启rabbitmq的web管理界面的插件，端口为15672
    rabbitmq-plugins enable rabbitmq_management
    
    此时可查看25672和5672 两个端口（5672是Rabbitmq默认端口，25672是Rabbit的测试工具CLI的端口）
    netstat -natp | grep 5672

![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L1dzeHlp_size_16_color_FFFFFF_t_70_pic_center 26]  
此时可访问192.168.133.70:15672  
默认账号和密码都是guest，点击Login即可进入以下界面

![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L1dzeHlp_size_16_color_FFFFFF_t_70_pic_center 27]  
![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L1dzeHlp_size_16_color_FFFFFF_t_70_pic_center 28]

### 5.安装memcached ###

*  是一个缓存数据库，安装memcached是用于存储session信息；服务身份验证机制（keystone）使用Memcached来缓存令牌 在登录openstack的dashboard时，会产生一些session信息，这些session信息会存放到memcached中
 *  控制节点ct（192.168.133.70）

yum install -y memcached python-memcached
    #python-*模块在OpenStack中起到连接数据库的作用

![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L1dzeHlp_size_16_color_FFFFFF_t_70_pic_center 29]

### 1.修改memcached配置文件 ###

*  控制节点ct（192.168.133.70）

vim /etc/sysconfig/memcached 
    PORT="11211"					#memcached端口11211
    USER="memcached"				#用户memcached
    MAXCONN="1024"					#最大连接数1024
    CACHESIZE="64"					#字符集大小64位
    OPTIONS="-l 127.0.0.1,::1,ct" 	#监听地址，127.0.0.1：本地地址，::是ipv6地址，ct是本地VMnet1地址

![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L1dzeHlp_size_16_color_FFFFFF_t_70_pic_center 30]

开启服务开机自启，启动服务
    systemctl enable memcached
    systemctl start memcached
    
    netstat -nautp | grep 11211

![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L1dzeHlp_size_16_color_FFFFFF_t_70_pic_center 31]

### 6.安装etcd ###

etcd是一个分布式可靠的键值存储系统，数据库  
控制节点ct（192.168.133.70）

yum -y install etcd

### 1.修改etcd配置文件 ###

*  控制节点ct（192.168.133.70）

cd /etc/etcd/
    vim etcd.conf 
    删除所有内容，复制粘贴以下内容并进行修改
    
    ETCD_DATA_DIR="/var/lib/etcd/default.etcd"
    ETCD_LISTEN_PEER_URLS="http://192.168.153.10:2380"
    ETCD_LISTEN_CLIENT_URLS="http://192.168.153.10:2379"	
    ETCD_NAME="ct"	
    ETCD_INITIAL_ADVERTISE_PEER_URLS="http://192.168.153.10:2380"
    ETCD_ADVERTISE_CLIENT_URLS="http://192.168.153.10:2379"
    ETCD_INITIAL_CLUSTER="ct=http://192.168.153.10:2380"	
    ETCD_INITIAL_CLUSTER_TOKEN="etcd-cluster-01"
    ETCD_INITIAL_CLUSTER_STATE="new"

![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L1dzeHlp_size_16_color_FFFFFF_t_70_pic_center 32]

ETCD_DATA_DIR="/var/lib/etcd/default.etcd" #数据目录位置
    ETCD_LISTEN_PEER_URLS=“http://192.168.153.10:2380” #监听其他etcd member的url（2380端口，集群之间通讯，域名为无效值）
    ETCD_LISTEN_CLIENT_URLS=“http://192.168.1053.10:2379” #对外提供服务的地址（2379端口，集群内部的通讯端口）
    ETCD_NAME=“ct” #集群中节点标识（名称）
    ETCD_INITIAL_ADVERTISE_PEER_URLS=“http://192.168.153.10:2380” #该节点成员的URL地址，2380端口：用于集群之间通讯。
    ETCD_ADVERTISE_CLIENT_URLS=“http://192.168.153.10:2379”
    ETCD_INITIAL_CLUSTER=“ct=http://192.168.153.10:2380”
    ETCD_INITIAL_CLUSTER_TOKEN=“etcd-cluster-01” #集群初始化令牌
    ETCD_INITIAL_CLUSTER_STATE=“new” #初始集群状态，new为静态，若为existing，则表示此ETCD服务将尝试加入已有的集群
    若为DNS，则表示此集群将作为被加入的对象

### 2.开机自启动、开启服务，检测端口 ###

*  控制节点ct（192.168.133.70）

systemctl enable etcd.service
    systemctl start etcd.service
    netstat -anutp |grep 2379
    netstat -anutp |grep 2380

![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L1dzeHlp_size_16_color_FFFFFF_t_70_pic_center 33]

[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L1dzeHlp_size_16_color_FFFFFF_t_70_pic_center]: /images/20210726/29f14193cee046fda748e5ca4d5cc563.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L1dzeHlp_size_16_color_FFFFFF_t_70_pic_center 1]: https://img-blog.csdnimg.cn/20210519183318468.png?x-oss-process=image/watermark,type_ZmFuZ3poZW5naGVpdGk,shadow_10,text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L1dzeHlp,size_16,color_FFFFFF,t_70#pic_center
[20210519184005255.png_pic_center]: /images/20210726/183d0f280b894f0ea11621ae54f7e293.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L1dzeHlp_size_16_color_FFFFFF_t_70_pic_center 2]: /images/20210726/37e2afe7f4764a518f4ff9e98383db7a.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L1dzeHlp_size_16_color_FFFFFF_t_70_pic_center 3]: /images/20210726/ef5be284c0a84259b1a6b4d14522fdb8.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L1dzeHlp_size_16_color_FFFFFF_t_70_pic_center 4]: /images/20210726/4bd6615956644e2c96e2cb241da9de96.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L1dzeHlp_size_16_color_FFFFFF_t_70_pic_center 5]: /images/20210726/e051ea47f2f346c399f8e89609704dd7.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L1dzeHlp_size_16_color_FFFFFF_t_70_pic_center 6]: /images/20210726/1db228e9c68b43bd9d1bb578c848182a.png
[20210520015814634.png_pic_center]: /images/20210726/4e361e9cd06e4d2ca0744df85f15bbb8.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L1dzeHlp_size_16_color_FFFFFF_t_70_pic_center 7]: /images/20210726/f2857d92f01b40e4a236df60f13d94e6.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L1dzeHlp_size_16_color_FFFFFF_t_70_pic_center 8]: /images/20210726/c4703ebb2cfc4466a4d9efec5ac58824.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L1dzeHlp_size_16_color_FFFFFF_t_70_pic_center 9]: https://img-blog.csdnimg.cn/20210519191554275.png?x-oss-process=image/watermark,type_ZmFuZ3poZW5naGVpdGk,shadow_10,text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L1dzeHlp,size_16,color_FFFFFF,t_70#pic_center
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L1dzeHlp_size_16_color_FFFFFF_t_70_pic_center 10]: /images/20210726/b610d990edba49a799b6e3abd89caa66.png
[20210519192011673.png_pic_center]: /images/20210726/4faa84c291014176893910d4424f7441.png
[20210519192017925.png_pic_center]: https://img-blog.csdnimg.cn/20210519192017925.png#pic_center
[20210519192024649.png_pic_center]: /images/20210726/6a78aaa99fe74e6a80519506b20bcfc8.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L1dzeHlp_size_16_color_FFFFFF_t_70_pic_center 11]: /images/20210726/4eb3267c28d3426a8e583025b904f332.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L1dzeHlp_size_16_color_FFFFFF_t_70_pic_center 12]: /images/20210726/4ab123358d5548ed9c30fe3eb648ef13.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L1dzeHlp_size_16_color_FFFFFF_t_70_pic_center 13]: /images/20210726/6e3a82f1c0d94e80a69fc6136acd5b35.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L1dzeHlp_size_16_color_FFFFFF_t_70_pic_center 14]: /images/20210726/425f69ee25f74fbf887fb1342899e602.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L1dzeHlp_size_16_color_FFFFFF_t_70_pic_center 15]: /images/20210726/850c7284ff6a4f9b8d063b0b0a268385.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L1dzeHlp_size_16_color_FFFFFF_t_70_pic_center 16]: /images/20210726/ee8b6e0659ed49febc20f26b83a92df5.png
[20210519194540295.png_pic_center]: /images/20210726/cc29697299d043acad37a4c4120b6572.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L1dzeHlp_size_16_color_FFFFFF_t_70_pic_center 17]: /images/20210726/31869c483f7e426da8e91604b6eb6f44.png
[20210519195013489.png_pic_center]: /images/20210726/74e4cd0f25a14026ae7aec850fcd34f3.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L1dzeHlp_size_16_color_FFFFFF_t_70_pic_center 18]: /images/20210726/a88f259bd94e4e0c8e194e8af7169ab2.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L1dzeHlp_size_16_color_FFFFFF_t_70_pic_center 19]: /images/20210726/47d296874c334b7eb7b0c835b46a1679.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L1dzeHlp_size_16_color_FFFFFF_t_70_pic_center 20]: /images/20210726/cea4001040ca492ba8ba63e235553604.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L1dzeHlp_size_16_color_FFFFFF_t_70_pic_center 21]: /images/20210726/7dbf9f48395b453d8265a7ff4553489b.png
[20210519200744444.png_pic_center]: /images/20210726/325697363fd2474f9543b041430eff99.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L1dzeHlp_size_16_color_FFFFFF_t_70_pic_center 22]: /images/20210726/07cf17568c2746de9f2c7fab1740e2cd.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L1dzeHlp_size_16_color_FFFFFF_t_70_pic_center 23]: /images/20210726/79309a8ab6354b12a9bed06cb5cebe95.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L1dzeHlp_size_16_color_FFFFFF_t_70_pic_center 24]: /images/20210726/f07ea9cd2b014a69be0c03b1b113b0f0.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L1dzeHlp_size_16_color_FFFFFF_t_70_pic_center 25]: /images/20210726/2685ffbcf46a42c78bbaa06089feb4ee.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L1dzeHlp_size_16_color_FFFFFF_t_70_pic_center 26]: /images/20210726/0875f72e3a994749bfbebe86905a895a.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L1dzeHlp_size_16_color_FFFFFF_t_70_pic_center 27]: /images/20210726/1c4f3585205c4f7dad956c34f62a6823.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L1dzeHlp_size_16_color_FFFFFF_t_70_pic_center 28]: /images/20210726/06ab2ba249804a4ab9880b0262a4ab6e.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L1dzeHlp_size_16_color_FFFFFF_t_70_pic_center 29]: /images/20210726/3afb72eeddc041e0978e9bee7fcc177e.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L1dzeHlp_size_16_color_FFFFFF_t_70_pic_center 30]: /images/20210726/12f6ff7b28ab43da90c4ab3d0aecdbef.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L1dzeHlp_size_16_color_FFFFFF_t_70_pic_center 31]: /images/20210726/4b17268fc2e1488cbbdb7908d2b293c0.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L1dzeHlp_size_16_color_FFFFFF_t_70_pic_center 32]: /images/20210726/5cb0b0d600ff4e0ebf548743ab4e22c2.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L1dzeHlp_size_16_color_FFFFFF_t_70_pic_center 33]: /images/20210726/92a13e03a7284230aefba152b953bec2.png