【服务搭建】EMQ X集群 + nginx做负载

ゞ浴缸里的玫瑰 2022-12-14 12:25 533阅读 0赞

官方提供的集群搭建方式有好几种

<table> 
 <thead> 
  <tr> 
   <th>策略</th> 
   <th>说明</th> 
  </tr> 
 </thead> 
 <tbody> 
  <tr> 
   <td>manual</td> 
   <td>手动命令创建集群</td> 
  </tr> 
  <tr> 
   <td>static</td> 
   <td>静态节点列表自动集群</td> 
  </tr> 
  <tr> 
   <td>mcast</td> 
   <td>UDP 组播方式自动集群</td> 
  </tr> 
  <tr> 
   <td>dns</td> 
   <td>DNS A 记录自动集群</td> 
  </tr> 
  <tr> 
   <td>etcd</td> 
   <td>通过 etcd 自动集群</td> 
  </tr> 
  <tr> 
   <td>k8s</td> 
   <td>Kubernetes 服务自动集群</td> 
  </tr> 
 </tbody> 
</table>

*  manual ：(默认就是这个) 优点优雅一些，比如有A服务了，B服务有cookie就可以直接加入集群，不用重启A服务
 *  static ： 就是A的配置文件里配置B，B的配置文件里配置A 然后新的加进来还得重新配置与重启。不是很优雅。
 *  其他的没有试过所以我就不写了，那些写全的也是去从官网复制的呗。

###### 说明 ######

manual 我试过，一直不通，应该是测试机的安全组的问题，应该今天都改过几次安全组了，所以不想再改了`(为什么测试机还要安全组[笑哭])`然后我就直接是static,反正提供这么多种方法.  
结果用static的直接就通了

###### 建议哈 ######

`最好不要直接用static，我是因为很了解公司以及公司项目，集群规模一定不会超过3个，所以选这个问题不大。`

##### 开始搭建 (配置文件是emqx.conf，下面就不重复说了) #####

###### 1 设置服务名称 ( 在`12`行 ) ######

注意@前随意，后面必须跟实际IP  
这个名字需要和下面还有一个节点名称必需相同，这里是个坑哟~~~~  
![在这里插入图片描述][20201013173421353.png]

###### 2 修改集群策略( 在`35`行 ) ######

![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzM4NjI2NTk1_size_16_color_FFFFFF_t_70]

###### 3 添加节点( 在`61` 行 ) ######

原本是注释掉的 去掉 \#\#  
`cluster.static.seeds = 随意@IP,随意@IP`  
本机的也加上而且要和第 `1` 步里的一样  
![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzM4NjI2NTk1_size_16_color_FFFFFF_t_70 1]

###### 4 当前节点名(在`187`行 ) ######

和1的配置一样  
![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzM4NjI2NTk1_size_16_color_FFFFFF_t_70 2]

###### 5 设置cookie （在`192`行） 集群中的所有节点的cookie使用相同的cookie，或者说cookie就是密码 ######

![在这里插入图片描述][20201013174803755.png]

###### 6 最后一步 ，设置节点间的通讯端口 (在`301`行) 注意这些端口的防火墙，安全组什么的都关掉 ######

![在这里插入图片描述][20201013175118361.png]

###### 7 重启emqx (`别告诉我，我没有说保存退出你就真没保存`) ######

`./emqx restart`  
等两个节点启动完成后查看集群状态

`./emqx_ctl cluster status`  
![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzM4NjI2NTk1_size_16_color_FFFFFF_t_70 3]

控制台http://任一节点IP:18083/

![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzM4NjI2NTk1_size_16_color_FFFFFF_t_70_pic_center]

集群完成了

没有负载集群就是傻逼

下面是负载

###### 1下载 ,解压,安装 ######

直接`wget http://nginx.org/download/nginx-1.16.1.tar.gz`  
解压`tar -zxvf nginx-1.16.1.tar.gz`  
编译安装`./configure --with-http_stub_status_module --with-http_ssl_module --with-stream --prefix=/opt/nginx` 复制这个  
`make && make install`

编辑 nginx的 conf/nginx.conf

stream{
        upstream emqx_cluster {
            server ip:1883;
            server ip:1883;
        }
    
        server{
           listen  18084 so_keepalive=on;
           proxy_connect_timeout 10s;
           # proxy_timeout 20s;
           proxy_pass emqx_cluster;
        }
    }

注意：这个配置是和http是平级的，而不是在http里面  
我使用的18084代理  
![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzM4NjI2NTk1_size_16_color_FFFFFF_t_70 4]

启动nginx  
`此时访问80可能是访问不了的`  
直接使用测试工具连接负载这个机器的18084 ，能连上就说明OK  
![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzM4NjI2NTk1_size_16_color_FFFFFF_t_70_pic_center 1]

[20201013173421353.png]: /images/20221123/ed6b64ce11a1459a9fa7aa6e01e2bbe2.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzM4NjI2NTk1_size_16_color_FFFFFF_t_70]: /images/20221123/5a6aa85b5bb344ca9c3cc380c5ca6245.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzM4NjI2NTk1_size_16_color_FFFFFF_t_70 1]: /images/20221123/750fe3b8571e42eba8149592bf1b2fc5.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzM4NjI2NTk1_size_16_color_FFFFFF_t_70 2]: /images/20221123/08dbe03d51004a8ba570cad14aa60f0f.png
[20201013174803755.png]: /images/20221123/0e4e7af52a674308a88452c747af2d1f.png
[20201013175118361.png]: /images/20221123/59a1beec32b448358c344f9ba4e1996b.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzM4NjI2NTk1_size_16_color_FFFFFF_t_70 3]: /images/20221123/0cdd2ddfc7a64540b8c151f1b61bce37.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzM4NjI2NTk1_size_16_color_FFFFFF_t_70_pic_center]: /images/20221123/54e898682a734d34882930aefe1ec66b.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzM4NjI2NTk1_size_16_color_FFFFFF_t_70 4]: /images/20221123/ea7074ae46914b9c8057b8e721e4befd.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzM4NjI2NTk1_size_16_color_FFFFFF_t_70_pic_center 1]: /images/20221123/eb4f55339f3e4947abc5ad19954bfcfc.png