RabbitMQ 内存控制硬盘控制

傷城~ 2022-11-29 11:46 137阅读 0赞

一、内存控制：

vm\_memory\_high\_watermark 该值为内存阈值，默认为0.4。意思为物理内存的40%。40%的内存并不是内存的最大的限制，它是一个发布的节制，当达到40%时Erlang会做GC。最坏的情况是使用内存80%。如果把该值配置为0，将关闭所有的publishing 。

rabbitmqctl set\_vm\_memory\_high\_watermark 0

Paging 内存阈值，该值为默认为0.5，该值为vm\_memory\_high\_watermark的20%时，将把内存数据写到磁盘。

如机器内存16G，当RABBITMQ占用内存1.28G（16\*0.4\*0.2）时把内存数据放到磁盘。

二、硬盘控制：

当RabbitMQ的磁盘空闲空间小于50M（默认），生产者将被BLOCK,

如果采用集群模式，磁盘节点空闲空间小于50M将导致其他节点的生产者都被block

可以通过disk\_free\_limit来对进行配置。

\------------------------------------------------------------------\\

可以修改rabbitmq-env.conf配置文件：

\[\{rabbit,\[\{vm\_memory\_high\_watermark,0.6\}\]\}\].

或者设置成固定值：

\[\{rabbit,\[\{vm\_memory\_high\_watermark,\{absolute,1073741824\}\}\]\}\].也就是1024MB.

如果要在broker运行过程中修改，则rabbitmqctl set\_vm\_memory\_high\_watermark 0.6

\-------------------------------------------------\\

三. 配置  
/usr/local/rabbitmq/sbin目录下  
rabbitmq-env 环境配置  
rabbitmq-defaults 默认参数设置  
rabbitmqctl 管理工具  
rabbitmq-plugins 插件管理工具  
rabbitmq-server rabbitmq服务

\# vim rabbitmq-defaults

<table> 
 <tbody> 
 <tr> 
 <td style="border-color:#dddddd;"> 1 2 3 4 5 6 7 8 9 10 </td> 
 <td style="border-color:#dddddd;"> SYS_PREFIX=${RABBITMQ_HOME} ERL_DIR=/usr/local/erlang/bin/&nbsp;//设置erl命令路径 CLEAN_BOOT_FILE=start_clean SASL_BOOT_FILE=start_sasl CONFIG_FILE=${SYS_PREFIX}/etc/rabbitmq/rabbitmq&nbsp;//设置rabbitmq运行参数 LOG_BASE=${SYS_PREFIX}/var/log/rabbitmq MNESIA_BASE=${SYS_PREFIX}/var/lib/rabbitmq/mnesia ENABLED_PLUGINS_FILE=${SYS_PREFIX}/etc/rabbitmq/enabled_plugins&nbsp;//允许插件列表配置文件 PLUGINS_DIR="${RABBITMQ_HOME}/plugins" CONF_ENV_FILE=${SYS_PREFIX}/etc/rabbitmq/rabbitmq-env.conf </td> 
 </tr> 
 </tbody> 
</table>

主要配置文件  
1. enabled\_plugins：设置允许的插件列表，格式如下：

2. rabbitmq.config：设置rabbitmq运行参数。结构为hash数组格式。如

其中几个关键参数为: 
tcp\_listerners 设置rabbimq的监听端口，默认为\[5672\]。 
disk\_free\_limit 磁盘低水位线，若磁盘容量低于指定值则停止接收数据，默认值为\{mem\_relative, 1.0\},即与内存相关联1：1，也可定制为多少byte. 
vm\_memory\_high\_watermark，设置内存低水位线，若低于该水位线，则开启流控机制，默认值是0.4，即内存总量的40%。 
hipe\_compile 将部分rabbimq代码用High Performance Erlang compiler编译，可提升性能，该参数是实验性，若出现erlang vm segfaults，应关掉。 
force\_fine\_statistics， 该参数属于rabbimq\_management，若为true则进行精细化的统计，但会影响性能。 
/usr/local/etc/rabbitmq/rabbitmq.config 
\[\{auth\_backends,\[rabbit\_auth\_backend\_internal\]\}, 
\{auth\_mechanisms,\['PLAIN','AMQPLAIN'\]\}, 
\{backing\_queue\_module,rabbit\_variable\_queue\}, 
\{cluster\_nodes,\[\]\}, 
\{collect\_statistics,fine\}, 
\{collect\_statistics\_interval,5000\}, 
\{default\_permissions,\[<<".\*">>,<<".\*">>,<<".\*">>\]\}, 
\{default\_user,<<"guest">>\}, 
\{default\_user\_tags,\[administrator\]\}, 
\{default\_vhost,<<"/">>\}, 
\{delegate\_count,16\}, 
\{error\_logger,\{file,"/usr/local/var/log/rabbitmq/rabbit@Technophiliac.log"\}\}, 
\{frame\_max,131072\}, 
\{hipe\_compile,false\}, 
\{included\_applications,\[\]\}, 
\{msg\_store\_file\_size\_limit,16777216\}, 
\{msg\_store\_index\_module,rabbit\_msg\_store\_ets\_index\}, 
\{queue\_index\_max\_journal\_entries,262144\}, 
\{sasl\_error\_logger,\{file,"/usr/local/var/log/rabbitmq/rabbit@Technophiliac-sasl.log"\}\}, 
\{server\_properties,\[\]\}, 
\{ssl\_listeners,\[\]\}, 
\{ssl\_options,\[\]\}, 
\{tcp\_listen\_options, 
\[binary, 
\{packet,raw\}, 
\{reuseaddr,true\}, 
\{backlog,128\}, 
\{nodelay,true\}, 
\{exit\_on\_close,false\}\]\}, 
\{tcp\_listeners,\[5672\]\}, 
\{trace\_vhosts,\[<<"/">>\]\}, 
\{vm\_memory\_high\_watermark,0.4\}\] 
3. rabbitmq-env.conf rabbitmq环境参数配置

更详细的配置参见： http://www.rabbitmq.com/configure.html\#configuration-file

4. 启动

<table> 
 <tbody> 
 <tr> 
 <td style="border-color:#dddddd;"> 1 </td> 
 <td style="border-color:#dddddd;"> # /usr/local/rabbitmq/sbin/rabbitmq-server -detached </td> 
 </tr> 
 </tbody> 
</table>

四. rabbitmq插件管理  
启用rabbitmq web管理插件

<table> 
 <tbody> 
 <tr> 
 <td style="border-color:#dddddd;"> 1 </td> 
 <td style="border-color:#dddddd;"> # ./rabbitmq-plugins enable rabbitmq_management </td> 
 </tr> 
 </tbody> 
</table>

列出所有插件

<table> 
 <tbody> 
 <tr> 
 <td style="border-color:#dddddd;"> 1 </td> 
 <td style="border-color:#dddddd;"> # ./rabbitmq-plugins list </td> 
 </tr> 
 </tbody> 
</table>