ActiveMQ多个消费者消费不均匀问题

拼搏现实的明天。 2022-10-02 00:50 178阅读 0赞

[2019独角兽企业重金招聘Python工程师标准>>> ][2019_Python_] ![hot3.png][]

![ActiveMQ多个消费者消费不均匀问题][ActiveMQ]

如果客户端处理很慢的话，Broker会在之前发送消息的反馈之前，继续发送新的消息到客户端。如果客户端依旧很慢的话，没有得到确认反馈的消息会持续增长。在这种情况下，Broker有可能会停止发送消息给消费者。当未被反馈的消息达到了prefetch limit设置的数字时，Broker将会停止给消费者发送新的消息。除非消费者开始给与反馈，否则得不到任何消息。

Default Prefetch Limit（默认预取限制）：不同的消费者类型有不同的默认设置，具体设置如下：

如果想学习Java工程化、高性能及分布式、深入浅出。微服务、Spring，MyBatis，Netty源码分析的朋友可以加我的Java高级交流：787707172，群里有阿里大牛直播讲解技术，以及Java大型互联网技术的视频免费分享给大家。

Queue consumer：默认1000

如果你使用一组消费者进行分散工作量的话（一个Queue对应多个消费者），典型的你应该把数字设置的小一些。如果一个消费者被允许可以聚集大量的未被确认的消息的话，会导致其它的消费者无事可做。同时，如果这个消费者出错的话，会导致大量的消息不能被处理，直到消费者恢复之前。

Queue browser：默认500

Topic consumer：默认32766

默认值32766是数字short的最大值，也是预取限制的最大值。

Durable topic subscriber：默认100

通常你可以通过增加预取限制来改善性能。

Optimizing prefetch limits（优化预取限制）：通常的，优化Queue消费和持久化主题订阅者（durable topic subscriber）是个好主意。

Queue consumers—如果你的queue只有一个消费者的话，你可以设置预取限制为一个相当大的值。但，如果一个queue有一组消费者的话，你最好限制到一个比较小的数字上，比如0或者1.

Durable topic subscribers—通常增大预取限制的数量会提高性能。尝试一下增加到1000.

How to set prefectch limits(如何设置预取限制):你可以在Broker端或者消费者端设置预取制限。这有三种粒度的设置方式。如下：

java写法

ActiveMQConnectionFactory factory = new ActiveMQConnectionFactory();
     
    Properties props = new Properties();
    props.setProperty("prefetchPolicy.queuePrefetch", "1000");
    props.setProperty("prefetchPolicy.queueBrowserPrefetch", "500");
    props.setProperty("prefetchPolicy.durableTopicPrefetch", "100");
    props.setProperty("prefetchPolicy.topicPrefetch", "32766");
     
    factory.setProperties(props);

Per destination:一个最好的粒度，你可以在创建消费者的时候设置每个目的的预取限制。消费queue，TEST.QUEUE，时指定预取限制为10.创建MessageConsumer 实例的代码如下：

Queue queue = 
     new ActiveMQQueue("TEST.QUEUE?consumer.prefetchSize=10");
     
    MessageConsumer consumer = session.createConsumer(queue);

欢迎工作一到八年的Java工程师朋友们加入Java高级交流：787707172

本群提供免费的学习指导 架构资料 以及免费的解答

不懂得问题都可以在本群提出来 之后还会有直播平台和讲师直接交流噢

转载于:https://my.oschina.net/u/3990817/blog/3026166

[2019_Python_]: https://my.oschina.net/u/2663968/blog/3061697
[hot3.png]: /images/20220113/7e9c49c49a934094a7e18090a12352f7.png
[ActiveMQ]: /images/20220113/74a17f31ab8747da8337f78c55366f0c.png