`

ActiveMQ所能承载的主题/队列数测试

 
阅读更多

考虑这么一个场景:用监控服务器监控某设备,设备的数量相当庞大,每隔一段时间监控服务器就会把这些设备的最新状态信息投递到消息队列中,浏览器使用ActiveMQ的Ajax技术通过订阅来感兴趣的状态信息。
问题是设备太多了,如果让浏览器接受处理所有的消息显然是不合适的,网络带宽,JavaScript的执行速度都受限。所以要有选择地接收消息。
JMS消息格式中可以加入自定义的消息头,然后通过选择器就可以过滤消息(SQL92格式),但是在Web环境下,ActiveMQ 5.4的REST连接器现在已经支持选择器了,但是Ajax连接器仍旧没有(就在两天前刚加上了一个测试的Patch,NND!)。
所以当前稳妥的做法还是:一个设备一个主题,例如“device.1”“device.2”…接下来的问题就是ActiveMQ最大能开多少主题/队列。经过测试,默认配置,一千多个主题的时候ActiveMQ就会出现“java.lang.OutOfMemoryError: unable to create new native thread”的异常,上网查找,原来ActiveMQ默认配置下单个主题/队列是在单独的线程中处理的,需要修改ActiveMQ的启动脚本,例如Windows下面的activemq.bat,找到“-Dorg.apache.activemq.UseDedicatedTaskRunner=true”,改成“false”,这样就解决问题了。另外“-Xmx512M”酌情调大些。
实测10000个队列内存占用约1G。
当然这终究不是完美的解决方案,希望ActiveMQ能快点完善Ajax的选择器,呵呵。
题外话,如果不需要消息持久化的话,把activemq.xml中的“<persistenceAdapter>…”注释掉即可。

参考:
http://activemq.apache.org/rest.html#REST-Consumingwithselectors
https://issues.apache.org/activemq/browse/AMQ-2874
http://old.nabble.com/how-many-topics-can-I-create-in-a-broker-before-getting-OutOfMemoryError%3A-Java-heap-space-td17905477.html
http://old.nabble.com/Large-number-of-queues-%28HowTo%29-td23602928.html

分享到:
评论

相关推荐

    ActiveMQ入门.docx

    10. **内嵌 JMS 提供者**:对于测试和开发,ActiveMQ 提供了易于使用的内嵌 JMS 提供者。 **JMS 知识点** Java Message Service (JMS) 是 Java 平台上的标准接口,它定义了消息生产者和消费者之间的通信规范,用于...

    ActiveMQSpringDemo.zip

    - 生产者通过消息模板发送消息到ActiveMQ队列或主题。 - 消费者监听特定的队列或主题,当有新消息到达时,消费它们。 - 最后,将整个应用打包并部署到Tomcat服务器。 7. **运行与测试**: 在Tomcat启动后,你...

    java 聊天系统

    6. **消息队列**:为了优化性能,大型聊天系统可能会引入消息队列(如RabbitMQ或ActiveMQ),它可以帮助系统解耦,避免因大量并发请求导致的性能瓶颈。消息队列负责在客户端和服务器之间异步传输消息。 7. **安全性...

    j2ee-java-游戏论坛管理.zip

    8. **消息队列**:对于高并发场景,如新帖发布后的通知,可以借助消息队列(如ActiveMQ或RabbitMQ)异步处理,避免阻塞主线程,提升系统的响应能力。 9. **测试与部署**:在开发过程中,JUnit 和 Mockito 可用于...

    基于JAVA的酒店管理系统

    6. **消息队列**:如RabbitMQ或ActiveMQ,处理异步任务,优化系统响应速度。 五、开发过程 1. **需求分析**:明确系统功能需求,收集并整理业务流程。 2. **设计阶段**:制定系统架构,设计数据库模型,编写接口...

Global site tag (gtag.js) - Google Analytics