`
maosheng
  • 浏览: 568149 次
  • 性别: Icon_minigender_1
  • 来自: 北京
社区版块
存档分类
最新评论

异步消息处理规划

MQ 
阅读更多
异步消息的规划:

1)消息需要包含哪些数据(业务数据、操作数据等)

2)数据的规划和特点(条数、大小等)

3)消息的类型和包含的数据格式

4)消息的传递域是点对点的还是发布订阅的

5)消息的保存模式:持久模式和非持久模式

6)消息的过期时间

7)消息的优先级

8)消息是否需要应答(Ack),以及应答的模式

9)消息的处理是否需要事务

10)技术选型

11)性能规划

12)传输协议选择

13)集群及部署方案

14)可伸缩性方案

15)容灾规划


什么叫消息队列

消息(Message)是指在应用间传送的数据。消息可以非常简单,比如只包含文本字符串,也可以更复杂,可能包含嵌入对象。

消息队列(Message Queue)是一种应用间的通信方式,消息发送后可以立即返回,由消息系统来确保消息的可靠传递。消息发布者只管把消息发布到 MQ 中而不用管谁来取,消息使用者只管从 MQ 中取消息而不管是谁发布的。这样发布者和使用者都不用知道对方的存在。

消息队列作为高并发系统的核心组件之一,能够帮助业务系统解构提升开发效率和系统稳定性。主要具有以下优势:

•削峰填谷(主要解决瞬时写压力大于应用服务能力导致消息丢失、系统奔溃等问题)

•系统解耦(解决不同重要程度、不同能力级别系统之间依赖导致一死全死)

•提升性能(当存在一对多调用时,可以发一条消息给消息系统,让消息系统通知相关系统)

•蓄流压测(线上有些链路不好压测,可以通过堆积一定量消息再放开来压测)


消息队列应用场景:异步处理、应用解耦、流量削锋、日志处理、消息通讯









分享到:
评论

相关推荐

    异步规划和集群和优化文档

    异步消息的规划是确保消息系统能够稳定、高效运行的关键。在规划过程中需要考虑以下内容: 1. 消息应该包含哪些数据:通常包括业务数据和操作类型数据。业务数据是指具体业务操作中涉及到的数据,而操作类型数据则...

    异步事务.

    然而,正确地设计和实施异步事务仍然需要深入理解和谨慎规划,以确保数据的完整性和系统的稳定性。随着技术的不断进步,异步事务的应用场景和解决方案也将持续演进,为构建更加高效、可靠的分布式系统提供强有力的...

    异步计算和rest soa

    这一主题深入探讨了如何在分布式系统中通过异步处理和RESTful服务来构建高效、可扩展的架构。 ### 异步计算 异步计算是一种编程模型,允许程序在等待某些操作完成时继续执行其他任务,而不是阻塞整个进程或线程。...

    银行xBankMIBS消息持久存储及消息获取方案

    【银行xBankMIBS消息持久存储及消息获取方案】主要涉及的是银行核心业务系统中的消息处理机制,尤其是异步处理技术的应用。在现代银行系统中,为了提升服务质量和效率,前台柜面业务与后台处理的分离至关重要。通过...

    消息队列使用CourseOrder

    通过将消息发送到队列,生产者可以继续执行其他任务,而消费者可以在准备好时从队列中获取并处理消息,实现异步处理。 2. **CourseOrder应用场景**:在"CourseOrder"系统中,消息队列可能用于处理用户的课程购买...

    从 0 开始带你成为消息中间件实战高手.zip

    在IT行业中,消息中间件(Message Queue,简称MQ)扮演着至关重要的角色,它能够帮助系统实现解耦、异步处理和扩展性提升。本资源集合是一份专为初学者和有经验的开发者设计的实战教程,旨在带你从零开始深入理解并...

    消息中间件的设计

    2. **顺序消息与重复消息处理**:在某些场景下,消息的顺序是非常重要的。因此,消息队列需要支持顺序消息的处理,确保消息按照发送的顺序被正确处理。此外,还需要解决可能出现的重复消息问题,避免对业务造成影响...

    RabbitMQ消息中间件视频教程

    同时,它还能帮助开发者处理异步通信、流量削峰、数据分发等问题,使得应用间的交互更加高效、稳定。 #### 三、RabbitMQ核心概念 1. **Exchange(交换器)**:负责接收来自生产者的消息,并根据绑定规则将消息转发...

    06_引入消息队列之后该如何保证其高可用性?.zip

    4. **幂等性设计**:在消息处理过程中,可能会遇到消息重复发送的情况,因此消费者端需要设计为幂等的,即多次处理同一消息结果应保持一致,不会造成数据错误。 5. **事务支持**:在某些业务场景下,消息发送与业务...

    实现消息中间件时-去哪儿

    3. **最终一致性**:通过异步确认的方式,在事务提交后异步发送消息,并确保消息最终能够被正确处理。这种方式适用于对实时性要求不高的场景。 #### 二、容灾 消息中间件的容灾能力对于保证系统的稳定性和可用性至...

    MQ Cert Part IV

    MQI是开发WebSphere MQ应用程序的关键API,而这一系列的教程旨在帮助准备参加IBM认证测试的中级设计师们,提升他们在异步消息传递概念、规划、架构设计及基于WebSphere MQ解决方案设计方面的能力。 知识点详解: #...

    尚硅谷大数据技术之Kafka1

    - **消息队列的应用**:消息队列主要用于同步处理和异步处理,如注册信息的异步处理,通过消息队列解耦系统,提高系统的可恢复性和缓冲能力。 2. **消息队列的好处** - **解耦**:生产者和消费者可以独立扩展或...

    分布式消息中间件选型比对验证报告

    消息中间件通过高效、可靠的异步消息传递机制,降低了不同应用之间的耦合,提高了系统的可伸缩性和数据交换性能。在分布式系统架构中,消息中间件还确保了高可用性和一致性。 在选择分布式消息中间件时,企业需要...

    Kafka学习资料.pdf

    它的设计理念是保证高效的数据传输、低延迟的消息处理,并且拥有水平扩展的能力。 在Kafka中,消息生产者(Producer)向Kafka的Broker(服务器)发送消息,消息消费者(Consumer)从Broker上订阅并消费这些消息。...

    尚硅谷_消息中间件RabbitMQ_课件.rar

    10. **最佳实践**:包括正确设置消息确认机制、合理规划交换器和队列、避免阻塞消费者、监控性能指标等,都是使用RabbitMQ时需要注意的关键点。 通过学习这份"尚硅谷_消息中间件RabbitMQ_课件",Java开发者能够全面...

    Aliware-MQ培训资料

    消息队列(MQ)是企业级互联网架构中的重要组件,它主要负责处理异步消息,提供了一种将数据从一个应用传输到另一个应用的方式。消息中间件的原理可以概括为同步用户请求和异步用户请求两个方面,通过引入消息中间件...

    Oracle-AQ Oracle-AQ

    - **合理设计队列结构**:合理规划队列的结构和布局,以提高消息处理的效率。 - **优化消息格式**:尽量减小程序的消息负载,减少不必要的字段,以加快消息的传递速度。 - **定期维护队列**:定期清理过期消息,保持...

    机器人路径规划.pdf

    ROS提供的服务包括基于服务的同步RPC通信、基于Topic的异步数据流通信以及参数服务器,这些通信方式使得模块化和复用性成为可能,从而简化了路径规划的实现。此外,ROS社区的广泛支持和丰富的软件包资源,如NavStack...

Global site tag (gtag.js) - Google Analytics