`

使用JMS在集群应用程序中分配任务(图)

    博客分类:
  • jms
jms 
阅读更多

使用JMS在集群应用程序中分配任务(图)

在请求驱动的环境中解耦合和延迟处理是创建健壮和可伸缩的分布式应用程序的关键战略之一。许多服务都单独依赖于集群来确保可伸缩性,但是当新发现的需求使应用程序的复杂性增长时,它们常常会遇到麻烦。
  
  尽管服务器集群是推动可伸缩性的基本技术,但是当所有的处理都同步完成时,它可能变得很低效。吞吐量可能会增加,但是响应性却会变得不可救药。
  
  在本文中,我讨论了异步处理,并举例说明了,巧妙的任务管理会如何提高您应用程序的性能、可用性、可伸缩性和可管理性。我们将以一种高度可配置的方式,创建一个一般的任务分配框架,该框架可以发送任何任务给您的集群中的一台或每台服务器。通过使用多态和 Java 消息服务( Java Message Service , JMS ),我们的框架将实现著名的 Command 模式。
  
  解耦合在实际中的意义
  
  当服务器收到客户端请求时,它通常需要在返回响应之前执行几个单独的任务。解耦合( decoupling )意味着不会一次执行所有的任务,而是把一些任务放入队列并异步地进行处理。因为排队通常是一项低开销的操作,同步的请求会更快地结束。
  
  解耦合的优点
  
  按照顺序和并行地处理任务,通常会比随机地处理它们要更加高效(客户端偶然发出请求的时候)。正面的影响比随即表现出来的要大。理论上,解耦合可以提高以下各个方面的性能:
  
  健壮性 : 提高,因为请求将依赖的可能失效的过程更少。
  
  响应性 : 请求的部分后处理减少了接收请求和返回响应之间的时间。
  
  可伸缩性 : 所有解耦合后的过程在复杂性方面可能会增加,但不会有降低响应度的危险。
  
  可用性 : 可以在服务器永远不知道故障原因的情况下处理故障。
  
  在子系统不可用的情况下,配置自动重试要更加容易。
  
  自然,理论与实践之间的差别在每个应用程序上的体现各不相同。然而,显然,几乎每种实现都至少具有前述的某些优点。
  
  解耦合的缺陷
  
  和大部分好东西一样,解耦合也存在缺点。其中最严重的缺点之一就是,如果您不能确保您拥有足够强大的硬件来清空繁忙的处理队列,那么您可能会发现,它的可用性实际上降低了。如果进入的异步请求比您的系统能够处理的要多,队列就会非常迅速地增长。您必须注意设计过程,而对队列实行自动监控无疑是可取的做法。另一个明显的问题是,在请求驱动的环境中,大多数过程都不是很适合于解耦合。事实上,大多数处理都可能被要求返回响应。有时,它会需要一些开箱即用的思想,甚至可能是您为您的客户端所提供的服务方式的变化。
  
  哪些过程可以解耦合
  
  从纯技术的角度来讲,几乎所有的过程都可以解耦合。例如,您可以把一个所购买物品及客户详细信息的清单放入队列,从而可以解耦合一个订单事务——异步处理将负责余下的工作。不足之处在于您不能在响应中包含任何处理细节。因此,谨慎地预先验证数据是很重要的,这样可以确保不会出现问题。
  
  一种越来越流行的实现是,马上把请求放入队列,然后持续轮询服务器,以便了解何时可以获得响应。尽管这种方法在本质上实际是同步的,而且不会增加请求的处理时间,但是它在心理上具有优势,因为可以在轮询期间显示进度条。
  
  除了解耦合完整的业务逻辑(这是一个巨大的难题)之外,更少的集中处理,比如日志记录和发送电子邮件,是可以考虑的良好选择。当性能变得及其重要时,没有理由让客户端等待这种任务的完成。特别的电子邮件是用于解耦合的一个良好选择。让我们做进一步的了解。
  
  实例研究:异步的电子邮件
  
  以传统的方式发送电子邮件(作为同步请求的一部分)会引起一些问题。首先,连接到电子邮件服务器需要一次网络往返,速度可能会很慢,尤其是在服务器非常繁忙的时候。过载的电子邮件服务器甚至可以使依赖于电子邮件的服务暂时不可用。
  
  XA 事务支持
  
  另一个显而易见的问题是,电子邮件服务器通常在本质上是非事务性的。当事务被回滚时,这可以导致出现不一致的通知——把一条消息放入队列之后不能取消它。幸运的是, JMS 支持事务,而且可以通过把消息的发送延迟到提交底层事务的时候来解决这个问题。
  
  考虑访问数据库和事务感知的 JMS 时,您将需要使用 XA 和两阶段提交( 2PC )事务。可以使用非 XA 资源来模拟 XA ,但是您可能会得到不一致的数据。启用 XA 只是一个配置问题,而且通常不需要修改代码。参见 WebLogic 文档以获得相关的详细信息。
  
  通过 JMS 发送电子邮件
  
  为了使用 JMS 来发送电子邮件,我们需要配置 JMS 组件(比如, JMS 服务器, JMS 队列和连接工厂)。我们还需要编写一个消息驱动 Bean ( Message Driven Bean , MDB )来执行信件的实际发送。当我们想要在我们的代码中发送电子邮件时,需要创建一条包含信件的属性和内容的 JMS 消息。之后,我们把它发送给处理队列。
  
  这样做的工作量很大!幸运的是, BEA WebLogic JMS 为我们提供了创建一个可以解耦合几乎任何过程的框架所需的全部内容。
  
  用于异步执行的框架
  
  是动手看看一些代码的时候了。我们将创建一个框架,这个框架支持在集群中的一台或所有服务器上,异步地执行代码的任何部分。实现起来的确需要花费些力气,但是一旦框架完成,异步执行就是再容易不过的事情了。
  
  这个思路是编写一些类,这些类包含一个带有可运行代码的公共方法和另一个用于初始化参数的方法——可能是构造器。封装在 JMS 对象消息中之后,这些预先编写好的类的实例(命令消息)就被发送给在您的服务器上配置的 JMS 队列。至此,消费者把它们取出,然后异步地执行它们(参见图 1 )。
  


  让我们逐个看看这个框架的所有部分:
  
  JMS 队列 : 应该在每台服务器上配置一个用于接收命令消息的 JMS 队列。还应该为重复保存故障消息配置错误队列。
  
  JMS 连接工厂 : 为了支持事务性行为的运行时选择,应该配置两个连接工厂:一个支持 XA ,而另一个不支持 XA 。
  
  命令对象接口 (CommandMessage) : 这是一个所有命令对象都需要实现的简单 Java 接口。它扩展了 java.io.Serializable 接口,该接口对于在 JMS 对象消息中嵌入我们的命令来说是必需的。现在,因为我们想要在不知道命令的确切类型的情况下运行它们,我们还要实现 java.lang.Runnable 接口,稍后把它们简单地转换为 Runnable 对象,并执行它们的运行方法。我们在不知道我们运行的确切内容的情况下运行了代码。这是最理想的多态。
  
  命令执行程序 (CommandExecutionManager) : 我们将使用一个 MDB 来处理命令。实例池化防止了 JMS 初始化重复出现,这使得 MDB 成为功能非常强大的消息监听器,非常适合于这项任务。编写 Bean 类不需要很大的工作量,我们只需要在 onMessage 方法中编写数行代码(参见清单 1 )。
  
  这样就把收到的消息传递给一个 ObjectMessage ,获得嵌入的命令对象,然后执行它的运行方法。通过在 config.xml 文件中,把队列的重新发送限制设置为一个大于 0 的值,您可以配置一个重试计数器。从您的命令对象抛出一个运行时异常,便可触发重新发送的动作。此外,通过配置重新发送延迟,您还可以控制重试的频率。
  
  用于发送消息的一个帮助器类 (TaskDistributor)
  
  从技术上说,这个部分并不是完全必要的,每次都可以手动进行 JMS 排队。然而,这是一个冗长乏味的过程,而且实际上是帮助器使这个框架变得如此实用。帮助器是一个常规的 Java 类,带有用于对命令消息进行排队的静态方法。您可以针对处理不同的场景编写单独的方法,但是为了简明起见,我选择了编写一个可以处理大多数情况的方法:
  
  static void execute(CommandMessage cm, long delay, b oo lean runEverywhere, b oo lean persisted, b oo lean
  enableXA, int priority)
  
  这个静态方法带有几个用于精确执行控制的参数。让我们逐个讨论这些参数:
  
  CommandMessage cm : 一个命令消息实例。
  
  long delay : 代表发送属性的时间,借助 weblogic.jms.extensions.WLMessageProducer 类进行设置。这样,就可以在夜间或者其他方便的时间执行命令。接受一个 Date 对象也是可以的。
  
  b oo lean runEverywhere : 决定是否发送要执行的消息给集群中的一台随机选中的访问器或者所有的服务器。
  
  b oo lean persisted : 将通过使用队列发送程序的 setDeliveryMode 方法选择发送模式。应该始终保持业务关键型的消息,从而在访问器崩溃的时候,这些消息不会丢失。然而,持久性始终是以性能损失为代价的,这也应该纳入考虑的范围内。
  
  b oo lean enableXA : 将选择方法是否使用支持 XA 的 JMS 连接工厂。此参数设置为 true 时,排队将参与底层事务(如果存在的话),在提交事务之前不会对消息进行排队。
  
  int priority : 决定消息的 JMS 优先级。在发送之前,将使用给定的值调用 javax.jms.Message 类的 setJMSPriority 方法。有效的范围是 0-9 。对于大多数应用程序来说,给命令消息指派不同的优先级似乎有些过头,但是出于完整性方面的考虑,我还是在这里包括了这个选择。
  
  应该针对您的特定执行的需要,来量身打造 TaskDistributor 帮助器类的实现。在本文中,要包含一个例子似乎太长了,但是您可以从 WLDJ Web 站点 www.sys-con.

分享到:
评论

相关推荐

    Kettle_中的集群

    在Java应用程序中,你可以直接使用Pentaho的API启动子服务器,这需要对Pentaho的API有深入理解。 #### 2.1.3 子服务器内幕 子服务器一旦启动,它们会与主服务器保持连接,等待接收任务和返回结果。 #### 2.2 运行...

    weblogic的集群配置

    在WebLogic集群中,多个服务器实例共享应用程序和服务,从而提供更强大的服务能力和更好的系统性能。 【描述】:“NULL” 虽然描述部分为空,但我们可以通过对WebLogic集群的理解来补充。在WebLogic集群配置中,...

    JMS规范培训教程

    在JMS中,消息是一个数据对象,它可以在应用程序之间传递信息,而无需两者同时在线。SUN MQ(Sun Microsystems的Message Queue)是早期支持JMS规范的实现之一,现已被Oracle集成到WebLogic Server中。 **JMS核心...

    weblogic集群配置与部署

    WebLogic集群配置与部署是企业级Java应用服务器中的一项关键技术,主要用于提高应用程序的可用性、可伸缩性和性能。WebLogic Server是Oracle公司提供的一个成熟的中间件平台,支持高并发、分布式处理以及故障转移等...

    WebLogic Server 9.2集群配置(单服务器版)

    5. **配置集群**:在管理服务器上定义集群,将 Managed Server 分配到集群中,配置集群的属性,如负载均衡策略、故障转移策略等。 6. **部署应用程序**:在集群上部署应用程序,WebLogic 会自动在所有 Managed ...

    配置weblogic10.3集群文档

    WebLogic Server 10.3 集群的配置是一项关键任务,它涉及到分布式应用程序的部署、容错和负载均衡,确保系统的高可用性和可扩展性。本篇文档将详细介绍如何在Windows环境下配置WebLogic 10.3集群,以及如何进行EJB3...

    Linux环境WebLogic集群简单配置

    动态IP可能会导致网络通信问题,不推荐在集群环境中使用。 4. **管理服务器的位置**:最佳实践建议将管理服务器设置在集群之外,以避免因管理服务器故障影响整个集群的运行。 5. **集群的负载均衡与容错**:在本...

    配置WebLogic Server集群

    在 WebLogic Server 中,集群是由一组配置相同的服务器实例组成的,它们共享应用程序和服务,并通过网络通信协同工作。 **Domain 和 Server** 在 WebLogic 中,Domain 是管理单元,它包含了若干个 WebLogic Server ...

    weblogic 集群 OA系统安装与部署

    5. **部署OA应用**:在WebLogic控制台中,管理员可以上传OA系统的应用包,选择适当的部署目标(即集群),配置相关的部署属性,如数据源、JMS队列等。完成这些步骤后,应用会被分发到集群中的每个节点。 6. **配置...

    weblogic集群配置

    4. **应用程序部署**:在集群环境中,应用程序应部署到集群,而不是单独的服务器。这样,应用程序会自动分发到集群内的所有成员,确保所有服务器都有相同的应用程序副本。 5. **负载均衡**:WebLogic Server内置了...

    WebSphere_MQ集群资料

    在WebSphere MQ中,通过JMS API,开发人员可以利用MQ的消息传递功能来构建分布式、异步和解耦的应用程序。 3. **MDB(Message Driven Bean)** MDB是Java EE环境中的一个组件,它作为消息消费者,监听JMS队列或...

    weblogic集群

    总之,配置WebLogic集群是一项复杂但至关重要的任务,需要深入了解WebLogic的特性和最佳实践,以确保应用程序能在高可用和高性能的环境中运行。通过深入学习和实践,管理员可以熟练掌握集群的配置和管理,为企业IT...

    websphere集群配置

    6. **应用部署**:将应用程序部署到集群,而不是单个服务器,确保所有成员都能访问。 7. **测试与监控**:进行故障转移和负载均衡测试,同时利用Websphere的监控工具监控集群状态。 【四、关键配置点】 1. **共享...

    JAVAEE J2EE WEBLOGIC 集群

    WebLogic Server是Oracle公司开发的一款基于JavaEE(J2EE)的应用服务器,它在企业环境中广泛用于部署和管理应用程序。WebLogic集群是WebLogic Server的一项关键特性,它提供了高可用性、负载均衡和故障转移能力,...

    BEA集群资料PPT

    BEA(现在已被Oracle公司收购,更名为Oracle WebLogic Server)是一款企业级的应用服务器,它提供了一种强大的集群解决方案,能够提高应用程序的可用性、可伸缩性和性能。集群是通过将多个独立的服务器实例组合在...

    weblogic集群部署

    这样,应用程序可以在集群内的所有服务器上运行。 ### 高可用性和故障转移 - **健康检查**:集群会定期检查服务器实例的健康状态,如果发现某个实例出现问题,会自动将工作负载转移到其他健康的服务器上。 - **会话...

    Weblogic 10集群配置手册

    WebLogic Server 10.3 集群配置手册提供了详细的指南,帮助用户在WebLogic Server环境下构建和管理高可用性和高性能的分布式应用程序环境。WebLogic Server是Oracle公司的一款企业级Java EE应用服务器,它提供了丰富...

    Oracle weblogic10.3.1.0.0集群配置手册

    Oracle WebLogic Server是一款强大的Java应用服务器,广泛应用于企业级的分布式应用程序部署。 一、WebLogic Server基础 WebLogic Server是Oracle公司的中间件产品,基于Java EE(Enterprise Edition)标准,提供了...

    weblogic集群的可执行文件

    在实际操作中,你还需要了解如何通过网络配置确保集群内的通信,例如使用专用的集群通道(ClusterMessagingProtocol)和多播地址。此外,数据源、JMS队列和主题等资源也需要在集群级别进行配置,以确保其在所有成员...

    linux环境weblogic集群简单配置.pdf

    在Linux环境下配置WebLogic集群是一项关键的技术任务,用于提高应用程序的可用性和性能。WebLogic Server是Oracle提供的一个Java EE应用服务器,它支持集群部署以实现负载均衡和容错能力。以下将详细介绍配置...

Global site tag (gtag.js) - Google Analytics