`

Spring对Quartz的封装实现简单分析及使用注意事项

    博客分类:
  • java
阅读更多
前段时间在项目中一直使用正常的Quartz突然出现了任务漏跑的情况,由于我以前看过Quartz的内部实现,凭借记忆我觉得是由于Quartz的线程池的使用出现问题导致了故障的发生。为了搞清问题的真相,我又重新看了一下Quartz的代码,以下是我对Quartz的一些分析,欢迎各位大牛拍砖。

在看Spring的代码时发现Spring对Quartz封装过以后对Quartz的初始化过程还是比较复杂的,我对比较关键的几点提取出来画出了上面的时序图。大家可以结合代码看上面的时序图应该可以理解Quartz的初始化过程。图中的SpringContext只是用来代表Spring容器,我们在使用Quartz时没有对它进行特殊的配置,因此它各种参数都是默认的。特别是“org.quartz.threadPool.threadCount”这个参数Scheduler中线程池的大小也是使用了Spring的默认值10,这个默认值就有可能是造成我们的系统线上定时任务故障的原因,下面我再详细的解析一下。

QuartzScheduler是整个定时任务框架工作的核心类,上面的类图仅仅展现了QuartzScheduler中几个核心成员。QuartzSchedulerResources可以认为是存放一切配置以及通过配置初始化出来的一些资源的容器,其中包括了存储job定义的jobStore,JobStore可以有多种实现,我们使用的是默认的RAMJobStore;还有一个非常重要的对象就是ThreadPool,这个线程池管理着执行我们定义的Job所需的所有线程。这个线程池的大小配置就是通过我上面提到过的“org.quartz.threadPool.threadCount”进行配置的。QuartzScheduler另一个重要成员就是QuartzSchedulerThread,没有这个线程的话我们所有定义的任务都不会被触发执行,也就是说它是Quartz后台的“守护线程”,它不断的去查找合适的job并触发这些Job执行。下图展现了QuartzSchedulerThread的主要业务逻辑。

上图中有一处肯定引起了大家的注意,那就是判断可用线程数的阻塞方法。这个方法当线程池中可用的连接数小于1的时候会调用Object.wait()方法,让QuartzSchedulerThread线程等待直到线程池中有可用的线程以后才返回结果。这样的话如果遇到在某一时刻并发的任务比较多的情况下就极有可能导致有些任务没有按我们预先设定的时间进行执行。

下面再来看一下我对Quartz进行的一个测试:
1.在Spring配置文件中配置了13个job,每个Job实现代码都一样具体如下:
public class TestJob1 {
    protected int times=0;
    
    public void doJob2(){
       times++;
       System.out.println(this.getClass().getName()+" start job. times:"+times+" "+new Date());
       try {
           Thread.sleep(1000L*60L*3L);
       } catch (InterruptedException e) {
           // TODO Auto-generated catch block
           e.printStackTrace();
       }
       System.out.println(this.getClass().getName()+" end job. times:"+times);
    }
}

2.Spring配置中cronExpression如下:
  <bean id="testJob1" class="com.xxx.xxxx.test.order.TestJob1"/>
  <bean id="testJob1Trigger" class="org.springframework.scheduling.quartz.CronTriggerBean">
       <property name="jobDetail">
           <bean class="org.springframework.scheduling.quartz.MethodInvokingJobDetailFactoryBean">
               <property name="concurrent" value="false"/>
                <property name="targetObject" ref="testJob1"/>
                <property name="targetMethod" value="doJob2"/>
           </bean>
       </property>
       <property name="cronExpression" value="0 0/1 * * * ? *"/>
    </bean>
    
      <bean id="testJob2" class="com.xxx.xxxx.test.order.TestJob2"/>
  <bean id="testJob2Trigger" class="org.springframework.scheduling.quartz.CronTriggerBean">
       <property name="jobDetail">
           <bean class="org.springframework.scheduling.quartz.MethodInvokingJobDetailFactoryBean">
               <property name="concurrent" value="false"/>
                <property name="targetObject" ref="testJob2"/>
                <property name="targetMethod" value="doJob2"/>
           </bean>
       </property>
       <property name="cronExpression" value="0 0/1 * * * ? *"/>
    </bean>
   <!--这里省略job3-job11的配置,这些JOB的配置同job1,job2-->
   <bean id="testJob12" class="com.xxx.xxxx.test.order.TestJob12"/>
  <bean id="testJob12Trigger" class="org.springframework.scheduling.quartz.CronTriggerBean">
       <property name="jobDetail">
           <bean class="org.springframework.scheduling.quartz.MethodInvokingJobDetailFactoryBean">
               <property name="concurrent" value="false"/>
                <property name="targetObject" ref="testJob12"/>
                <property name="targetMethod" value="doJob2"/>
           </bean>
       </property>
       <property name="cronExpression" value="30 0/1 * * * ? *"/>
    </bean>   
    
      <bean id="testJob13" class="com.xxx.xxxx.test.order.TestJob13"/>
  <bean id="testJob13Trigger" class="org.springframework.scheduling.quartz.CronTriggerBean">
       <property name="jobDetail">
           <bean class="org.springframework.scheduling.quartz.MethodInvokingJobDetailFactoryBean">
               <property name="concurrent" value="false"/>
                <property name="targetObject" ref="testJob13"/>
                <property name="targetMethod" value="doJob2"/>
           </bean>
       </property>
       <property name="cronExpression" value="50 0/1 * * * ? *"/>

也就是说除了testJob12和testJob13是我们期望分别在每分钟的30秒、50秒被触发,其他的job都是每分钟的0秒时被触发
3.下面我们看一下Quartz的执行结果
com.xxx.xxxx.test.order.TestJob13 start job. times:1 Wed Jun 02 09:12:51 CST 2010
com.xxx.xxxx.test.order.TestJob10 start job. times:1 Wed Jun 02 09:13:00 CST 2010
com.xxx.xxxx.test.order.TestJob11 start job. times:1 Wed Jun 02 09:13:00 CST 2010
com.xxx.xxxx.test.order.TestJob1 start job. times:1 Wed Jun 02 09:13:00 CST 2010
com.xxx.xxxx.test.order.TestJob2 start job. times:1 Wed Jun 02 09:13:00 CST 2010
com.xxx.xxxx.test.order.TestJob3 start job. times:1 Wed Jun 02 09:13:00 CST 2010
com.xxx.xxxx.test.order.TestJob4 start job. times:1 Wed Jun 02 09:13:00 CST 2010
com.xxx.xxxx.test.order.TestJob5 start job. times:1 Wed Jun 02 09:13:00 CST 2010
com.xxx.xxxx.test.order.TestJob6 start job. times:1 Wed Jun 02 09:13:00 CST 2010
com.xxx.xxxx.test.order.TestJob7 start job. times:1 Wed Jun 02 09:13:00 CST 2010

com.xxx.xxxx.test.order.TestJob13 end job. times:1
com.xxx.xxxx.test.order.TestJob12 start job. times:1 Wed Jun 02 09:15:51 CST 2010
com.xxx.xxxx.test.order.TestJob10 end job. times:1
com.xxx.xxxx.test.order.TestJob13 start job. times:2 Wed Jun 02 09:16:00 CST 2010

com.xxx.xxxx.test.order.TestJob11 end job. times:1
com.xxx.xxxx.test.order.TestJob1 end job. times:1
com.xxx.xxxx.test.order.TestJob3 end job. times:1
com.xxx.xxxx.test.order.TestJob2 end job. times:1
……

我们可以看到在红色区块里是Quartz第一次调度启动的所有JOB,我们可以看到这个时候只启动了10个JOB,job8,9,12因为线程池无可用线程没有被触发起来。
我们再看绿色区块由于job13第一次的任务执行结束使得线程池中有了空闲的线程,job12得以被触发但是这里请大家注意一下JOB12的开始时间09:15:51这已经不是我们说期望的每分钟的30秒那一刻开始执行。绿色区块的后面两条日志我们也可以看到由于Job10执行完成JOB13开始了第二次执行09:16:00但是Job13的触发时间也不是我们所期望的每分钟的50秒那一刻开始执行。
后面的日志我就不再解释从上面的日志我们基本上可以看出来,当Quartz得线程池在某一个时刻被占满的时候,后续的一些job无法保证在我们所期望的时间点被执行.
   通过这个测试得出了我们使用Quartz时需要注意的几点事项:
1. 同一个时刻,或者相隔较近的一段时间内不能配置超过Quartz线程池大小的任务数。有时候即使是在某时刻任务数配置的不多但是也要关心一下在它的前面是否有大量的耗时的任务,这样同样会有可能导致你的任务不在你期望的时间点被执行。
2. 在你的定时任务里不要依赖定时钟的启动时间来做一些操作,比如根据当前时间取一些数据的操作,如果有类似这样的操作当定时钟没有在你期望的时间点被触发的时候极有可能造成数据遗漏之类的问题。
3
0
分享到:
评论
2 楼 wangyao520 2011-07-19  
不错,很强大.
1 楼 sea0108 2010-12-22  
写的非常好。

相关推荐

    对Quartz的简单封装

    这篇博客“对Quartz的简单封装”可能介绍了如何将Quartz的基本功能进行包装,以方便开发者在实际项目中更加便捷地使用。Quartz的核心特性包括可配置的CRON表达式、作业与触发器的组合以及对任务执行的监控。 Quartz...

    spring+quartz demo

    Spring 提供了与 Quartz 集成的模块,使得在 Spring 应用程序中使用 Quartz 更加便捷,包括 Job 实例的管理、触发器的配置以及对 Quartz Scheduler 的控制。 在这个 "spring+quartz demo" 中,我们可以学习到如何将...

    spring的quartz使用实例

    - 简化配置:Spring通过`org.springframework.scheduling.quartz`包提供了对Quartz的封装,使得配置和管理Job、Trigger变得更加简洁。 - AOP支持:Spring能够利用其AOP(面向切面编程)能力,为Job提供事务管理和...

    SpringQuartz的使用文档

    Spring对Quartz进行了集成,使其更易于在Spring应用程序中使用。Spring提供了`FactoryBean`类,如`SchedulerFactoryBean`,用于创建和管理Quartz的`Scheduler`实例。这使得我们可以利用Spring的依赖注入(DI)和管理...

    quartz和spring-quartz

    “spring的quartz应用.txt”可能包含Spring-Quartz的具体使用示例和注意事项;“spring-quartz-demo”可能是一个完整的示例项目,你可以通过运行它来深入理解Quartz在Spring中的应用。通过研究这些资源,你可以更...

    spring 集成quartz 用数据库实现quartz的集群

    【Spring集成Quartz定时任务与数据库实现集群详解】 在企业级应用中,定时任务的管理是必不可少的一部分,Spring框架提供了与Quartz的集成,使得我们可以方便地创建和管理定时任务。Quartz是一款强大的、开放源代码...

    quartz整合springbatch动态集群定时实现mysql参考

    在这个“quartz_springbatch_dynamic”项目中,我们将看到如何将这两个强大的工具结合起来,以实现动态集群环境中的定时任务执行,并使用MySQL作为数据存储。 Quartz是一个开源的作业调度框架,允许开发者创建、...

    spring+quartz使用jar包

    1. **Spring与Quartz的整合**:Spring 提供了对Quartz的集成支持,通过`org.springframework.scheduling.quartz`包中的类,如`SchedulerFactoryBean`和`ThreadPoolTaskExecutor`,可以轻松地将Quartz纳入Spring的...

    quartz封装

    综上所述,Spring对Quartz的封装简化了任务调度的实现,提高了代码的可读性和可维护性,同时充分利用了Spring的IoC和AOP特性,为复杂的企业级应用提供了强大而灵活的任务调度能力。通过正确配置和使用,我们可以轻松...

    Spring_QuartZDemo

    【Spring_QuartZDemo】是一个使用Spring框架集成Quartz定时任务的示例项目,它展示了如何在Java应用中利用Spring和Quartz实现任务调度。Quartz是Java领域一款功能强大的开源作业调度库,能够帮助开发者创建、调度和...

    Java_Spring与Quartz的整合

    Java Spring 框架是企业级应用开发的热门选择,它提供了一种全面的依赖注入(Dependency Injection,DI)和面向切面编程(Aspect Oriented Programming,AOP)的解决方案,使得开发者能够更加专注于业务逻辑的实现,...

    关于spring中quartz的配置

    在Spring框架中集成Quartz是一款常见的任务调度解决方案,它允许开发者在应用中安排定时任务的执行。Quartz是一个开源的作业调度框架,可以用来在Java应用程序中安排复杂的作业任务。以下将详细介绍如何在Spring中...

    spring+quartz定时小例子

    Spring 和 Quartz 是两个在 Java 开发中非常重要的框架,它们分别用于依赖注入和任务调度。Spring 是一个全方位的 Java 应用开发框架,提供了一系列强大的功能,如 AOP(面向切面编程)、DI(依赖注入)、事务管理等...

    Spring-quartz实现定时器(含代码)

    本文将深入探讨如何使用Spring整合Quartz来实现定时器,并提供相关代码示例。 首先,理解Spring框架。Spring是一个开源的Java平台,它提供了全面的企业级应用程序开发解决方案,包括依赖注入(DI)、面向切面编程...

    Spring+Quartz2

    Spring 和 Quartz2 是两个在 Java 开发中广泛使用的框架,它们在企业级应用中承担着重要的角色。Spring 是一个全面的、开源的应用框架,而 Quartz2 是一个强大的、开源的作业调度库,常用于实现定时任务。下面我们将...

    spring整合quartz使用jdbc存储

    下面将详细介绍如何进行Spring与Quartz的整合,以及使用JDBC存储的相关步骤。 1. **Spring与Quartz的整合** 首先,我们需要在项目中引入Spring和Quartz的相关依赖。在Maven或Gradle的pom.xml或build.gradle文件中...

    spring-quartz简单实例

    在这个"spring-quartz简单实例"中,我们将探讨如何在Spring环境下配置和使用Quartz。 首先,我们需要引入Quartz和Spring的依赖。在Maven项目中,这通常通过在pom.xml文件中添加以下依赖来完成: ```xml ...

    Spring中的Quartz配置-Spring-定时器-java定时器.doc

    Spring 中的 Quartz 配置-Spring 定时器-java 定时器 在 Spring 框架中,Quartz 是一个非常流行的开源作业调度器,可以实现任务的定时执行。在本篇文章中,我们将讨论如何在 Spring 中配置 Quartz,以实现 Java ...

    spring-quartz定时设置详细说明

    将它们结合使用,我们可以实现基于 Spring 的应用程序中的定时任务管理。以下是对 "spring-quartz 定时设置详细说明" 的详细解释。 一、Quartz 简介 Quartz 是一个开源的作业调度框架,可以用来创建、调度和执行...

    spring和quartz的定时器的启动和停止例子

    通过以上步骤,我们可以灵活地在Spring应用中使用Quartz实现定时任务的启动和停止。在实际项目中,还可以根据需求对任务进行分组、优先级排序、任务依赖设置等高级功能,以满足复杂的调度需求。记得在生产环境中,...

Global site tag (gtag.js) - Google Analytics