`

线程池

 
阅读更多

我们都知道使用线程池能够控制线程的数量,尤其是大量的“短命”线程存在时,线程池将大大降低系统消耗(内存和CPU)。不过,线程池也同样需要管理。
首先,我们来看看管理器的整个继承关系:

 

显而易见,有ThreadPoolExecutor和 ScheduledThreadPoolExecutor两个实现类,当然Executor类里也有一些内部类实现了特定的功能(如class DelegatedScheduledExecutorService),我们也可以自己通过扩展这里所有的接口、抽象类、类来实现自己的特定功能,如继 承ThreadPoolExecutor类,覆写beforeExecute(),让它在每个任务开始执行前执行某些操作,还有很多可扩展功能,有兴趣的 朋友可以自己摸索。
你有两种方法创建上面管理器的实例:
1、你可以用上面介绍的两个类的那这些类的实例的构造函数来创建管理器的实例,不过你要自己配置一些诸如池最大尺寸(maximumPoolSize )的参数。
2、Executors提供各种创建上面的类的实例的方法,它默认一些参数的设置。我主要介绍
这种方法中的newFixedThreadPool(int)和newCachedThreadPool()

newFixedThreadPool(int)-
创建一个默认尺寸的池,它同时运行的线程数将是固定的,如果你要让它课同时运行的最大线程数大于初始设置的那个参数,可以调用setMaximumPoolSize()来设置额外的线程来并行处理更多的任务。
我们调用下面的方法来添加新的任务,到底Executors是如何处理的呢?

Java代码

  1. publicvoidexecute(Runnablecommand){
  2. if(command==null)
  3. thrownewNullPointerException();
  4. if(poolSize>=corePoolSize||!addIfUnderCorePoolSize(command)){
  5. //如果实时连接数小于corePoolSize,那么调用addIfUnderCorePoolSize()方法
  6. if(runState==RUNNING&&workQueue.offer(command)){
  7. //如果实时连接数大于了corePoolSize,那么将任务加进等待队列中。
  8. if(runState!=RUNNING||poolSize==0)
  9. //在执行workQueue.offer(command)的过程中shutdown了,确保所有的已经提交任务能够成功执行完。
  10. ensureQueuedTaskHandled(command);
  11. }
  12. elseif(!addIfUnderMaximumPoolSize(command))
  13. reject(command);//isshutdownorsaturated
  14. }
  15. }
  16. 下面我们来看下poolSize>=corePoolSize为不同状态时两种执行方法:
  17. privatebooleanaddIfUnderCorePoolSize(RunnablefirstTask){
  18. //首先获取本类所有同步方法的锁
  19. Threadt=null;
  20. finalReentrantLockmainLock=this.mainLock;
  21. mainLock.lock();
  22. try{
  23. if(poolSize<corePoolSize&&runState==RUNNING)
  24. t=addThread(firstTask);
  25. }finally{
  26. mainLock.unlock();
  27. }
  28. if(t==null)
  29. returnfalse;
  30. t.start();
  31. returntrue;
  32. }
  33. privatebooleanaddIfUnderMaximumPoolSize(RunnablefirstTask){
  34. //首先获取本类所有同步方法的锁
  35. Threadt=null;
  36. finalReentrantLockmainLock=this.mainLock;
  37. mainLock.lock();
  38. try{
  39. if(poolSize<maximumPoolSize&&runState==RUNNING)
  40. t=addThread(firstTask);
  41. }finally{
  42. mainLock.unlock();
  43. }
  44. if(t==null)
  45. returnfalse;
  46. t.start();
  47. returntrue;
  48. }
  49. 几乎完全一样,估计authorDougLea当初也是直接copy的吧。
  50. 这两个方法都调用了
  51. privateThreadaddThread(RunnablefirstTask){
  52. Workerw=newWorker(firstTask);
  53. //这里并没有区分maximumPoolSize和corePoolSize
  54. Threadt=threadFactory.newThread(w);
  55. if(t!=null){
  56. w.thread=t;
  57. workers.add(w);//workers并没有尺寸的限制
  58. intnt=++poolSize;
  59. //这一步维护一个管理器使用过程中的最大尺寸,没什么好说的。
  60. if(nt>largestPoolSize)
  61. largestPoolSize=nt;
  62. }
  63. returnt;
  64. }
  65. 于是我认为发现管理器在对待aximumPoolSize和corePoolSize时根本没有什么区别,可是这是不正确的,至于为什么,大家可以自己去探索!

70.ThreadPoolExecutor类内部有一个:
private final HashSet<Worker> workers = new HashSet<Worker>();
其中Worker类是ThreadPoolExecutor一个内部类,实现了Runable接口。在 addIfUnderMaximumPoolSize()和addIfUnderCorePoolSize()两个方法中将任务添加进这个workers[]中,这个数组维护一个正在运行的任务组,这个数组中的一个元素对应一个正在运行的线程,如果一个线程以外死亡,数组中的元素没有被移 除,管理器将自动创建一个新的线程继续从头开始执行刚刚那个以外死亡的数组对应的任务。
如此神奇?那是如何实现的?
很简单,ThreadPoolExecutor维护的线程的run方法都是在这个loop中的,

71.Java代码

  1. while(task!=null||(task=getTask())!=null){
  2. runTask(task);
  3. task=null;
  4. }

如果意外死亡,task=null不执行,重新判断条件的时候再次调用runTask(task);即,死亡的是runTask(task)方法内部的run()调用而已。

说到这里,大家应该明白了,管理器无非就是用BlockingQueue<Runnable> workQueue队列(注意这个队列是线程安全的,挺有意思)来缓冲多出来的任务,而总是有不大于maximumPoolSize(注意,这里不是 corePoolSize )的线程在运行着,再有点异常死亡处理的能力而已。

--------newCachedThreadPool()--------

  1. 这个方法源码:
  2. publicstaticExecutorServicenewCachedThreadPool(){
  3. returnnewThreadPoolExecutor(0,Integer.MAX_VALUE,
  4. 60L,TimeUnit.SECONDS,
  5. newSynchronousQueue<Runnable>());
  6. }

原来,就是让corePoolSize =0,maximumPoolSize=最大整数,然后设置空闲线程的存活时间为60s而已。看到这里,大家或许会冒出这样一个疑问:既然 corePoolSize 是0,那么不是运行不了任何线程吗?呵呵,大家如果认真看了前面的文章就会有此疑问了。看同时刻运行的线程最大数是看参数maximumPoolSize 不是corePoolSize 。
至于存活时间设置,那是很有必要,否则

  1. while(task!=null||(task=getTask())!=null){
  2. runTask(task);
  3. task=null;
  4. }

getTask方法中从待执行任务缓冲队列中poll()任务的时候会有一个存活时间的超时机制,如果超时将返回null,这个线程将因为一系列连锁反应,最终死亡。

好了,看似简单的Executor我砍了这么多,顺序整理的不是很好,大家将就看看吧。
总结一下,在设计这几个类的时候用到集合、同步(锁和阻塞队列)、枚举(TimeUnit)、多线程、安全控制(本文没有涉及)、工厂设计模式等等知识点,不简单哪^-^

 

 

分享到:
评论

相关推荐

    线程池  

    线程池是一种多线程处理形式,通过预先创建一定数量的线程并管理它们,以提高系统的效率和响应性。在计算机科学中,特别是在软件开发领域,线程池是操作系统或者编程语言中的一种资源管理技术。它允许程序预先启动一...

    java线程池概念.txt

    corePoolSize:核心池的大小,在创建了线程池后,线程池中的线程数为0,当有任务来之后,就会创建一个线程去执行任务,当线程池中的线程数目达到corePoolSize后,就会把到达的任务放到缓存队列当中; ...

    阻塞线程池 阻塞线程池 阻塞线程池

    阻塞线程池阻塞线程池阻塞线程池阻塞线程池阻塞线程池阻塞线程池阻塞线程池阻塞线程池阻塞线程池阻塞线程池阻塞线程池阻塞线程池阻塞线程池阻塞线程池阻塞线程池阻塞线程池阻塞线程池阻塞线程池阻塞线程池阻塞线程池...

    C++实现线程池详解(基于boost源码以及封装等线程池)

    一、要实现高效的线程池,可以考虑以下几点 二、实现线程池可以按照以下步骤进行 三、简单的C++线程池代码示例 四、 基于boost编写的源码库 - 线程池 4.1 基于boost编写的源码库地址 4.2 boost线程池的先进先出、...

    线程池原理及创建(C++实现)

    ### 线程池原理及创建(C++实现) #### 一、线程池的重要性 在现代计算环境中,网络服务器面临着处理大量并发请求的挑战,其中包括但不限于Web服务器、电子邮件服务器和数据库服务器。这类服务器通常需要在短时间...

    java线程池使用后到底要关闭吗

    java线程池使用后到底要关闭吗 java线程池是一种高效的并发编程技术,可以帮助开发者更好地管理线程资源,提高系统的性能和可靠性。然而,在使用java线程池时,一个常见的问题是:使用完线程池后到底要不要关闭?...

    Django异步任务线程池实现原理

    文章通过实例展示了如何创建一个全局线程池类,该类中封装了线程池对象,并提供了向线程池提交任务、检查任务是否在运行等方法。全局线程池的生命周期与Django主线程的生命周期一致,确保了线程资源的合理释放。 5....

    windows线程池,使用Windows自带的线程池api功能,比你写的线程池性能好得多

    线程池是多线程编程中的一个重要概念,它是一种线程使用模式,通过预先创建一组线程并维护一个线程集合来处理并发任务。在Windows操作系统中,内建的线程池API(Thread Pool API)提供了高效且灵活的线程管理机制,...

    一个简单线程池的实现

    线程池是一种在多线程编程中非常重要的概念,它能有效地管理和调度系统中的线程资源,从而提高系统的效率和响应速度。在这个简单的线程池实现中,我们可以通过`pthread_pool.cpp`、`MainFunctionForTest.cpp`、`...

    VC++ 线程池(ThreadPool)实现

    在编程领域,线程池是一种多线程处理形式,处理过程中将任务添加到队列,然后在创建线程后自动启动这些任务。线程池在C++中是提高程序效率和资源管理的重要工具,尤其在处理大量并发操作时。本文将深入探讨VC++中...

    Java8并行流中自定义线程池操作示例

    Java8并行流中自定义线程池操作示例 Java8并行流中自定义线程池操作示例主要介绍了Java8并行流中自定义线程池操作,结合实例形式分析了并行流的相关概念、定义及自定义线程池的相关操作技巧。 1. 概览 Java8引入了...

    linux线程池创建c实现

    Linux 线程池创建 C 实现 线程池是一种常用的并发编程技术,它可以提高应用程序的性能和响应速度。在 Linux 系统中,使用 C 语言创建线程池可以实现高效的并发处理。 什么时候需要创建线程池呢?简单的说,如果一...

    DELPHI的ThreadPool的线程池DEMO

    DELPHI的线程池(ThreadPool)是一种高效管理并发任务的技术,它允许程序在需要时创建线程,而不是每次需要执行任务时都手动创建。线程池通过预先创建一组线程,然后根据需要分配任务,减少了线程创建和销毁的开销,...

    多线程写法(精易模块线程池和鱼刺模块线程池)

    本篇文章将重点探讨两种线程池实现:精易模块线程池和鱼刺模块线程池,并通过源码分析来展示它们的特点和用法。 首先,精易模块(SanYe Module)是由中国程序员SanYe开发的一系列开源模块,其中包含了线程池的实现...

    Linux线程池目录拷贝

    在Linux系统中,线程池是一种高效的进程管理方式,它允许多个任务并行执行,同时限制了系统中并发线程的数量,以优化资源分配和调度。本项目实现了利用线程池进行目录拷贝的功能,这涉及到多个重要的编程概念和技术...

    仿ACE线程池机制实现的线程池类

    线程池是一种优化资源管理的机制,通过预先创建并维护一组可重用的线程,避免频繁地创建和销毁线程带来的性能开销。在Java、C++等编程语言中,线程池广泛应用于并发处理,提高系统效率,降低系统的资源消耗。本项目...

    Python 使用threading+Queue实现线程池示例

    一、线程池 1、为什么需要使用线程池 1.1 创建/销毁线程伴随着系统开销,过于频繁的创建/销毁线程,会很大程度上影响处理效率。 记创建线程消耗时间T1,执行任务消耗时间T2,销毁线程消耗时间T3,如果T1+T3&gt;T2,那...

    线程池管理多线程上传

    线程池管理和多线程上传是并发编程中的一个重要实践,特别是在大数据传输和网络服务中。在Java等编程语言中,线程池通过有效地管理和复用线程资源,避免了频繁创建和销毁线程带来的开销,提升了系统性能。下面将详细...

    c++ 多线程线程池 demo

    线程池是多线程编程中一个重要的概念,它能够优化系统资源的使用,提高系统的响应速度和效率。本篇文章将深入探讨C++中的线程池实现,并通过名为“OEasyPool-1.0”的示例来展示其工作原理。 线程池是预先创建并维护...

    C#线程池 所有线程运行完毕

    在C#编程中,线程池(ThreadPool)是一种高效的线程管理机制,它允许开发者创建并管理多个线程,而无需直接操作线程对象。线程池中的线程可以复用,减少了创建和销毁线程的开销。当我们需要执行大量短生命周期的任务...

Global site tag (gtag.js) - Google Analytics