`
pkcb526546
  • 浏览: 14881 次
  • 性别: Icon_minigender_1
  • 来自: 广州
社区版块
存档分类
最新评论

python 多线程

阅读更多
在谈多线程之前我们先谈谈,进程和线程的关系。


一个简单的hello world程序,其实就是一个进程在运行。


那么这个进程有多少线程组成呢,答案是一。


程序的执行是顺序的,只有等到上一条语句执行完毕才到下一条执行语句。那么如果我需要程序在不断打印hello world的同时又在不断地打印good bye world呢?在没学多线程之前我们会觉得很麻烦,但是当你学了多线程时候你就发现其实很简单的一个操作。开一个线程打印hello world 一个线程打印good bye world 就可以。


接下来看看 ,怎么去实现多线程。


python 实现多线程,一般来说有两种方式:


1.  函数式:调用thread模块中的start_new_thread()函数来产生新线程
   
eg:
  
import time
import thread


def timer(id, interval):

    cnt = 0

    while cnt<10:

       print 'Thread:(%d) cnt: (%d) Time:%s\n'%(id,cnt,time.ctime())

       time.sleep(interval)

       cnt += 1

    thread.exit_thread()
   
def main():

    thread.start_new_thread(timer,(1,1))

    thread.start_new_thread(timer,(2,2))

if __name__ == '__main__':

      main()


接下来还等什么。。。赶紧跑起。。。。可是我们会发现。。。运行时候报错。。。。
错误信息为:
Unhandled exception in thread started by


Error in sys.excepthook:


Original exception was:


这什么意思啊,我们的程序都是照着书本敲的,为什么会报该类错误?


其实很简单,我们启动程序时候是有一个主进程在运行的,新起一个子线程执行别的任务,但是当主线程已经执行完毕,子线程还没有执行完毕呢?这时候就会抛出中断异常。(这也与子线程是否是后台进程无关)


知道原因,自然就有解决办法,我们可以延长主线程存活的时间,主线程没事干怎么办?。。。等待是一个好办法。。。


解决:

def main():
      
      thread.start_new_thread(timer,(1,1))


      thread.start_new_thread(timer,(2,2))

      time.sleep(20) #注意,主线程存活时间一定大于其子线程存活时间,sleep时间具体是多少,可以估量


接下来,程序跑起。。。。。没问题。。。。。。


---------------------------------------------------------------------------------------------------


2. 创建threading.Thread的子类来包装一个线程对象

import time
import threading


class Timer(threading.Thread):


         def __init__(self, id, interval):
        
             threading.Thread.__init__(self)
            
             self.id = id
            
             self.interval = interval
            
             self.thread_stop = False


         def run(self):
        
             cnt = 0
            
             while not self.thread_stop:
            
                 print 'Thread:(%d) cnt:(%d) Time:(%s)\n'%(self.id, cnt, time.ctime())
                
                 time.sleep(self.interval)
                
                 cnt += 1
                
         def stop(self):
        
             self.thread_stop = True

def  main():


     timer1 = Timer(1,1)
    
     timer2 = Timer(2,2)
    
     timer1.start()
    
     timer2.start()
    
     time.sleep(20)
    
     timer1.stop()
    
     timer2.stop()
    
if __name__ == '__main__':

     main()


run方法是必须要实现的一个方法。。。。stop方法是为了控制子进程结束进程而添加的。。。


废话少说。。。程序跑起。。。。。。。。
-----------------------------------------------------------------------------------------------


就个人来说,我比较喜欢,第二种方法,自己定制线程类,还可以控制子线程的存活时间


threading.Thread 主要方法有:
1,在自己的线程类的__init__里调用threading.Thread.__init__(self, name = threadname)

Threadname为线程的名字

2, run(),通常需要重写,编写代码实现做需要的功能。

3,getName(),获得线程对象名称

4,setName(),设置线程对象名称

5,start(),启动线程

6,jion([timeout]),等待另一线程结束后再运行。

7,setDaemon(bool),设置子线程是否随主线程一起结束,必须在start()之前调用。默认为False。

8,isDaemon(),判断线程是否随主线程一起结束。

9,isAlive(),检查线程是否在运行中。

------------------------------------------------------------------------------------------------

3. 进程加锁机制:

大家都听过生产者和消费者问题吧,没听过的自己百度去,我在这里就不赘述,直入正题吧。


import threading

import random

class  Consumer(threading.Thread): #消费者

         def __init__(self):

               threading.Thread.__init__(self)

         def run(self):

               global container

               con.acquire()

               if len(container) <= 1:            

                  con.wait()

                  con.notify()

               else:

                  while len(container)> 1:

                     bread = container.pop()

                     print 'eat a bread %d'%(bread.getId())

               con.release()

         def __del__(self):

               print 'consumer distructor'

class Master(threading.Thread): #生产者

        def __init__(self):

              threading.Thread.__init__(self)

        def run(self):

            global container

            con.acquire()

            if len(container) >= 20:     

               con.wait()

               con.notify()

            else:

               while len(container) < 20:

                  bread = Bread(random.randint(10, 100))

                  print 'produce a bread %d'%(bread.getId())

                  container.append(bread)

            con.release()

        def __del__(self):

              print 'Master Constructor'

class Bread(): #产品

         def __init__(self,id):

               self.id = id

         def getId(self):

               return self.id

         def __del__(self):

               print 'Bread constructor'


container = []

con = threading.Condition()

mas = Master()

cons = Consumer()

mas.start()

cons.start()


                  
分享到:
评论

相关推荐

    基于Linux的python多线程爬虫程序设计.pdf

    总体来看,基于Linux平台的Python多线程爬虫程序设计,不仅可以实现高效的数据抓取,还能通过多种存储方式灵活地管理数据,这对于微博数据挖掘工作来说,是一项十分有价值的工具。而且,随着社交网络数据量的不断...

    python多线程编程实现网络串口透传

    Python多线程编程在实现网络串口透传中扮演着重要的角色,特别是在处理TCP客户端网口数据时。网络串口透传技术允许通过网络连接模拟串行通信,使得远程设备可以像连接本地串口一样进行通信。这在物联网(IoT)、远程...

    10个线程的Python多线程爬虫(采集新浪数据).rar

    一个Python多线程爬虫,在工作时,开10个线程来抓取新浪网页的数据,抓取并保存页面, 并且根据deep返回页面链接,根据key确定是否保存该页面,其中:  deep == 0时,是抓取的最后一层深度,即只抓取并保存页面,不...

    python多线程爬虫爬取电影天堂资源

    Python多线程爬虫爬取电影天堂资源是一个实用且具有挑战的项目。以下是对该项目的详细说明: 1. 项目概述: 该项目旨在使用Python编写一个多线程爬虫程序,从电影天堂网站上爬取电影资源信息,包括电影名称、年份、类型...

    使用python多线程异步提高模型部署到rk3588NPU使用率-python源码+项目使用说明.zip

    使用python多线程异步提高模型部署到rk3588NPU使用率_python源码+项目使用说明.zip 【项目资源说明】 使用多线程异步操作rknn模型, 提高rk3588/rk3588s的NPU使用率, 进而提高推理帧数(rk3568之类修改后应该也能使用,...

    Python 多线程编程实例

    Python 多线程编程实例,一个综合示例

    python多线程定时器

    总结起来,`python多线程定时器`的实现涉及到Python的`threading`和`time`模块,通过`Thread`和`Timer`类来创建和管理线程,使用定时器控制线程的启动时间。主程序`main.py`使用这些工具来安排多个任务按设定的间隔...

    python多线程同步之文件读写控制

    在Python编程中,多线程同步对于文件读写控制至关重要,因为如果不加以控制,多个线程同时访问同一文件可能会导致数据不一致或者错误。这里我们将深入探讨如何在Python中使用多线程同步来确保文件读写的安全性。 ...

    Python多线程超大日志文件解析转储写入mysql/postgresql

    Python多线程超大日志文件解析转储,实现几十G超大文件并发处理。 实现功能如下: 1.多线程分块解析某超大日志文件,实现超大文件多线程分块处理 2.多线程写入数据到数据库postgresql/mysql 3.线程之间通过队列queue...

    python多线程批量访问url脚本

    本项目中的"python多线程批量访问url脚本"正是基于这个理念设计的。 该脚本采用了第三方库`grequests`,它是`requests`库的一个并行版本,能够支持异步的HTTP请求。`requests`库是Python中广泛使用的HTTP客户端,而...

    Python多线程编程(6寸)[归纳].pdf

    Python多线程编程是利用Python实现程序并行性的一种方式,尤其适合于处理异步、并发事务和资源密集型任务。在多线程环境中,多个线程可以同时执行,提高程序效率,尤其对于那些需要从多个输入源处理数据或者进行大量...

    python多线程,断点续传下载程序

    python多线程,断点续传下载程序,功能比较简单,可以进行二次开发。实现更好用的 功能。

    Python多线程编程

    Python多线程编程文档说明 多进程编程 一、 multiprocessing 模块 1. multiprocessing 模块提供了多进程编程的能力 它的API非常类似于 threading 模块,但是也提供了一些threading 模块不具有的能力 相比于线程,它...

    python多线程压测demo

    python多线程压测demo

    python多线程端口扫描工具

    python多线程端口扫描工具,多线程自定义扫描主机开放端口。 Usage: portScan.py [options] Options: -h, --help show this help message and exit -i IP, --ip=IP scan only ip default port in number 1 ...

    python 多线程脚本

    python 多线程封装脚本,可以直接拿来当lib导入使用。

    python 多线程实现多个网址的多次快速访问

    在Python编程中,多线程是一种并发执行任务的机制,尤其在处理I/O密集型任务如网络请求时,能够显著提高程序效率。本教程将详细讲解如何使用Python的多线程来实现对多个网址的快速访问,并记录访问结果。 首先,...

    Python多线程下载管理

    Python多线程下载管理是一种利用Python编程语言实现的高效下载技术,它通过开启多个线程同时处理下载任务,显著提高了文件下载的速度。在现代互联网环境中,处理大量数据或大文件时,多线程技术显得尤为重要,因为它...

    基于Linux的python多线程爬虫程序设计.zip

    本主题“基于Linux的Python多线程爬虫程序设计”将深入探讨如何在Linux环境下利用Python实现多线程爬虫,以优化网络爬虫的性能。 首先,我们需要了解Python中的多线程。Python的`threading`模块提供了创建和管理...

    python多线程 实例 注释详解

    python 多线程 实例 注释详解

Global site tag (gtag.js) - Google Analytics