- 浏览: 15061 次
- 性别:
- 来自: 广州
最新评论
在谈多线程之前我们先谈谈,进程和线程的关系。
一个简单的hello world程序,其实就是一个进程在运行。
那么这个进程有多少线程组成呢,答案是一。
程序的执行是顺序的,只有等到上一条语句执行完毕才到下一条执行语句。那么如果我需要程序在不断打印hello world的同时又在不断地打印good bye world呢?在没学多线程之前我们会觉得很麻烦,但是当你学了多线程时候你就发现其实很简单的一个操作。开一个线程打印hello world 一个线程打印good bye world 就可以。
接下来看看 ,怎么去实现多线程。
python 实现多线程,一般来说有两种方式:
1. 函数式:调用thread模块中的start_new_thread()函数来产生新线程
eg:
import time
import thread
def timer(id, interval):
cnt = 0
while cnt<10:
print 'Thread:(%d) cnt: (%d) Time:%s\n'%(id,cnt,time.ctime())
time.sleep(interval)
cnt += 1
thread.exit_thread()
def main():
thread.start_new_thread(timer,(1,1))
thread.start_new_thread(timer,(2,2))
if __name__ == '__main__':
main()
接下来还等什么。。。赶紧跑起。。。。可是我们会发现。。。运行时候报错。。。。
错误信息为:
Unhandled exception in thread started by
Error in sys.excepthook:
Original exception was:
这什么意思啊,我们的程序都是照着书本敲的,为什么会报该类错误?
其实很简单,我们启动程序时候是有一个主进程在运行的,新起一个子线程执行别的任务,但是当主线程已经执行完毕,子线程还没有执行完毕呢?这时候就会抛出中断异常。(这也与子线程是否是后台进程无关)
知道原因,自然就有解决办法,我们可以延长主线程存活的时间,主线程没事干怎么办?。。。等待是一个好办法。。。
解决:
def main():
thread.start_new_thread(timer,(1,1))
thread.start_new_thread(timer,(2,2))
time.sleep(20) #注意,主线程存活时间一定大于其子线程存活时间,sleep时间具体是多少,可以估量
接下来,程序跑起。。。。。没问题。。。。。。
---------------------------------------------------------------------------------------------------
2. 创建threading.Thread的子类来包装一个线程对象
import time
import threading
class Timer(threading.Thread):
def __init__(self, id, interval):
threading.Thread.__init__(self)
self.id = id
self.interval = interval
self.thread_stop = False
def run(self):
cnt = 0
while not self.thread_stop:
print 'Thread:(%d) cnt:(%d) Time:(%s)\n'%(self.id, cnt, time.ctime())
time.sleep(self.interval)
cnt += 1
def stop(self):
self.thread_stop = True
def main():
timer1 = Timer(1,1)
timer2 = Timer(2,2)
timer1.start()
timer2.start()
time.sleep(20)
timer1.stop()
timer2.stop()
if __name__ == '__main__':
main()
run方法是必须要实现的一个方法。。。。stop方法是为了控制子进程结束进程而添加的。。。
废话少说。。。程序跑起。。。。。。。。
-----------------------------------------------------------------------------------------------
就个人来说,我比较喜欢,第二种方法,自己定制线程类,还可以控制子线程的存活时间
threading.Thread 主要方法有:
1,在自己的线程类的__init__里调用threading.Thread.__init__(self, name = threadname)
Threadname为线程的名字
2, run(),通常需要重写,编写代码实现做需要的功能。
3,getName(),获得线程对象名称
4,setName(),设置线程对象名称
5,start(),启动线程
6,jion([timeout]),等待另一线程结束后再运行。
7,setDaemon(bool),设置子线程是否随主线程一起结束,必须在start()之前调用。默认为False。
8,isDaemon(),判断线程是否随主线程一起结束。
9,isAlive(),检查线程是否在运行中。
------------------------------------------------------------------------------------------------
3. 进程加锁机制:
大家都听过生产者和消费者问题吧,没听过的自己百度去,我在这里就不赘述,直入正题吧。
import threading
import random
class Consumer(threading.Thread): #消费者
def __init__(self):
threading.Thread.__init__(self)
def run(self):
global container
con.acquire()
if len(container) <= 1:
con.wait()
con.notify()
else:
while len(container)> 1:
bread = container.pop()
print 'eat a bread %d'%(bread.getId())
con.release()
def __del__(self):
print 'consumer distructor'
class Master(threading.Thread): #生产者
def __init__(self):
threading.Thread.__init__(self)
def run(self):
global container
con.acquire()
if len(container) >= 20:
con.wait()
con.notify()
else:
while len(container) < 20:
bread = Bread(random.randint(10, 100))
print 'produce a bread %d'%(bread.getId())
container.append(bread)
con.release()
def __del__(self):
print 'Master Constructor'
class Bread(): #产品
def __init__(self,id):
self.id = id
def getId(self):
return self.id
def __del__(self):
print 'Bread constructor'
container = []
con = threading.Condition()
mas = Master()
cons = Consumer()
mas.start()
cons.start()
一个简单的hello world程序,其实就是一个进程在运行。
那么这个进程有多少线程组成呢,答案是一。
程序的执行是顺序的,只有等到上一条语句执行完毕才到下一条执行语句。那么如果我需要程序在不断打印hello world的同时又在不断地打印good bye world呢?在没学多线程之前我们会觉得很麻烦,但是当你学了多线程时候你就发现其实很简单的一个操作。开一个线程打印hello world 一个线程打印good bye world 就可以。
接下来看看 ,怎么去实现多线程。
python 实现多线程,一般来说有两种方式:
1. 函数式:调用thread模块中的start_new_thread()函数来产生新线程
eg:
import time
import thread
def timer(id, interval):
cnt = 0
while cnt<10:
print 'Thread:(%d) cnt: (%d) Time:%s\n'%(id,cnt,time.ctime())
time.sleep(interval)
cnt += 1
thread.exit_thread()
def main():
thread.start_new_thread(timer,(1,1))
thread.start_new_thread(timer,(2,2))
if __name__ == '__main__':
main()
接下来还等什么。。。赶紧跑起。。。。可是我们会发现。。。运行时候报错。。。。
错误信息为:
Unhandled exception in thread started by
Error in sys.excepthook:
Original exception was:
这什么意思啊,我们的程序都是照着书本敲的,为什么会报该类错误?
其实很简单,我们启动程序时候是有一个主进程在运行的,新起一个子线程执行别的任务,但是当主线程已经执行完毕,子线程还没有执行完毕呢?这时候就会抛出中断异常。(这也与子线程是否是后台进程无关)
知道原因,自然就有解决办法,我们可以延长主线程存活的时间,主线程没事干怎么办?。。。等待是一个好办法。。。
解决:
def main():
thread.start_new_thread(timer,(1,1))
thread.start_new_thread(timer,(2,2))
time.sleep(20) #注意,主线程存活时间一定大于其子线程存活时间,sleep时间具体是多少,可以估量
接下来,程序跑起。。。。。没问题。。。。。。
---------------------------------------------------------------------------------------------------
2. 创建threading.Thread的子类来包装一个线程对象
import time
import threading
class Timer(threading.Thread):
def __init__(self, id, interval):
threading.Thread.__init__(self)
self.id = id
self.interval = interval
self.thread_stop = False
def run(self):
cnt = 0
while not self.thread_stop:
print 'Thread:(%d) cnt:(%d) Time:(%s)\n'%(self.id, cnt, time.ctime())
time.sleep(self.interval)
cnt += 1
def stop(self):
self.thread_stop = True
def main():
timer1 = Timer(1,1)
timer2 = Timer(2,2)
timer1.start()
timer2.start()
time.sleep(20)
timer1.stop()
timer2.stop()
if __name__ == '__main__':
main()
run方法是必须要实现的一个方法。。。。stop方法是为了控制子进程结束进程而添加的。。。
废话少说。。。程序跑起。。。。。。。。
-----------------------------------------------------------------------------------------------
就个人来说,我比较喜欢,第二种方法,自己定制线程类,还可以控制子线程的存活时间
threading.Thread 主要方法有:
1,在自己的线程类的__init__里调用threading.Thread.__init__(self, name = threadname)
Threadname为线程的名字
2, run(),通常需要重写,编写代码实现做需要的功能。
3,getName(),获得线程对象名称
4,setName(),设置线程对象名称
5,start(),启动线程
6,jion([timeout]),等待另一线程结束后再运行。
7,setDaemon(bool),设置子线程是否随主线程一起结束,必须在start()之前调用。默认为False。
8,isDaemon(),判断线程是否随主线程一起结束。
9,isAlive(),检查线程是否在运行中。
------------------------------------------------------------------------------------------------
3. 进程加锁机制:
大家都听过生产者和消费者问题吧,没听过的自己百度去,我在这里就不赘述,直入正题吧。
import threading
import random
class Consumer(threading.Thread): #消费者
def __init__(self):
threading.Thread.__init__(self)
def run(self):
global container
con.acquire()
if len(container) <= 1:
con.wait()
con.notify()
else:
while len(container)> 1:
bread = container.pop()
print 'eat a bread %d'%(bread.getId())
con.release()
def __del__(self):
print 'consumer distructor'
class Master(threading.Thread): #生产者
def __init__(self):
threading.Thread.__init__(self)
def run(self):
global container
con.acquire()
if len(container) >= 20:
con.wait()
con.notify()
else:
while len(container) < 20:
bread = Bread(random.randint(10, 100))
print 'produce a bread %d'%(bread.getId())
container.append(bread)
con.release()
def __del__(self):
print 'Master Constructor'
class Bread(): #产品
def __init__(self,id):
self.id = id
def getId(self):
return self.id
def __del__(self):
print 'Bread constructor'
container = []
con = threading.Condition()
mas = Master()
cons = Consumer()
mas.start()
cons.start()
发表评论
-
python Mysql依赖安装解决方案
2015-03-03 14:27 578非root权限下安装python mysql依赖确实有点蛋疼, ... -
python 网络编程
2014-01-12 22:51 697python 网络编程,首先我们认识一下socket,什么是s ... -
求一个范围内的素数
2013-12-18 01:23 1581学算法时候,求素数总是一道逃不掉的练习题。 好久没写算法相关 ... -
python redis 模块
2013-12-10 00:33 3474今天用python写robot framework扩展 ... -
python-调用C动态库
2013-11-19 11:51 609哥虽然作为屌丝程序员,但是也算是一个优雅的程序员,平时常用都是 ... -
python-异常处理
2013-11-14 00:04 607有一种说法: 程序错误可分为,编译时错误和运行时错误。写过c程 ... -
python-mysql数据库操作
2013-11-09 11:01 9821. 首先要安装MySQLdb依赖库 2. 示范mysql数据 ... -
python-类操作
2013-11-09 11:02 500格式: class 类名: 成员变量 ... -
python-字符串操作
2013-11-09 11:02 525字符串分割: s.split([s ... -
python-文件操作
2013-11-09 11:01 447文件操作: 1. 创建空文件 os.mknod('test.t ... -
python-字典
2013-11-08 21:40 419字典是python内建的数据类型 dic = { &quo ... -
python-链表
2013-11-08 21:37 615python 链表操作 list=[1, 2, 3, 45 ... -
python-函数
2013-11-08 21:35 343定义: def 函数名(参数列表): 函数 ... -
python入门--else-for-while语句篇
2013-11-08 21:32 606python if 语句 格式: (必须注意 if 、elif ...
相关推荐
总体来看,基于Linux平台的Python多线程爬虫程序设计,不仅可以实现高效的数据抓取,还能通过多种存储方式灵活地管理数据,这对于微博数据挖掘工作来说,是一项十分有价值的工具。而且,随着社交网络数据量的不断...
Python多线程编程在实现网络串口透传中扮演着重要的角色,特别是在处理TCP客户端网口数据时。网络串口透传技术允许通过网络连接模拟串行通信,使得远程设备可以像连接本地串口一样进行通信。这在物联网(IoT)、远程...
Python多线程爬虫爬取电影天堂资源是一个实用且具有挑战的项目。以下是对该项目的详细说明: 1. 项目概述: 该项目旨在使用Python编写一个多线程爬虫程序,从电影天堂网站上爬取电影资源信息,包括电影名称、年份、类型...
一个Python多线程爬虫,在工作时,开10个线程来抓取新浪网页的数据,抓取并保存页面, 并且根据deep返回页面链接,根据key确定是否保存该页面,其中: deep == 0时,是抓取的最后一层深度,即只抓取并保存页面,不...
使用python多线程异步提高模型部署到rk3588NPU使用率_python源码+项目使用说明.zip 【项目资源说明】 使用多线程异步操作rknn模型, 提高rk3588/rk3588s的NPU使用率, 进而提高推理帧数(rk3568之类修改后应该也能使用,...
本离线安装包“python多线程池离线安装包.zip”包含了实现Python多线程所需的关键组件。主要包含以下三个子文件: 1. `pip-19.2.3.tar.gz`:这是Python的包管理器pip的一个版本,用于安装和管理Python库。在离线...
Python 多线程编程实例,一个综合示例
总结起来,`python多线程定时器`的实现涉及到Python的`threading`和`time`模块,通过`Thread`和`Timer`类来创建和管理线程,使用定时器控制线程的启动时间。主程序`main.py`使用这些工具来安排多个任务按设定的间隔...
在Python编程中,多线程同步对于文件读写控制至关重要,因为如果不加以控制,多个线程同时访问同一文件可能会导致数据不一致或者错误。这里我们将深入探讨如何在Python中使用多线程同步来确保文件读写的安全性。 ...
Python多线程超大日志文件解析转储,实现几十G超大文件并发处理。 实现功能如下: 1.多线程分块解析某超大日志文件,实现超大文件多线程分块处理 2.多线程写入数据到数据库postgresql/mysql 3.线程之间通过队列queue...
本项目中的"python多线程批量访问url脚本"正是基于这个理念设计的。 该脚本采用了第三方库`grequests`,它是`requests`库的一个并行版本,能够支持异步的HTTP请求。`requests`库是Python中广泛使用的HTTP客户端,而...
Python多线程编程是利用Python实现程序并行性的一种方式,尤其适合于处理异步、并发事务和资源密集型任务。在多线程环境中,多个线程可以同时执行,提高程序效率,尤其对于那些需要从多个输入源处理数据或者进行大量...
python多线程,断点续传下载程序,功能比较简单,可以进行二次开发。实现更好用的 功能。
Python多线程编程文档说明 多进程编程 一、 multiprocessing 模块 1. multiprocessing 模块提供了多进程编程的能力 它的API非常类似于 threading 模块,但是也提供了一些threading 模块不具有的能力 相比于线程,它...
python多线程压测demo
python多线程端口扫描工具,多线程自定义扫描主机开放端口。 Usage: portScan.py [options] Options: -h, --help show this help message and exit -i IP, --ip=IP scan only ip default port in number 1 ...
python 多线程封装脚本,可以直接拿来当lib导入使用。
在Python编程中,多线程是一种并发执行任务的机制,尤其在处理I/O密集型任务如网络请求时,能够显著提高程序效率。本教程将详细讲解如何使用Python的多线程来实现对多个网址的快速访问,并记录访问结果。 首先,...
Python多线程下载管理是一种利用Python编程语言实现的高效下载技术,它通过开启多个线程同时处理下载任务,显著提高了文件下载的速度。在现代互联网环境中,处理大量数据或大文件时,多线程技术显得尤为重要,因为它...
本主题“基于Linux的Python多线程爬虫程序设计”将深入探讨如何在Linux环境下利用Python实现多线程爬虫,以优化网络爬虫的性能。 首先,我们需要了解Python中的多线程。Python的`threading`模块提供了创建和管理...