`

小练手:用Python实现多线程计算大数组元素和

阅读更多

刚学Python三四天,记得不久前面试被问过一道用多线程实现计算大数组元素之和的问题,就顺路用Python来实现了一下。

刚学Python不久,如果程序上有什么实现错误,请各位大哥不吝指点下哈~~

代码如下:

#coding: UTF-8

"""
经过非正规的测试,多线程并行计算并未像想象中那样会比串行计算快。
相反,在我的PC上运行后,多线程并行计算反而慢了。
不知是计算量不够大,还是怎么。(本身内存有限,无法无限加大,在有限测试范围内,结果如上)
过程是:随着计算线程数的增加,计算时间会下降,但到了一定数量(不同机器有所不同)后,计算时间反而增加。
因为很大一部分增加的时间是耗费在线程的创建上的。
"""


import threading
import random
import time

class calthread(threading.Thread):
    #初始化函数
    def __init__(self,threadname,cond,startN,endN):
        threading.Thread.__init__(self,name = threadname)
        self.cond = cond
        self.startN = startN
        self.endN = endN
        #print "MyName: " + threadname +",start--" +str(startN) +",end--"+str(endN)
    #业务函数
    def run(self):
        global sumN,alist,countFinish
        temp = 0
        for i in range(self.startN,self.endN + 1):
            temp = temp + alist[i]
        #累加计算和,并累加完成计数器
        self.cond.acquire()
        countFinish += 1
        sumN += temp
        #print "MyName: " + self.getName() +",mySum--" +str(temp) +",countFinish--"+str(countFinish)+",currentTotalSum---"+str(sumN)+"\n"
        global threadN
        if(countFinish == threadN):
            print "End time of threadCal -- " + str(time.time())
            print "The total sum : " + str(sumN) + "\n"
        self.cond.release()

#获取线程锁
cond = threading.Condition()
#目标计算数组的长度
alen = 10000000
#执行计算工作的线程长度
threadN = 10000
#随机初始化数组元素
alist = []
#alist = [random.uniform(1,1000) for x in range(0,alen)]
for i in range(1,alen+1):
    alist.append(i)

#执行线程对象列表
threadL  = [] 
t = alen/threadN
print "初始化线程"
for x in range(0,threadN):
    startN = x*t
    endN = 0
    if((x+1)*t >= alen):
        endN = alen - 1
    else:
        if(x == threadN - 1):
            endN = alen - 1
        else:
            endN = (x+1)*t - 1
    #向列表中存入新线程对象
    threadTT = calthread("Thread--"+str(x),cond,startN,endN)
    threadL.append(threadTT)

#总计完成线程计数器
countFinish = 0
sumN = 0
print "Start time of threadCal--"+ str(time.time())
for a in threadL:
    a.start()

time.sleep(10)
normalSum = 0
print "Start time of normalCal--"+ str(time.time())
for n in range(0,alen):
    normalSum += alist[n]
print "End time of normalCal--"+ str(time.time())

print "Normal : " + str(normalSum) + "\n"

结语:

   经过非正规的测试,多线程并行计算并未像想象中那样会比串行计算快。
相反,在我的PC上运行后,多线程并行计算反而慢了。
不知是计算量不够大,还是怎么。(本身内存有限,无法无限加大,在有限测试范围内,结果如上)
过程是:随着计算线程数的增加,计算时间会下降,但到了一定数量(不同机器有所不同)后,计算时间反而增加。
因为很大一部分增加的时间是耗费在线程的创建上的。

分享到:
评论

相关推荐

    源码:使用python实现定时任务的几种方式; python多线程

    python多线程 源码:使用python实现定时任务的几种方式;

    Python应用实战:python多线程-多线程安全问题&lock与rlock.zip

    在Python中,由于全局解释器锁(GIL)的存在,Python的多线程并不能实现真正的并行计算,但仍然可能遇到线程安全问题,如数据竞争、死锁等。 数据竞争是多线程环境中常见的问题,当两个或多个线程同时访问并修改...

    python 多线程实现多个网址的多次快速访问

    本教程将详细讲解如何使用Python的多线程来实现对多个网址的快速访问,并记录访问结果。 首先,我们需要导入Python的`threading`模块,它是Python标准库中的多线程支持库。`threading.Thread`是创建新线程的类,而`...

    python多线程同步之文件读写控制

    在Python编程中,多线程同步对于文件读写控制至关重要,因为如果不加以控制,多个线程同时访问同一文件可能会导致数据不一致或者错误。这里我们将深入探讨如何在Python中使用多线程同步来确保文件读写的安全性。 ...

    混淆矩阵:基于python实现的混淆矩阵计算

    混淆矩阵:基于python实现的混淆矩阵计算

    python小练手

    在“python小练手”这个项目中,我们可以看到作者通过一系列的小练习来不断提升自己的Python编程技能。这些小项目是学习和巩固Python基础知识的好资源,涵盖了从基础语法到实际应用的各种方面。下面,我们将深入探讨...

    基于 python实现的双端计算的疲劳驾驶检测

    【作品名称】:基于 python实现的双端计算的疲劳驾驶检测 【适用人群】:适用于希望学习不同技术领域的小白或进阶学习者。可作为毕设项目、课程设计、大作业、工程实训或初期项目立项。 【项目介绍】: 基于 ...

    python多线程编程.rar

    在Python中,我们通常使用内置的`thread`库、`threading`库以及`Queue`库来实现多线程。 首先,`thread`库是Python的低级线程模块,提供了基本的线程和锁定支持。它包含`Thread`类,可以创建新的线程,并有`start()...

    Python3 多线程笔记

    ### Python3多线程知识点详解...通过以上介绍可以看出,在Python3中,多线程编程涉及到了线程状态管理、线程间的同步控制以及线程间的通信等核心概念和技术细节。这些知识点对于开发高效稳定的多线程应用程序至关重要。

    Python并发技术实现:多线程、多进程(实例爬虫代码)中文PDF合集版最新版本

    Python多进程并发与多线程主要介绍了Python多进程并发与多线程并发编程,结合实例形式总结分析了Python编程中的多进程并发与多线程并发相关概念、使用方法与操作注意事项。另外包含Python多线程、异步+多进程爬虫...

    python多线程定时器

    总结起来,`python多线程定时器`的实现涉及到Python的`threading`和`time`模块,通过`Thread`和`Timer`类来创建和管理线程,使用定时器控制线程的启动时间。主程序`main.py`使用这些工具来安排多个任务按设定的间隔...

    浅析Python多线程与多进程的使用

    本篇文章将深入探讨Python中的多线程和多进程概念,以及它们在实际应用中的优缺点。 首先,我们要理解“线程”和“进程”的基本概念。线程是程序执行的最小单位,一个进程中可以有多个线程,它们共享同一份内存空间...

    单线程与多线程python爬虫地图瓦片源码

    在Python中,可以使用`threading`模块创建和管理线程。 标题中的“单线程与多线程Python爬虫”涉及的核心是如何利用线程技术优化地图瓦片的下载过程。单线程爬虫适用于小型项目,其代码简单易懂,但当需要下载大量...

    python多线程爬虫爬取电影天堂资源

    Python多线程爬虫爬取电影天堂资源是一个实用且具有挑战的项目。以下是对该项目的详细说明: 1. 项目概述: 该项目旨在使用Python编写一个多线程爬虫程序,从电影天堂网站上爬取电影资源信息,包括电影名称、年份、类型...

    Python 多线程读写 OPC DA

    总结起来,这个项目使用Python 3.8.2和win32com库实现了对OPC DA服务器的多线程读写操作,并通过`MqttClient.py`将数据桥接到MQTT服务器,实现了工业控制系统数据的高效传输和远程管理。这样的解决方案在自动化、...

    OpenCV 3计算机视觉 Python语言实现(第二版) PDF+代码

    《OpenCV 3计算机视觉 Python语言实现(第二版)》是一本深入介绍使用Python编程语言与OpenCV库进行计算机视觉应用开发的专业书籍。OpenCV(开源计算机视觉库)是一个广泛应用于图像处理和计算机视觉领域的强大工具,...

    python3 多线程压缩文件

    python3 多线程压缩文件

    课程设计、毕业设计以及练手的优质python小游戏项目-玛丽冒险.rar

    课程设计、毕业设计以及练手的优质python小游戏项目--玛丽冒险 课程设计、毕业设计以及练手的优质python小游戏项目--玛丽冒险 课程设计、毕业设计以及练手的优质python小游戏项目--玛丽冒险 课程设计、毕业设计以及...

    python多线程Python多线程学习Python中的线程使用

    python,python多线程Python多线程学习Python中的线程使用python多线程Python多线程学习Python中的线程使用

    python实现多线程文本搜索器

    python实现多线程文本搜索器

Global site tag (gtag.js) - Google Analytics