浅谈python3.x pool.map()方法的实质
更新时间：2019年01月16日 14:13:21 作者：踏破凌霄城
这篇文章主要介绍了python3.x pool.map方法的实质，小编觉得挺不错的，现在分享给大家，也给大家做个参考。一起跟随小编过来看看吧
我使用多进程的一般方式，都是multiprocessing模块中的Pool.map()方法。下面写一个简单的示例和解析。至于此种方法使用多进程的效率问题，还希望大佬予以指正。
示例：
"""
探索pool.map多进程执行方式的实质
"""
from multiprocessing import Pool
from time import sleep
from datetime import datetime
class forMap:
def __init__(self):
self.name = '没啥用的初始化'
def forPrinit(self, i):
sleep(i)
print(i)
return i ** 2
基本的代码已经写好，下面看看怎么使用多进程去执行。
执行示例1：
if __name__ == '__main__':
s = datetime.now()
tt = forMap()
# 进程池中创建两个进程，调用计算机的两个内核去帮我做事。
p = Pool(2)
l = [2, 4, 6]
rList = p.map(tt.forTest, l)
print(rList)
p.close()
p.join()
e = datetime.now()
print('多进程执行时间：', e - s)
运行结果：
2
4
6
[4, 16, 36]
多进程执行时间： 0:00:08.191251
由于在进程池中创建了两个进程，所以代码会调用计算机的两个内核。而列表l中的三个元素中的前两个（“2”和“4”），会依次传入函数中，由计算机内核A和B去执行。当某一个内核执行完，会继续接收下一个传入参数“6”函数。而且内核A执行的函数，只会sleep两秒，所以，传入参数“6”的函数会由内核A去执行。所以A一共执行了2 + 6 为8秒，又由于是并行，所以总的执行时间是8秒（多的那零点几是初始化、赋值、打印等操作）。
执行示例2：
if __name__ == '__main__':
s = datetime.now()
tt = forMap()
# 进程池中创建三个进程
p = Pool(3)
l = [2, 4, 6]
rList = p.map(tt.forTest, l)
print(rList)
p.close()
p.join()
e = datetime.now()
print('多进程执行时间：', e - s)
执行结果：
2
4
6
[4, 16, 36]
多进程执行时间： 0:00:06.273263
创建了三个进程 ，并行执行，所以执行时间是6秒
执行示例3：
if __name__ == '__main__':
s = datetime.now()
tt = forMap()
# 进程池中创建三个进程
p = Pool(3)
l = [2, 4, 6, 8]
rList = p.map(tt.forTest, l)
print(rList)
p.close()
p.join()
e = datetime.now()
print('多进程执行时间：', e - s)
执行结果：
2
4
6
8
[4, 16, 36, 64]
多进程执行时间： 0:00:10.211451
在列表中添加一个元素，首先内核A、B、C分别执行2， 4， 6。A先结束，所以8也会由A来执行。
执行示例4：
if __name__ == '__main__':
s = datetime.now()
tt = forMap()
# 进程池中创建三个进程
p = Pool(2)
l = [2, 4, 8, 6]
rList = p.map(tt.forTest, l)
print(rList)
p.close()
p.join()
e = datetime.now()
print('多进程执行时间：', e - s)
执行结果：
2
4
8
6
[4, 16, 64, 36]
多进程执行时间： 0:00:10.200389
还是创建两个进程，将列表中第3和第4个元素交换位置，执行结果为10秒多，而且返回值也是交换过位置之后的，说明map方法中，可迭代对象传入函数是从前到后逐个提取元素。
以上就是本文的全部内容，希望对大家的学习有所帮助，也希望大家多多支持脚本之家。
相关文章
这篇文章主要介绍了Django实现列表页商品数据返回教程，具有很好的参考价值，希望对大家有所帮助。一起跟随小编过来看看吧2020-04-04
页面大小确定文档中每个页面的尺寸和布局,有时我们会需要自定义页面大小以满足特定要求,下面我们就来看看如何使用Python实现这一效果吧2024-03-03
在本篇文章中我们给大家分享了Python找出微信上删除你好友的人脚本写法以及相关实例代码，有需要的朋友们参考下。2018-11-11
本文主要介绍了通过 Pyqt5 实现一个界面化的下载器，在通过网络请求实现各种类型的图片的下载。文中的示例代码讲解详细，感兴趣的小伙伴可以了解一下2021-12-12
这篇文章主要介绍了Python正则表达式分组,命名分组,后向引用,前向否定断言、后向否定断言需要的朋友可以参考下2022-12-12
一步步实现有趣的飞机塔防游戏,有兴趣了解一下吗？文中有非常详细的代码示例,对喜欢玩游戏的小伙伴们很有帮助哦,需要的朋友可以参考下2021-05-05
这篇文章主要介绍了Django 通过设置CORS解决跨域问题，文中通过示例代码介绍的非常详细，对大家的学习或者工作具有一定的参考学习价值，需要的朋友们下面随着小编来一起学习学习吧2020-11-11
这篇文章主要介绍了如何在Win10系统使用Python3连接Hive，帮助大家更好的利用python读取数据，进行探索、分析和挖掘工作。感兴趣的朋友可以了解下2020-10-10
当在Python中操作PDF时,有几种常见的方法,每种方法都有其独特的优点和用例,在本文中,我们将深入探讨这些方法,并提供丰富的示例代码,以帮助大家更好地理解如何使用这些技术,需要的朋友可以参考下2024-01-01
在本篇文章里小编给大家整理的是关于Python qrcode 生成一个二维码的实例内容，需要的朋友们可以学习参考下。2020-02-02
最新评论