国产成人精品久久免费动漫-国产成人精品天堂-国产成人精品区在线观看-国产成人精品日本-a级毛片无码免费真人-a级毛片毛片免费观看久潮喷

您的位置:首頁技術(shù)文章
文章詳情頁

解決Python 進(jìn)程池Pool中一些坑

瀏覽:94日期:2022-06-26 11:34:47
1 from multiprocessing import Pool,Queue。

其中Queue在Pool中不起作用,具體原因未明。

解決方案:

如果要用Pool創(chuàng)建進(jìn)程,就需要使用multiprocessing.Manager()中的Queue,

與multiprocessing中的Queue不同

q=Manager().Queue()#Manager中的Queue才能配合Poolpo = Pool() # 無窮多進(jìn)程2 使用進(jìn)程池,在進(jìn)程中調(diào)用io讀寫操作。例如:

p=Pool()q=Manager().Queue()with open(’/home/cctv/data/stage_file/stage_{}.txt’.format(int(time.time())), ’w’) as w1: p.apply_async(write_json, args=(video_path, 0,0.6,w1,q,i[0],))

這樣也不會(huì)完成進(jìn)程,只能把w放到具體的函數(shù)里面,不能通過參數(shù)調(diào)用

補(bǔ)充:python3進(jìn)程池pool使用及注意事項(xiàng)

1.在python中使用進(jìn)程池主要就是為了并行處理任務(wù),縮短運(yùn)行時(shí)間

2.經(jīng)常使用方法: 同步有 apply(), map();異步的有 apply_async(), map_async()

3. 先看幾個(gè)小例子

import time from multiprocessing import Pool test = [1,2,3,4,5,6,7,8]def run(fn): time.sleep(1) return fn*fns = time.time()for i in test: run(i)e = time.time()print(’直接循環(huán) 執(zhí)行時(shí)間:’,e - s)pool = Pool(8)s = time.time()for i in test: pool.apply(run, (i,))e = time.time()print(’apply 執(zhí)行時(shí)間:’,e - s)pool1 = Pool(8)s = time.time()res = []for i in test: r = [pool1.apply_async(run, (i,))] res.append(r)pool1.close()pool1.join()e = time.time()print([i.get() for i in r])print(’apply_async 執(zhí)行時(shí)間:’,e - s) pool2 = Pool(8)r = pool2.map(run,test)pool2.close()pool2.join() e1 = time.time()print(r)print(’map執(zhí)行時(shí)間:’,e1 - e)pool3 = Pool(8)pool3.map_async(run,test)pool3.close()pool3.join() e1 = time.time()print(’map_async執(zhí)行時(shí)間:’,e1 - e)

執(zhí)行結(jié)果

直接循環(huán) 執(zhí)行時(shí)間: 8.004754781723022apply 執(zhí)行時(shí)間: 8.016774654388428[64]apply_async 執(zhí)行時(shí)間: 1.1128439903259277[1, 4, 9, 16, 25, 36, 49, 64]map執(zhí)行時(shí)間: 1.181443452835083map_async執(zhí)行時(shí)間: 2.3679864406585693

除此之外,在寫代碼中,還涉及到變量的一些問題。就需要加鎖~

以上為個(gè)人經(jīng)驗(yàn),希望能給大家一個(gè)參考,也希望大家多多支持好吧啦網(wǎng)。如有錯(cuò)誤或未考慮完全的地方,望不吝賜教。

標(biāo)簽: Python 編程
相關(guān)文章:
主站蜘蛛池模板: 三级黄色片网站 | 久草影视在线观看 | 亚洲日韩精品欧美一区二区一 | 欧美一级aⅴ毛片 | 最新国产美女一区二区三区 | 久久久这里只有精品免费 | 国产精品久久久久久久久 | 亚洲一区二区三区久久 | 国产成人综合精品一区 | 欧美在线观看一区 | 丁香狠狠色婷婷久久综合 | 精品国产免费人成在线观看 | 成人a网站| 亚洲不卡视频在线观看 | 日本一视频一区视频二区 | 理论片日韩 | 色拍拍在精品视频69影院在线 | 国产精品18久久久久久vr | 日韩精品久久一区二区三区 | 欧美成年黄网站色视频 | 国产自产v一区二区三区c | 中国一级毛片aaa片 中国一级毛片录像 | 久色成人| 最新日韩欧美不卡一二三区 | 久草视频大全 | 一级做a爰片久久毛片人呢 一级做a爰片久久毛片唾 | 黄色成人在线 | 日本大黄网站 | 亚洲欧美日韩精品久久亚洲区色播 | 草草视频手机在线观看视频 | 91久久精品一区二区 | 久久黄色片 | 久草免费精品视频 | 日本三级精品 | 久久久久久亚洲精品中文字幕 | 久草青青 | 91成人影院 | 一级毛片免费在线观看网站 | 午夜宅宅宅影院在线观看 | 精品在线视频免费观看 | 国产午夜永久福利视频在线观看 |