首页 > 编程语言 > 详细

【python小随笔】进程池 multiprocessing.Pool的简单实现与踩过的坑

时间:2019-11-01 15:59:48      阅读:77      评论:0      收藏:0      [点我收藏+]
#导入进程模块
import multiprocessing

#创建进程池             坑:一定要在循环外面创建进程池,不然会一直创建
pool = multiprocessing.Pool(30)
for Size in Size_list:
   
    index,Size_Asin = Size.xpath(./@value)[0].split(",")              
    Size_Asin_url = "https://www.amazon.cn/dp/%sth=1&psc=1" % Size_Asin  # 拼接每个Size_Asin网页URL
                

    #任务进程池执行     坑:这一步要在循环里面执行
     pool.apply_async(self.Size_Asin_Get,args=(Size_Asin_url,parentAsin,))


pool.close()         #坑: 要在循环外面关闭
pool.join()

 少于150字的随笔不允许发布到网站首页少于150字的随笔不允许发布到网站首页少于150字的随笔不允许发布到网站首页少于150字的随笔不允许发布到网站首页少于150字的随笔不允许发布到网站首页少于150字的随笔不允许发布到网站首页少于150字的随笔不允许发布到网站首页少于150字的随笔不允许发布到网站首页少于150字的随笔不允许发布到网站首页少于150字的随笔不允许发布到网站首页少于150字的随笔不允许发布到网站首页少于150字的随笔不允许发布到网站首页少于150字的随笔不允许发布到网站首页少于150字的随笔不允许发布到网站首页少于150字的随笔不允许发布到网站首页少于150字的随笔不允许发布到网站首页少于150字的随笔不允许发布到网站首页少于150字的随笔不允许发布到网站首页少于150字的随笔不允许发布到网站首页

【python小随笔】进程池 multiprocessing.Pool的简单实现与踩过的坑

原文:https://www.cnblogs.com/wanghong1994/p/11777442.html

(0)
(0)
   
举报
评论 一句话评论(0
关于我们 - 联系我们 - 留言反馈 - 联系我们:wmxa8@hotmail.com
© 2014 bubuko.com 版权所有
打开技术之扣,分享程序人生!