首页 > 编程语言 > 详细

Python多线程的事件监控

时间:2020-01-17 00:42:31      阅读:86      评论:0      收藏:0      [点我收藏+]

设想这样一个场景:

你创建了10个子线程,每个子线程分别爬一个网站,一开始所有子线程都是阻塞等待。一旦某个事件发生:例如有人在网页上点了一个按钮,或者某人在命令行输入了一个命令,10个爬虫同时开始工作。

肯定有人会想到用Redis来实现这个开关:所有子线程全部监控Redis中名为start_crawl的字符串,如果这个字符串不存在,或者为0,那么就等待1秒钟,再继续检查。如果这个字符串为1,那么就开始运行。

代码片段可以简写为:

import time

import redis

 

client = redis.Redis()

while client.get(start_crawl) != 1:

print(继续等待)

time.sleep(1)

 

这样做确实可以达到目的,不过每一个子线程都会频繁检查Redis。

实际上,在Python的多线程中,有一个 Event模块,天然就是用来实现这个目的的。

Event是一个能在多线程中共用的对象,一开始它包含一个为 False的信号标志,一旦在任一一个线程里面把这个标记改为 True,那么所有的线程都会看到这个标记变成了 True

我们通过一段代码来说明它的使用方法:

import threading

import time

 

class spider(threading.Thread):

def __init__(self, n, event):

super().__init__()

self.n = n

self.event = event

 

def run(self):

print(f第{self.n}号爬虫已就位!)

self.event.wait()

print(f信号标记变为True!!第{self.n}号爬虫开始运行)

 

eve = threading.Event()

for num in range(10):

crawler = spider(num, eve)

crawler.start()

 

input(按下回车键,启动所有爬虫!)

eve.set()

time.sleep(10)

 

运行效果如下图所示:

技术分享图片

 

 

在这段代码中,线程 spider在运行以后,会运行到 self.event.wait()这一行,然后10个子线程会全部阻塞在这里。而这里的 self.event,就是主线程中 eve=threading.Event()生成的对象传入进去的。

在主线程里面,当执行了 eve.set()后,所有子线程的阻塞会被同时解除,于是子线程就可以继续运行了。

Python多线程的事件监控

原文:https://www.cnblogs.com/tjp40922/p/12203663.html

(0)
(0)
   
举报
评论 一句话评论(0
关于我们 - 联系我们 - 留言反馈 - 联系我们:wmxa8@hotmail.com
© 2014 bubuko.com 版权所有
打开技术之扣,分享程序人生!