首页 > 其他 > 详细

怎样在谷歌浏览器中爬图片详解

时间:2018-07-07 11:04:44      阅读:454      评论:0      收藏:0      [点我收藏+]

 

#!/usr/bin/env python
# -*- coding:utf-8 -*-
from icrawler.builtin import GoogleImageCrawler
#keyword = ‘动漫美女‘
import sys
import os
from importlib import reload
reload(sys)
s = os.sep
root = "E:\\image"
for test in os.listdir(root):
    if os.path.isfile(os.path.join(root,test)) and test.__eq__("test.txt"):
        filename = os.path.join(root,test)
        with open(os.path.join(root,test)) as f:
            while 1:
                keyword = f.readline().strip()
                if not keyword:
                    break
                print("---filename---",test)
                google_crawler = GoogleImageCrawler(
                    feeder_threads=1,
                    parser_threads=2,
                    downloader_threads=16,
                    storage={root_dir: keyword})

                google_crawler.crawl(keyword=keyword, max_num=10, file_idx_offset=0)

 

怎样在谷歌浏览器中爬图片详解

原文:https://www.cnblogs.com/tzwx/p/9276625.html

(0)
(0)
   
举报
评论 一句话评论(0
关于我们 - 联系我们 - 留言反馈 - 联系我们:wmxa8@hotmail.com
© 2014 bubuko.com 版权所有
打开技术之扣,分享程序人生!