首页 > 其他 > 详细

02-scrapy的cmdline命令

时间:2018-06-03 18:38:42      阅读:2381      评论:0      收藏:0      [点我收藏+]

1.启动爬虫的命令为: scrapy crawl spidername(爬虫名)

2.我们还可以通过下述方式来启动爬虫

  步骤一:创建一个.py文件。startspider.py(这里文件的名称可以自己给定)

#!/usr/bin/env python
# -*- coding:utf-8 -*-
from scrapy import cmdline
# 方式一:注意execute的参数类型为一个列表
cmdline.execute(scrapy crawl spidername.split())
# 方式二:注意execute的参数类型为一个列表
cmdline.execute([scrapy, crawl, spidername])

  步骤二:通过python startspider.py来运行此文件即可

 

02-scrapy的cmdline命令

原文:https://www.cnblogs.com/houzichiguodong/p/9129878.html

(1)
(1)
   
举报
评论 一句话评论(0
关于我们 - 联系我们 - 留言反馈 - 联系我们:wmxa8@hotmail.com
© 2014 bubuko.com 版权所有
打开技术之扣,分享程序人生!