首页 > 其他 > 详细

Scrapy: 初识Scrapy

时间:2018-03-21 12:57:30      阅读:226      评论:0      收藏:0      [点我收藏+]

1.初识Scrapy

Scrapy是为了爬取网站数据,提取结构性数据而编写的应用框架。可以应用在包括数据挖掘,信息处理或者存储历史数据等一系列的程序中。

2.选择一个网站

当需要从某个网站获取信息时,但该网站未提供API或者能通过程序获取信息的机制时,Scapy可以助你一臂之力。

3.定义想抓去的数据

在Scrapy中,通过Scrapy Items来完成的

import scrapy

class TorrentItem

 

Scrapy: 初识Scrapy

原文:https://www.cnblogs.com/baxianhua/p/8616078.html

(0)
(0)
   
举报
评论 一句话评论(0
关于我们 - 联系我们 - 留言反馈 - 联系我们:wmxa8@hotmail.com
© 2014 bubuko.com 版权所有
打开技术之扣,分享程序人生!