scrapy请求发送解析

1 def start_requests(self):
2         for u in self.start_urls:
3            yield scrapy.Request(url=u,callback=self.parse)

1 def start_requests(self):
2         #请求的url
3         post_url = ‘http://fanyi.baidu.com/sug‘
4         # post请求参数
5         formdata = {
6             ‘kw‘: ‘wolf‘,
7         }
8         # 发送post请求
9         yield scrapy.FormRequest(url=post_url, formdata=formdata, callback=self.parse)

1 #手动发起get请求，url指定，callback指定回调解析函数（可自定义），meta可以传递参数，封装在request中以便回调解析函数使用（request.item）
2 yield scrapy.Request(url=url,callback=self.parse1,meta={})
3 #手动发起post请求：formdata为请求参数，callback指定回调解析函数（可自定义），meta可以传递参数，封装在request中
4 yield scrapy.FormRequest(url=url,formdata=formdata, callback=self.parse2，meta={})