2020
09-28
09-28
scrapy爬虫:scrapy.FormRequest中formdata参数详解
1.背景在网页爬取的时候,有时候会使用scrapy.FormRequest向目标网站提交数据(表单提交)。参照scrapy官方文档的标准写法是:#header信息unicornHeader={'Host':'www.example.com','Referer':'http://www.example.com/',}#表单需要提交的数据myFormData={'name':'JohnDoe','age':'27'}#自定义信息,向下层响应(response)传递下去customerData={'key1':'value1','key2':'value2'}yieldscrapy.FormRequest(...
继续阅读 >