我们在使用crawler spider中时候,starturl返回的response一般都是用来提取url链接的,但是我们有时候需要还处理返回的response数据
回答
MrSun回答
解决方法:
crawlspider 为我提供了一个方法,所以我们重写parse_start_url
(response)方法即可,但是需要注意处理完成后的返回值
(0)
相似问题
在线客服
扫描二维码
下载博学谷APP
扫描二维码
关注博学谷微信公众号
意见反馈
我们在使用crawler spider中时候,starturl返回的response一般都是用来提取url链接的,但是我们有时候需要还处理返回的response数据
回答
MrSun回答
解决方法:
crawlspider 为我提供了一个方法,所以我们重写parse_start_url
(response)方法即可,但是需要注意处理完成后的返回值
(0)
相似问题