采纳答案成功!
向帮助你的同学说点啥吧!感谢那些助人为乐的人
你的代码截图我看看 你如果重载了start_requests方法 那么yield之后的默认回调方法一定是parse方法
问题我自己找到了,是因为请求失败的缘故直接跳出去了,在selenium后面return的时候要加上headers如果不加它会报400的错误,一报错就进不去方法了
return [scrapy.Request(url=self.start_urls[0], dont_filter=True, cookies=cookie_dict)] 这一句要加headers=self.headers
好的,
登录后可查看更多问答,登录/注册
带你彻底掌握Scrapy,用Django+Elasticsearch搭建搜索引擎
5.3k 30
2.9k 18
1.6k 18
1.8k 15
3.4k 15
购课补贴联系客服咨询优惠详情
慕课网APP您的移动学习伙伴
扫描二维码关注慕课网微信公众号