scrapy抓取拉勾网出现302跳转
设置时间间隔、cookie更新（cookie里有两个随时间变化的键值），useragent、代理IP等方法都还会遇到302问题，有点崩溃了，不知道拉钩的反爬策略是什么。
无语抓到的页面就没超过20个，老师你怎么看？
1078
收起
正在回答 回答被采纳积分+3
1回答
bobby
2019-04-22 11:39:32
相似问题
完全没办法匹配拉勾网URL了
1135
0
7
爬取拉勾网，重定向302
1642
0
6
跳转链接怎么抓取
1388
0
1
在终端中 scrapy shell 如何避开302重定向呢？
1017
0
4
拉勾网模拟登录后还是302怎么办
889
0
1
登录后可查看更多问答，登录/注册
Scrapy打造搜索引擎 畅销4年的Python分布式爬虫课
- 参与学习 5807 人
- 解答问题 6290 个
带你彻底掌握Scrapy，用Django+Elasticsearch搭建搜索引擎
了解课程
