请稍等 ...

爬取了一小会知乎出现302重定向

爬取了一会知乎,出现302 并且让我识别验证码这个原因不太清楚是什么原因造成的,从网上查了一下说让设置 ‘handle_httpstatus_list’: [302] 也不太清楚什么原理

海洋166 2019-12-12 19:45:59

源自：6-19 保存数据到mysql中 -1

610

收起

提交取消

1回答

bobby 2019-12-15 12:04:15

302是重定向了，这个问题需要处理一下验证码截图我看看我看一下提示信息是什么

0 回复有任何疑惑可以回复我~

相似问题

只爬取，不处理

setings设置成elasticsearch就会重定向到登录界面，而进mysql一点问题没有

爬取拉勾网，重定向302

实习僧爬取问题

课程6-4 调试拉钩网爬取url，response为302重定向为登录页面，没有进入调用callback函数parse_item，提取不到后续url

登录后可查看更多问答，登录/注册

Scrapy打造搜索引擎畅销4年的Python分布式爬虫课

参与学习 5771 人
解答问题 6269 个

带你彻底掌握Scrapy，用Django+Elasticsearch搭建搜索引擎

了解课程

本课精华内容

问答作业

Missing argument grant_type

4.5k 30

MysqlTwistedPipline的对象没有cursor属性

2.4k 18

知乎answer提取不到

898 18

为什么知乎数据导入不到MySQL数据库中？

1.2k 15

运行 scrapy crawl jobbole 报错

2.3k 15

查看更多本课问答

意见反馈帮助中心 APP下载