请稍等 ...
×

采纳答案成功!

向帮助你的同学说点啥吧!感谢那些助人为乐的人

Scrappy shell无效

拉钩现在具体职位,我用shell直接重定向了,我加了cookie和useragent都没办法,老师该咋办

正在回答

1回答

bobby 2021-03-19 09:43:28

拉钩采用了极度变态的动态cookie机制,目前正在破解中。使用scrapy已经无法获取到数据了,目前采用selenium获取最方便,使用scrapy获取也会被反爬

0 回复 有任何疑惑可以回复我~
  • selenium怎么获取
    回复 有任何疑惑可以回复我~ 2021-04-29 20:18:24
  • 我已经将拉钩的反爬代码更新到慕课的git源码中了并做了说明,可以在 git.imooc.com中查看到最新的源码
    回复 有任何疑惑可以回复我~ 2021-04-30 22:55:13
问题已解决,确定采纳
还有疑问,暂不采纳
意见反馈 帮助中心 APP下载
官方微信