采纳答案成功!
向帮助你的同学说点啥吧!感谢那些助人为乐的人
拉钩现在具体职位,我用shell直接重定向了,我加了cookie和useragent都没办法,老师该咋办
拉钩采用了极度变态的动态cookie机制,目前正在破解中。使用scrapy已经无法获取到数据了,目前采用selenium获取最方便,使用scrapy获取也会被反爬
selenium怎么获取
我已经将拉钩的反爬代码更新到慕课的git源码中了并做了说明,可以在 git.imooc.com中查看到最新的源码
登录后可查看更多问答,登录/注册
带你彻底掌握Scrapy,用Django+Elasticsearch搭建搜索引擎
4.7k 30
2.5k 18
1.1k 18
1.3k 15
2.7k 15