采纳答案成功!
向帮助你的同学说点啥吧!感谢那些助人为乐的人
之前设置在middleware中的随机user-agent和ip代理池还会有效吗
chromedriver的界面版不支持,但是你可以试试这个 chromedriver的headless版本 https://blog.csdn.net/hunter_wyh/article/details/78548056
好的 谢谢,您知道scrapy-splash如何设置代理IP吗,这几天在试着弄scrapy-splash,试了网上的一些方法好像都没有生效,很头疼了
scrapy-splash 不要用这个了 目前建议以后都只用chromedriver chromedriver已经推出了headless模式了
为什么不建议用scrapy-splash呢,感觉scrapy-splash跟scrapy整合的更好呢
登录后可查看更多问答,登录/注册
带你彻底掌握Scrapy,用Django+Elasticsearch搭建搜索引擎
5.5k 30
2.9k 18
1.6k 18
1.8k 15
3.4k 15
购课补贴联系客服咨询优惠详情
慕课网APP您的移动学习伙伴
扫描二维码关注慕课网微信公众号