采纳答案成功!
向帮助你的同学说点啥吧!感谢那些助人为乐的人
现实中有不少网站都会对会员ip进行验证。比如淘宝,我在电脑上登录了,马上给电脑设置个代理,再次刷新淘宝,可能会要求再次验证账号。 有没有什么办法将ip池 cookies池 UA统一起来? 比如我在ip池中验证了一天ip可用,然后用这个ip代理登录生成cookies,去采集的时候就用这条代理ip+cookies去采集。 盼解答。
可以这样啊 使用redis保存 将ip地址作为redis中的key, cookie和ua放入json并序列化到这个key的value中 到时候取出来一起就行了
非常感谢!
登录后可查看更多问答,登录/注册
带你彻底掌握Scrapy,用Django+Elasticsearch搭建搜索引擎
5.3k 30
2.9k 18
1.6k 18
1.8k 15
3.4k 15
购课补贴联系客服咨询优惠详情
慕课网APP您的移动学习伙伴
扫描二维码关注慕课网微信公众号