关于boss直聘的反爬

Question

老师，我爬取boss直聘的数据时发现请求网页会先返回一段js代码设置cookie，同时又设置IP限速，使用IP代理就无法突破cookie限制，因此我想咨询一下，这种IP限速加cookie限制的反爬导致了爬虫速度十分慢有什么办法能解决吗

Answer 1

bobby 2020-03-23 11:02:22

这种应该是将cookie和ip绑定了，所以你的一个cookie换个ip用同样的cookie也会被识别，这种反爬难度也不大，你可以购买一些高质量的代理ip，固定一下ip 每个ip拿到cookie以后 就用这个ip定时抓取，多用一些ip就可以了

• 提问者 qq_焦良_0 #1

  老师可以给几个购买IP的途径，阿布云好像没有我需要的这种IP服务

Answer 2

bobby 2020-03-24 11:14:34

阿布云这个有锁定ip的啊

• 提问者 qq_焦良_0 #1

  这个只有一分钟，到期后又要请求cookie了

• bobby 回复 提问者 qq_焦良_0 #2

  你有没有咨询过阿布云官方？ http://www.etdaili.com/Index-help.html 也可以看看这个 我之前没有使用过这种服务

• 提问者 qq_焦良_0 回复 bobby #3

  好的，谢谢老师

Answer 3

提问者 qq_焦良_0 2020-03-23 11:03:29

老师可以给几个购买IP的途径，阿布云好像没有找到我需要的