实习僧爬取问题

Question

老师，实习僧爬取出现这种问题是因为cookies限制吗？

Answer 1

慕仔4607872 2020-03-26 08:59:09

你点开那重定向网址，看看是不是认为你是爬虫给你重定向到验证码啥页了

• bobby #1

  是的，这个是302 是被重定向了，很多时候都会被重定向到登录页面或者验证码页面 要看看是否被反爬了

• 提问者 weixin_慕用3052561 #2

  被反爬了，重定向到简历界面了

• 慕仔4607872 回复 提问者 weixin_慕用3052561 #3

  那网站可能通过IP和cookie同时判断你是不是爬虫，ip老变cookie不变，cookie老变ip不变，最变态应该是ip和cookie绑定,再就是必须账号登陆根据频率判断了。具体是不是cookie可能得自己试探它

点开查看后面2条评论