scrapy shell 拉勾网的网页 出现了302

Question

response.css(".job-name::attr(title)").extract()出现[]
求老师解答一下

Answer 1

bobby 2020-04-19 16:01:28

设置了headers没有呢？

• 提问者 qq_慕工程2251211 #1

  没有设置

Answer 2

提问者 qq_慕工程2251211 2020-04-19 16:57:14

老师，我加下您的QQ吧，我还有问题想问您 我加您了  你同意一下  或者您加我  1054918089

• bobby #1

  加你了

• 提问者 qq_慕工程2251211 回复 bobby #2

  好的 这个出现302的原因是什么呢

• bobby 回复 提问者 qq_慕工程2251211 #3

  被反爬了 没有user-agent很容易识别出是爬虫来

点开查看后面2条评论