用scrapy shell调试采集cnblog的详情页，报错

Question

Answer 1

bobby 2022-05-09 13:20:59

上面出现了403 没有抓取到数据，需要登录， 可以先使用pycharm调试

• 提问者 王凯6397575 #1

  明白。就是说需要登录的，就不能用scrapy shell调试，而要用pycharm调试，是吗？

• bobby 回复 提问者 王凯6397575 #2

  是的，而且这里的url中明显带有登录login说明就是需要你登录