请稍等 ...
×

采纳答案成功!

向帮助你的同学说点啥吧!感谢那些助人为乐的人

scrapy只监听redis的状态,并不抓取


https://img1.sycdn.imooc.com//szimg/5bec121c0001a4e407220426.jpg



老师你好,我想问下为什么我的scrapy redis爬虫只监听,我往redis里面写入了url也不行,可能是哪些方面的问题,麻烦老师解答下,谢谢。

正在回答 回答被采纳积分+3

1回答

bobby 2018-11-16 20:56:20

你是如何写入到redis中的呢?

0 回复 有任何疑惑可以回复我~
  • 提问者 xmzls #1
    老师,我不知道怎么写入redis的,我在settins.py文件中按照老师说的,写入redis的配置,然后更改了里面的配置文件,就造成了这样,不知道scrapy和redis怎么通讯的,老师这个可以细说下嘛,谢谢。
    
    之前的答案已经知道了,是我的redis key写错了,更正了就可以正常抓取了。
    回复 有任何疑惑可以回复我~ 2018-11-18 12:55:05
  • bobby 回复 提问者 xmzls #2
    好的,scrapy-redis中我会详细的解读scrapy-redis的源码
    回复 有任何疑惑可以回复我~ 2018-11-19 16:29:26
  • 提问者 xmzls 回复 bobby #3
    谢谢老师,老师是会更新这个课程么。
    回复 有任何疑惑可以回复我~ 2018-11-19 21:48:04
问题已解决,确定采纳
还有疑问,暂不采纳
意见反馈 帮助中心 APP下载
官方微信