Spider 空闲的时候，如何操作才能在调用其它代码的时候不影响 Spider 继续执行？

Question

Spider 空闲的时候，如何操作才能在调用其它代码的时候不影响 Spider 继续执行？

比如说，Spider 在 idle 空闲状态的时候，调用了 A 代码，Spider 不需要等 A 代码执行结果，而是调用完 A 代码就继续往下执行，这个要如何实现呢？

Answer 1

bobby 2017-07-20 10:09:04

亲 整个scrapy的编码都是异步的 都不需要等到结果返回， 你这里说的不等待是什么意思呢？ 原理就是twisted， 你如果对异步编码感兴趣可以看看twisted和tornado

• 提问者 笑看风云号 #1

  我知道 scrapy 是异步调用，在 spider 空闲的时候，想调用数据库操作代码，不知道  要如何写编码呢？老师能写个大概的代码参考吗？

• 提问者 笑看风云号 #2

  我知道 scrapy 是异步调用，在 spider 空闲的时候，想调用数据库操作代码，包括
    查询 修改 删除  这些操作。
  不知道 要如何写编码呢？老师能写个大概的代码参考吗？

• bobby 回复 提问者 笑看风云号 #3

  亲 http://scrapy-chs.readthedocs.io/zh_CN/1.0/topics/signals.html 你可以看看官方文档里面的信号， 有个空闲信号， 我这里没有现成的关于这种情况的代码