启动爬虫后不执行pipelines.py怎么解决？

Question

启动爬虫后不执行pipelines.py
我看了一下日志，似乎是和路径有关，在安装scrapy库时，安装的路径是C:\Users\hp\AppData\Roaming\Python\Python39\site-packages\，但Python安装在C:\Program Files\Python39，和这个有关系吗？现在不知道该怎么解决了，求教

Answer 1

小布_老师 2025-12-15 14:46:42

最后一张图，日志图片中，有启用的pipeline，我直接看图片，貌似就是你的pipeline，说明启动了，没问题。

pipeline的工作原理，第一个是启动，第二个是存储数据。

启动可以看日志，存储数据，需要爬虫返回数据，就是yield item这个，只有有数据发到pipeline，就可以让管道处理数据。

• 小布_老师 #1

  继续检查下爬虫和item返回

• 提问者 静笃 #2

  在pipelines加了print，无效

• 小布_老师 回复 提问者 静笃 #3

  在爬虫文件中。主动返回一个item，然后观察终端的pipeline输出，看下有没有输出。
  
  在pipeline中加print输出，方便观察。
  
  这是调试方法，测试一下数据流通。

点开查看后面2条评论