为什么知乎数据导入不到MySQL数据库中？

Question

代码也没有报错但是写入不到数据库中

Answer 1

qq_擦肩而过再回首_0 2018-04-12 09:04:54

我也遇到同样的情况，请问你解决了没有？

Answer 2

提问者 YangZee 2018-02-24 22:09:38

循环执行完insert_sql, params = item.get_insert_sql()
就退出了，没报错，数据也没插入，print也没执行。

• bobby #1

  你看一下handle_error方法里面有没有报错 你在里面打个断点

• 提问者 YangZee 回复 bobby #2

  老师，现在问题是handle_error没有报错，我print (insert_sql, params)这个也可以输出，值都可以看到，但就是进入不到数据库中。

• bobby 回复 提问者 YangZee #3

  是不是数据本身的所有主键都是一样造成了数据的更新？

点开查看后面3条评论

Answer 3

王刘奇 2018-02-21 19:01:23

加断点！看看有木有执行到存储到MySQL的pipline

• bobby #1

  正解，

• 提问者 YangZee 回复 bobby #2

  没有进入到pipline
  yield question_item 之后进入到task.py一直在scrapy里面的那些文件循环进入不到item pipline

• bobby 回复 提问者 YangZee #3

  你看看pycharm的console中有没有异常？以及是否将pipeline配置到setting中？

点开查看后面3条评论