CSDN爬取获取数据重复

Question

老师我在学的时候又遇到个情况，在爬CSDN解析列表页的时候，列表会反回很多个重复的值

Answer 1

bobby 2019-10-17 11:36:32

你这里打印的只是帖子的状态而已，为什么就说帖子数据是重复的呢

• 提问者 慕的地7158155 #1

  这个状态连续打印了好多遍，一次就会出现全部的状态了，不能一个一个的提取

• bobby 回复 提问者 慕的地7158155 #2

  你留下qq 我看看你的问题

• 提问者 慕的地7158155 回复 bobby #3

  949418761