爬虫的一些问题

Question

老师,这个地方我有个疑惑,就是在分析页面的时候,我们在通过xpath或者css方式定位标签时  如何根据不同网站来写?如果写死岂不是只能爬去一个网站？我要爬100个网址要写100个程序?

Answer 1

7七月 2018-08-30 04:53:38

如果有，这样的爬虫给我来100个

Answer 2

7七月 2018-08-30 04:53:29

你还想写一个爬虫爬100个网站？那是不可能的。

• 提问者 慕后端4419857 #1

  那比如爬微博,就只能写个爬微博的，爬微信单独写个微信的程序吗？

• 7七月 回复 提问者 慕后端4419857 #2

  是的。