各大购物网站商品信息爬取

Question

能不能把淘宝某一个确定商品的全部信息都爬取出来，还有怎么在网上爬取某种商品的历史价格啊

Answer 1

bobby 2017-05-11 10:43:49

可以把商品的信息全都爬取出来。最简单的方式是用selenium 然后模拟鼠标移至下拉到最底部， 这些用法我会在课程中讲到， 第二个问题只要页面上能看到商品的历史价格就能爬取下来， 如果页面上都无法获取到或者html源码中没有， 那就爬取不到 或者你能分析出淘宝是否有对应的ajax接口能获取到历史价格了， 这个分析过程会比较复杂些， 最好对前端比较懂的人来分析