bobby,现在公司有个需求,利用爬虫来增加网站的访问量,公司用的是百度统计(原理是:把百度提供的一段JS代码放在公司页面种,只要访问,就会执行这段代码,就会吧访问信息统计传回百度),我利用request访问网站,百度统计不到,用selenium并在页面停留2S就就可以被后台统计到。
我现在的问题是:如果用 selenium一时效率不高,而是每次都有个打开浏览器的过程,我怕次数多后会造成服务器卡死,浏览器打不开等操作。 所以我想问能不能用request来实现这个操作,或则有什么更好的办法那
带你彻底掌握Scrapy,用Django+Elasticsearch搭建搜索引擎
了解课程