抓包和selenium是什么关系？

Question

小布老师，我看了这节以及后面selenium相关的小节，仍然不是很懂，

抓包和JS逆向这种操作，是在什么情况下使用的？

是不是在网页不能直接用xpath或者beautifulsoup解析出来的时候，就需要抓包。

可不可以理解为，这是可以和selenium互相替代的技术？

JS逆向开发难运行速度快？selenium爬虫开发容易运行慢？我理解的对吗？

Answer 1

小布_老师 2021-09-17 15:18:48

抓包是要具体分析请求，这个是爬虫的本质。

逆向js，是因为抓包中的数据需要加密或者解密，就需要分析js代码。

selenium是借助浏览器去抓取网页，优先是简单，可以绕过js逆向。缺点是慢。

• 提问者 慕粉3883702 #1

  明白了，下次如果url过多，嫌selenium太慢就逆向js.

• 小布_老师 回复 提问者 慕粉3883702 #2

  对的。