scrapy整合了selenium,如果scrapy的request用了代理，这里的selenium也会用代理吗?

Question

1 scrapy整合了selenium,如果scrapy的request用了代理，这里的selenium也会用代理吗?

2 同时，如果scrapy的request的useragent改变了，selenium也会跟着改变吗？

3 如果是用的那种服务器的代理，比如通过设置Authorization 给服务器，服务器自动给你分配一个代理。这种方式如何写呢?同时selenium也可以一起使用吗?

Answer 1

bobby 2017-11-06 13:13:17

1. 首先 scrapy和request和selenium不能共用代理 需要单独设置
   

2. scrapy的erquest中的useragent变了， selenium也不会有任何影响

3. selenium的用户名密码认证 你可以看看这个 https://stackoverflow.com/questions/24304752/how-to-handle-authentication-popup-with-selenium-webdriver-using-java