请稍等 ...

老师，请问代理池怎么优化

面试题，问怎么优化ip代理池

697

收起

提交取消

2回答

提问者慕粉3427824 2017-12-22 17:44:24

奥，就是去面试被问到的，如果是查询慢该怎么优化

0 回复有任何疑惑可以回复我~

bobby 2017-12-22 16:35:54

这个问题太宽泛了没有说到底要优化什么问题？是ip代理池经常不能用还是ip代理池数量太大取数据慢了？这个问题一上来就说优化没有个优化点太宽泛了

0 回复有任何疑惑可以回复我~

提问者慕粉3427824 #1
```
请问老师item pipeline存储的数据如何去重？
```
回复有任何疑惑可以回复我~ 2017-12-24 11:03:18
bobby 回复提问者慕粉3427824 #2
```
去重我后面会讲原理的 你往后看视频吧
```
回复有任何疑惑可以回复我~ 2017-12-25 10:10:38
提问者慕粉3427824 #3
```
视频里的是url去重，我看完了
```
回复有任何疑惑可以回复我~ 2017-12-25 12:07:18