采纳答案成功!
向帮助你的同学说点啥吧!感谢那些助人为乐的人
需求:通过关键词爬取列表页的标题和价格, 进行翻页爬取,不用进入宝贝链接 问题: 1、首先是要进行登录的,我拿到cookie后进行访问,如果用同个cookie(因为只有一个账号)通过IP代理后,每次访问都是不同的IP,这样会不会导致封号 2、用了IP代理,是否就意味着不用进行限速操作,因为每次都是不同的IP入口,是不是就意味着限速就没用了。
对于淘宝这种 需要登录才能访问的情况 最好别随意变化ip 这样淘宝是可以很容易的发现你的账号问题的
使用ip代理不一定非常安全因为 1. 如果需要登陆场才能访问,那么你就会带cookie过去,这样你再配合ip代理,这样后台一统计:我去,有人的账号的ip居然短时间内不停的变化,这样是很容易发现你的, 2. 有些ip代理如果不是高匿的,也是很容易发现你是使用的ip代理的,至于如何做到的 需要详细了解一下网络协议
那我只能通过本地IP加上mouse模拟点击才不容易被查了,这样可以吧!!
是的, 最重要的是控制速度 而且也不要太规律 不然也容易被识别出来
那这个就只能通过同步去做了
登录后可查看更多问答,登录/注册
带你彻底掌握Scrapy,用Django+Elasticsearch搭建搜索引擎
4.9k 30
2.6k 18
1.2k 18
1.5k 15
2.9k 15
购课补贴联系客服咨询优惠详情
慕课网APP您的移动学习伙伴
扫描二维码关注慕课网微信公众号