采纳答案成功!
向帮助你的同学说点啥吧!感谢那些助人为乐的人
一个 cookie池 一般需要多少条cookie信息呢,例如淘宝
这要看你的抓取并发要求有多少?如果是抓淘宝这种 你更多的应该是建立有效的账号机制,因为即使你使用了cookie池 因为你要登录才能访问,这种都是针对账号来反爬的,你需要能同时维护多个账号 而且不能并发太高不然会被封号
老师,你在cookie池那一节中只做了一个帐号的登录,那如果要做多个帐号登录是怎么做,这样就可以有多个cookie,就是多帐号具体怎么做??有没有代码示例,或者其他的示例
多个账号 启动多个线程 每个线程使用chrome登录一下就能拿到多个cookie了啊,但是你要使用多个账号 不能使用同一个账号,一般同一个账号只能有一个cookie有效
这个知道,像我们教程里说的是5个线程,也就是说可以同时登录5个,是这样吧??但是这个帐号怎么封在settings中,又怎么取,那些帐号是己经登录过的等等问题该怎么处理
登录后可查看更多问答,登录/注册
带你彻底掌握Scrapy,用Django+Elasticsearch搭建搜索引擎
4.8k 30
2.5k 18
1.1k 18
1.4k 15
2.8k 15