采纳答案成功!
向帮助你的同学说点啥吧!感谢那些助人为乐的人
现在的网站模拟登陆太麻烦了,主要是很多网站使用 的不再是验证码了,都是鼠标拖动,拼图,那么问题来了,能不能自己手动登陆,然后再把获得的cookie取出来,自己手动加入到爬虫的request请求中,在哪里设置啊?
当然可以啊, 你手动登录 然后把cookie保存下来到文件中, 然后在第一个yield request的时候 request有个参数cookies 只要你第一个request设置了cookie 以后所有的request都会自动带上这个cookies
非常感谢!
登录后可查看更多问答,登录/注册
带你彻底掌握Scrapy,用Django+Elasticsearch搭建搜索引擎
4.8k 30
2.6k 18
1.2k 18
1.4k 15
2.8k 15