采纳答案成功！
向帮助你的同学说点啥吧！感谢那些助人为乐的人
老是，我最近面试老是被问到，如何提高scrapy的效率和性能
scrapy本身是一个异步io的框架，本身的性能很高，如果面试中问到提升性能就需要问对方是不是爬虫中遇到阻塞io的操作了，如果遇到了就将这些操作放到线程池中去完成，对于本身已经支持异步io的库则不需要去优化
登录后可查看更多问答，登录/注册
带你彻底掌握Scrapy，用Django+Elasticsearch搭建搜索引擎
4.9k 30
2.6k 18
1.3k 18
1.5k 15
3.0k 15
购课补贴联系客服咨询优惠详情
慕课网APP您的移动学习伙伴
扫描二维码关注慕课网微信公众号
