老师最近使用多进程爬虫，利用进程池pool(64)
刚开始爬还挺快，跑一段时间后，最后只剩下四五个进程再跑了，其他进程都卡住不动了，为什么。
372
收起
正在回答 回答被采纳积分+3
1回答
bobby
2022-04-21 13:31:43
相似问题
老师最近使用多进程爬虫，利用进程池pool(64)
432
0
4
多进程的使用场景
770
0
2
tornado 中使用进程池
828
0
3
scrapy多进程如何实现
1195
0
3
能否使用Flink构建爬虫平台
1345
0
10
登录后可查看更多问答，登录/注册
Scrapy打造搜索引擎 畅销4年的Python分布式爬虫课
- 参与学习 5788 人
- 解答问题 6278 个
带你彻底掌握Scrapy，用Django+Elasticsearch搭建搜索引擎
了解课程
