老师 请教一个问题

Question

老师 亚马逊美国站点采用的是什么反爬策略 为啥我程序跑着跑着 要不就是超时要不就是断开连接了我也没用并发啥的 这是什么原因导致的

Answer 1

小布_老师 2021-10-08 23:48:28

你的服务器在哪？抓去国外的站，爬虫最好是在国外服务器上。

低速爬虫应该不会被反爬。

• 提问者 慕沐3486955 #1

  服务器在国内 爬取的过程中，因为老是超时的原因我用了retry重试 但是在重试的过程中会出现[WinError 10053] 你的主机中的软件中止了一个已建立的连接。这个报错