第一次下载图片后显示“图片已损坏”，然后第二次重试时状态码是403

Answer 1

小布_老师 2025-01-03 11:21:27

检查下请求头的Referer，看下是否正确。

通常不能直接使用网址访问图片

• OMYWOKS_btyENU #1

  爬不出来,反爬机制搞不定,需要的技术栈太多

• OMYWOKS_btyENU #2

  from selenium import webdriver
  from selenium.webdriver.chrome.service import Service
  from webdriver_manager.chrome import ChromeDriverManager
  from selenium.webdriver.common.by import By
  from urllib.parse import urljoin
  import os
  import time
  import random
  加了这些,爬成功了,大致学完爬虫,还得进军大模型啊

• 小布_老师 回复 OMYWOKS_btyENU #3

  需要更多数据，大模型可以处理更多的技术难题，对于爬虫来说可以提高效率