crawlspider 里面 如果我爬的网站是相对路径，

Question

该怎么处理，在 process_links 里面处理吗

Answer 1

bobby 2018-09-20 16:07:21

相对路径 scrapy会自动将当前网站的域名加上的

• 提问者 CodeForHzj #1

  之前不是用了parse.url.join(response.ur,url)的方法吗

• bobby 回复 提问者 CodeForHzj #2

  是的 这里加上以后 所有的url都有域名，你这里说的相对路径 需要解决什么问题呢？