首页 > scrapy爬取的网址遇到404应该怎么处理?

scrapy爬取的网址遇到404应该怎么处理?

scrapy爬取的网址,其中一些是404页面时,应该怎么处理?


直接忽略,重试若干次后忽略,用日志记录。。。

【热门文章】
【热门文章】