scrapyが再試行ステータスコードを設定できますし、

RETRY_ENABLED =真
RETRY_TIMES = 3
DOWNLOAD_TIMEOUT = 3
RETRY_HTTP_CODES = [429404403]

おすすめ

転載: www.cnblogs.com/qiaoer1993/p/11732152.html
おすすめ