前書き

これは、Scrapyに含まれるすべての例外とその使用法のリストです。

日常の異常動作

例外scrapy.exceptions.CloseSpider（reason = 'cancelled'）

def parse_page(self, response):
    if 'Bandwidth exceeded' in response.body:
        raise CloseSpider('bandwidth_exceeded')

例外scrapy.exceptions.DontCloseSpider

この例外は、スパイダーウェブが閉じられないようにするためにspider_idleシグナルハンドラーで発生する可能性があります。

例外scrapy.exceptions.DropItem

アイテムのパイプラインフェーズでは、アイテムの処理を停止するために例外を発生させる必要があります。

例外scrapy.exceptions.IgnoreRequest

スケジューラーまたはダウンローダーミドルウェアは、この例外を発生させて、要求を無視する必要があることを示すことができます。

例外scrapy.exceptions.NotConfigured

特定のコンポーネントは、この例外を発生させて、無効のままであることを示すことができます。これらのコンポーネントには次のものが含まれます

例外scrapy.exceptions.NotSupported

この例外は、サポートされていない機能を示すために発生します。

例外scrapy.exceptions.StopDownload（fail = True）

bytes_receivedシグナルハンドラから送信され、応答としてこれ以上バイトをダウンロードしないことを示します。

fail = True（デフォルト）の場合、リクエストerrbackを呼び出します。応答オブジェクトは例外の応答属性として使用でき、StopDownload例外はFailureオブジェクトを受け取る値の属性として格納されます。これは、として定義されたerrbackで、応答にアクセスできることを意味します。

def errback(self, failure)：
	failure.value.response