Scrapy、ScrapyRedis使用

Redisのサポート、ピットが発生したときScrapy爬虫類が追加さ:

  1. Scrapyに渡されたリクエスト・オブジェクトは、参照渡しされている場合それは要求のいずれかに変更され、それは他の場所に変更され、そしてRedisの後に交換し、これは、渡された値になります。理由は?デシリアライズを介してデータベースからRedisの要求オブジェクト。
  2. で、元の爬虫類scrapy、あなたは変数を設定することができます;しかしscrapyのRedisの中で、自分自身に偽の戻り値の型を再定義する必要が、それ以外の場合は、エラーの詳細な理由は、利用可能な特定されて表示されます無効duplacteフィルタについて】

今回はPythonの考えを使用して

  • シンプルなPythonの問題を扱う、本当に便利な、本当にそれで、学ぶべき多くの知識があるだろう、簡単なチュートリアルのpythonではありませんが扱うことができるため、おそらく知識の欠如、パイソン、まだ安定していない、例えば、パイソン通訳直接崩壊?

おすすめ

転載: www.cnblogs.com/FairlyHarmony/p/11403496.html
おすすめ