使用pycharm运行调试scrapy

原文：https://www.cnblogs.com/BigFishFly/p/6337257.html

摘要 ：

Scrapy是爬虫抓取框架，Pycharm是强大的python的IDE，为了方便使用需要在PyCharm对scrapy程序进行调试 python PyCharm Scrapy 

scrapy指令其实就是一个python的运行脚本

pyCharm是一个强大的pythonIDE

在运行scrapy库时，其实是相当于运行一个python脚本：

#!/usr/bin/python

 

from scrapy.cmdline import execute

execute()

所以当运行scrapy crawler spider时，其实与指令：

  python /Library/Python/2.7/site-packages/scrapy/cmdline.py crawl spider

的效果是一样的。

这样只需要在pycharm中的Run下Edit Configurations...中做运行配置即可：

 

 

Name 可以随便填

点击ok后，在你的项目中设置断点或者直接运行，即可调试该项目了。

==============================================================================================

我的配置：

效果：