开启Scrapy项目之旅之一:认识Scrapy项目的目录结构

版权声明:本文为博主原创文章,未经博主允许不得转载。 https://blog.csdn.net/qq_38262266/article/details/85340526

创建一个爬虫项目,框架会自动:

1、生成一个同名项目文件夹
文件夹包括:同名子文件夹+scrapy.cfg文件

2、同名子文件夹:核心代码
scrapy.cfg文件:配置文件

3、同名子文件夹:
_init_py文件:项目的初始化文件,项目的初始化信息。
items.py文件:数据容器文件,定义要获取的数据。
pipelines.py文件:项目的管道文件,对items里面定义的数据进行进一步的加工与处理。
settings.py文件:项目的设置文件,设置信息。
spiders文件夹:爬虫部分相关的文件。

猜你喜欢

转载自blog.csdn.net/qq_38262266/article/details/85340526
今日推荐