Python爬虫安装scrapy以及创建scrapy爬虫项目

第一步:安装Python虚拟环境并创建scrapy(注意:尽量不要创建在C盘,scrapy仅仅是示例名字)

安装虚拟环境相关博客:点击打开链接

第二步:进入scrapy安装相应的文件: pip install....,如果有包的话也可以直接放进来!,如图:

第三步:安装pypiwin32(注意:运行scrapy的时候,如果没有安装pypiwin32,会出异常。)

如果出现下面的需要单独安装红色部分:pip install.....(which isnot install)

命令:

pip install constantly
pip install Automat
pip install hyperlink
pip install incremental
pip install zope.interface

第四步:以上安装完毕之后,再安装scrapy:  pip install scrapy,安装完成后查看,如图:



第五步:进入爬虫环境:workon scrapy

参考:安装虚拟环境的博客》workon(找到所有项目)

                                            workon 项目名(进入)


第六步:创建scrapy爬虫项目:

分别执行如下图命令:


第七步:查看项目和配置解释器(pycharm进入项目开始配置)




第八步:查看项目内部详情





就这样操作!!!!!!很OK!!!!!!!!吐舌头大笑



猜你喜欢

转载自blog.csdn.net/qq_33472765/article/details/80904659
今日推荐