python安装scrapy爬虫框架

本文全使用pip命令安装

第一步:pip install wheel

原因:安装Twisted需要依赖 .whl的文件
在这里插入图片描述

第二步:pip install lxml

原因:scrapy需要 lxml 库,用来做xpath提取(python3.7.6使用命令安装scrapy时,自动安装该库;其他版本未知)。
在这里插入图片描述

第三步:pip install Twisted 或 pip install Twisted==19.10.0
在这里插入图片描述

第四步:pip installl scrapy 或 pip install scrapy==1.8.0
在这里插入图片描述

windows常见错误:
这是安装Twisted 可能出现的错误,错误原因是红的报错位置的上一句
error: Microsoft Visual C++ 14.0 is required. Get it with “Microsoft Visual C++ Build Tools”: ‘http://landinghub.visualstudio.com/visual-cpp-build-tools’

这句报错是因为Windows 自己系统的问题,需要安装 Visual C++14.0及以上版本

解决方法:https://support.microsoft.com/zh-cn/help/2977003/the-latest-supported-visual-c-downloads 下载Visual C++ 14.0及以上版本

安装后如果还安装失败,玄学重启

如果有其他的问题请留言,后追更!!!

猜你喜欢

转载自blog.csdn.net/I_AM_WORRY/article/details/103923814