Python3~mac安装scrapy并创建myspider项目

mac安装scrapy并创建项目，引入PyCharm

 

1\sudo pip install Scrapy  

2\scrapy startproject mySpider

3\打开Pycharm--àopenproject---》选择命令行中创建的mySpider

4、在mySpider文件夹下运行程序scrapy crawlbaidu(爬虫名称)

 

百度设置的反爬规则协议,scrapy遵守这些协议，但是可以改动，settings.py中改动

 

执行：scrapy crawl baidu后