Python3~创建myspider项目

#导入scrapy模块:如果变红,去选择一个编译环境,如果没有scrapy,点“+”添加
import scrapy

#新建一个爬虫类
#格式:class 爬虫名称Spider(scrapy.Spider)
class BaiduSpider(scrapy.Spider):
# 1.指定一个爬虫名称
    name='baidu'

#2.初始启动链接
    # start_urls名字固定
    start_urls=['http://www.baidu.com']

# 3.重写一个函数
    def parse(self, response):
        print('~~~~~~~~~~~~~~~~~~~~~~~~~~~~~`')
        with open('baidu.html','w',encoding='utf-8') as f:
            f.write(response.body.decode('utf-8'))

猜你喜欢

转载自blog.csdn.net/zbrj12345/article/details/80495464