scrapy 数据存储在 django model中

版权声明：本文为博主原创文章，未经博主允许不得转载。 https://blog.csdn.net/qq_36336522/article/details/84582539

一、写好models文件

二、配置scrapy -- settings

import os
import sys
import django
from django.core.wsgi import get_wsgi_application

sys.path.append(os.path.dirname(os.path.abspath('.')))
os.environ['DJANGO_SETTINGS_MODULE'] = 'kyzs.settings'
application = get_wsgi_application()
django.setup()

三、写好scrapy items文件

import scrapy
from ks.models import ENGLISH_GRE   # important
from scrapy_djangoitem import DjangoItem   #important

class GrecrawlItem(DjangoItem):  #The argument
          django_model=ENGLISH_GRE  

四、写好sipders文件

五、写好pipelines文件

class GrecrawlPipeline(object):
        def process_item(self, item, spider):
              item.save()
              return item