同学们,大家好!本周我们学习的是爬虫实训中的内容,要求用这一周所学的知识点 使用scrapy框架完成京东商品页的爬取,和使用主从原理全栈爬取cdsn网站的内容,下边是本周的优秀案例,希望没有上榜的同学下次再接再厉,继续加油!!!
1.Python6期学员 张亚曦
链接地址:https://gitee.com/zyx91/tenth_week_operation
亮点:定义了2种打开方式,method1采用无界面Chorme驱动通过输入页码并确定的方式读取数据,存储速率很低,method2采用PhantomJS驱动通过读取下一页方式读取数据,存储效率较快。
2.Python6期学员 邵伟增
链接地址:https://gitee.com/Shaoweizeng_admin/tenth_week_operation.git
亮点:在爬取 jd详情页时,手动输入想要搜索的分类,增强了体验性。