利用正则表达式处理爬取的今日头条内容数据(Python爬虫数据清洗)

版权声明:本文为博主原创文章,未经博主允许不得转载。 https://blog.csdn.net/qq_26870933/article/details/83856717

本次要处理的是抓取的头条内容,内容如下:

content = '''content: '<div><blockquote><p><strong>想要更多科技类资讯,欢迎关注公众号“中研网”</strong></p></blockquote><div class="pgc-img"><img src="http://p9.pstatp.com/large/dfic-imagehandler/fcbf612f-d293-4336-a34c-a1c365f54699" img_width="1200" img_height="737" alt="华为再获第一名,这次不是跟苹果比;华为绿屏,看看官方怎么回的" inline="0"><p class="pgc-img-caption"></p></div><p>中国人民大学经济学院副院长陈彦斌带领的“大宏观·创新课题组”在对全国所有高新技术企业的创新能力进行全覆盖、全方位的评价基础上编制了目前国内规模最大的企业创新能力排行榜——《中国企业创新能力百千万排行榜》,近日课题组在京发布了该榜单。</p><p>排行榜前五位的企业分别是:华为技术有限公司、广东欧珀移动通信有限公司、深圳市华星光电技术有限公司、上海华虹宏力半导体制造有限公司、腾讯科技(深圳)有限公司。</p><div class="pgc-img"><img src="http://p99.pstatp.com/large/dfic-imagehandler/6dca3201-4c0b-4846-ac50-3058b32f9b78" img_width="1200" img_height="801" alt="华为再获第一名,这次不是跟苹果比;华为绿屏,看看官方怎么回的" inline="0"><p class="pgc-img-caption"></p></div><p>《中国企业创新能力百千万排行榜》的排行指标:</p><p>1.对中国所有高新技术企业进行全覆盖评选;</p><p>2.评价指标丰富,包括专利,创新价值扩散以及创新网络宣传等;</p><p>3.采用大数据、网络爬虫等多项数字技术准确提取商标和网络热度等指标信息;</p><p>4.排行榜依托《中国企业创新能力数据库》,可信度高;</p><h1>其他消息:</h1><div class="pgc-img"><img src="http://p3.pstatp.com/large/pgc-image/73c48e0349c84a69bd579a9b217cbecd" img_width="550" img_height="733" alt="华为再获第一名,这次不是跟苹果比;华为绿屏,看看官方怎么回的" inline="0"><p class="pgc-img-caption"></p></div><p>10月16日,华为正式发布旗下最新款旗舰机——Mate 20系列,它们配备众多“黑科技”:首款7nm芯片麒麟980、超大广角徕卡三摄。</p><p>这原本是一款受青睐的产品,但却发生了一点小意外。上市不到一个月,却有网友反映其中一款Mate 20 Pro出现绿屏现象,甚至被三星手机官微调侃称“屏实力,不焦绿”。尤其在昏暗的灯光和深色背景下,绿屏现象会更加明显。</p><p>据外媒GSMArena报道,华为芬兰分部已经着手调查这个问题,并承诺免费为消费者提供更换服务。虽然还未放出官方声明,但是华为英国方面似乎也开始采取相同的措施。</p><p>还有媒体致电华为官方客服,客服表示,自手机签收之日起7日内,若在华为官方授权客服中心检测,确实存在绿屏现象,则可进行退换。若超过7日,也可免费更换新机。</p><blockquote><p><strong>想要更多科技类资讯,欢迎关注公众号“中研网”</strong></p></blockquote></div>','''

内容里面什么都有,接下来放大招,一句话的事!

# -*- coding: utf-8 -*-
import re

content = '''content: '<div><blockquote><p><strong>想要更多科技类资讯,欢迎关注公众号“中研网”</strong></p></blockquote><div class="pgc-img"><img src="http://p9.pstatp.com/large/dfic-imagehandler/fcbf612f-d293-4336-a34c-a1c365f54699" img_width="1200" img_height="737" alt="华为再获第一名,这次不是跟苹果比;华为绿屏,看看官方怎么回的" inline="0"><p class="pgc-img-caption"></p></div><p>中国人民大学经济学院副院长陈彦斌带领的“大宏观·创新课题组”在对全国所有高新技术企业的创新能力进行全覆盖、全方位的评价基础上编制了目前国内规模最大的企业创新能力排行榜——《中国企业创新能力百千万排行榜》,近日课题组在京发布了该榜单。</p><p>排行榜前五位的企业分别是:华为技术有限公司、广东欧珀移动通信有限公司、深圳市华星光电技术有限公司、上海华虹宏力半导体制造有限公司、腾讯科技(深圳)有限公司。</p><div class="pgc-img"><img src="http://p99.pstatp.com/large/dfic-imagehandler/6dca3201-4c0b-4846-ac50-3058b32f9b78" img_width="1200" img_height="801" alt="华为再获第一名,这次不是跟苹果比;华为绿屏,看看官方怎么回的" inline="0"><p class="pgc-img-caption"></p></div><p>《中国企业创新能力百千万排行榜》的排行指标:</p><p>1.对中国所有高新技术企业进行全覆盖评选;</p><p>2.评价指标丰富,包括专利,创新价值扩散以及创新网络宣传等;</p><p>3.采用大数据、网络爬虫等多项数字技术准确提取商标和网络热度等指标信息;</p><p>4.排行榜依托《中国企业创新能力数据库》,可信度高;</p><h1>其他消息:</h1><div class="pgc-img"><img src="http://p3.pstatp.com/large/pgc-image/73c48e0349c84a69bd579a9b217cbecd" img_width="550" img_height="733" alt="华为再获第一名,这次不是跟苹果比;华为绿屏,看看官方怎么回的" inline="0"><p class="pgc-img-caption"></p></div><p>10月16日,华为正式发布旗下最新款旗舰机——Mate 20系列,它们配备众多“黑科技”:首款7nm芯片麒麟980、超大广角徕卡三摄。</p><p>这原本是一款受青睐的产品,但却发生了一点小意外。上市不到一个月,却有网友反映其中一款Mate 20 Pro出现绿屏现象,甚至被三星手机官微调侃称“屏实力,不焦绿”。尤其在昏暗的灯光和深色背景下,绿屏现象会更加明显。</p><p>据外媒GSMArena报道,华为芬兰分部已经着手调查这个问题,并承诺免费为消费者提供更换服务。虽然还未放出官方声明,但是华为英国方面似乎也开始采取相同的措施。</p><p>还有媒体致电华为官方客服,客服表示,自手机签收之日起7日内,若在华为官方授权客服中心检测,确实存在绿屏现象,则可进行退换。若超过7日,也可免费更换新机。</p><blockquote><p><strong>想要更多科技类资讯,欢迎关注公众号“中研网”</strong></p></blockquote></div>','''

content = re.sub("[A-Za-z0-9\!\%\[\]\,\:<\/#\. ----- _ _]", "", content)
print(content)

处理后得到如下结果:

想要更多科技类资讯,欢迎关注公众号“中研网”华为再获第一名,这次不是跟苹果比;华为绿屏,看看官方怎么回的中国人民大学经济学院副院长陈彦斌带领的“大宏观·创新课题组”在对全国所有高新技术企业的创新能力进行全覆盖、全方位的评价基础上编制了目前国内规模最大的企业创新能力排行榜——《中国企业创新能力百千万排行榜》,近日课题组在京发布了该榜单。排行榜前五位的企业分别是:华为技术有限公司、广东欧珀移动通信有限公司、深圳市华星光电技术有限公司、上海华虹宏力半导体制造有限公司、腾讯科技(深圳)有限公司。华为再获第一名,这次不是跟苹果比;华为绿屏,看看官方怎么回的《中国企业创新能力百千万排行榜》的排行指标:对中国所有高新技术企业进行全覆盖评选;评价指标丰富,包括专利,创新价值扩散以及创新网络宣传等;采用大数据、网络爬虫等多项数字技术准确提取商标和网络热度等指标信息;排行榜依托《中国企业创新能力数据库》,可信度高;其他消息:华为再获第一名,这次不是跟苹果比;华为绿屏,看看官方怎么回的月日,华为正式发布旗下最新款旗舰机——系列,它们配备众多“黑科技”:首款芯片麒麟、超大广角徕卡三摄。这原本是一款受青睐的产品,但却发生了一点小意外。上市不到一个月,却有网友反映其中一款出现绿屏现象,甚至被三星手机官微调侃称“屏实力,不焦绿”。尤其在昏暗的灯光和深色背景下,绿屏现象会更加明显。据外媒报道,华为芬兰分部已经着手调查这个问题,并承诺免费为消费者提供更换服务。虽然还未放出官方声明,但是华为英国方面似乎也开始采取相同的措施。还有媒体致电华为官方客服,客服表示,自手机签收之日起日内,若在华为官方授权客服中心检测,确实存在绿屏现象,则可进行退换。若超过日,也可免费更换新机。想要更多科技类资讯,欢迎关注公众号“中研网”

结束!

猜你喜欢

转载自blog.csdn.net/qq_26870933/article/details/83856717