HTMLParser-实战

了解了HTMLParser库的知识后,选择做一个小训练,对https://www.python.org/events/python-events/这个网址进行分析,之后输出其中每次会议的题目、时间和地点。


如果要简单了解下HTMLParser库可以点击打开


下面进入正题




这是网站的源码,由此可以看出会议全部都是在ul下,而一个一个会议则是分开在一个一个li中


整体的思路就是写一个继承了HTMLParser的类,并且重载方法,然后筛选出我们需要的date


class MyHTMLParser(HTMLParser):
    flag = 0
    new = []
    get_data = 0

    def handle_starttag(self, tag, attrs):
        #判断该标签是否存在
        if tag == 'ul':
            for attr in attrs:
                if re.match("list-recent-events menu",attr[1]):
                    self.flag = 1
        #处理a元素
        if tag == 'a' and self.flag == 1:
            self.get_data = 'tittle'
        #处理time元素
        if tag == 'time' and self.flag == 1:
            self.get_data = 'time'
        #处理span元素
        if tag == 'span' and self.flag == 1:
            self.get_data = 'addr'

    #当处理尾标签时则初始flag
    def handle_endtag(self, tag):
        if self.flag == 1 and tag == 'ul':
            self.flag = 0

    #对data的处理
    def handle_data(self, data):
        if self.get_data and self.flag == 1:
            #如果找到了题目,则新建一个dict来保存
            if self.get_data == 'tittle':
                self.new.append({self.get_data : data})
            #如果找到了时间或者地点,则取出new这个list最后一个dict,然后添加键值
            else:
                self.new[len(self.new)-1][self.get_data] = data
            self.get_data = None


全部的代码在这里


如果有问题可以及时问我


猜你喜欢

转载自blog.csdn.net/sun_white_boy/article/details/79209299
今日推荐