python笔记之利用BeautifulSoup爬取糗事百科首页段子

1.到糗事百科查看网页源代码找到规律,发现内容都在class_=”content”的div标签内

2.直接上代码:

from bs4 import BeautifulSoup    #调用BeautifulSoup
from urllib import request

url = 'https://www.qiushibaike.com/'
headers = ("User-Agent","Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/51.0.2704.79 Safari/537.36 Edge/14.14393")
openner = request.build_opener()
openner.addheaders = [headers]
data = openner.open(url).read().decode("utf-8")  #对浏览器进行伪装,并以utf-8编码解码

soup = BeautifulSoup(data,"html.parser")    #将上面得到的网页内容,转为html.parser模板样式

nodes = soup.find_all("div",class_="content")   #提取网页中的div标签内,class="content"内的内容

for node in nodes:
    print(node.text.replace("\n",""))  #将得到的内容去除\n ,并依次遍历出来  

附上运行结果,大家可以欣赏下

在市场里买了个白萝卜称了称一块二。只有一块零 钱找 零那些一毛的钢镚 儿最烦了你懂的。把钱递过去,说了句:“一块钱行不”另一只手在兜里摸着口袋,确保万一被拒绝一定要第一时间能拿出钱。大姐不置可否,漠漠然伸手捏住一块 钱的一角儿,另一只手递过萝 卜凝视着我的眼睛。周围卖鱼卖肉卖水果的吆喝声,瞬间被隔离,我们就这样各自捏着这一块钱的两边和萝卜的两头,互相审视着对方。她不松萝卜,我也没松钱!空气中弥漫着杀 气。我知道,这时候如果我先开口,就代表着认输啦!这不仅仅是2 毛 钱的问…查看全文
一帮熊孩子在小区里踢足球,我外甥也在里面。这时我看见地上有枚金戒指,急忙弯腰去捡,额……你知道的,胖人弯腰很费力,我就两腿向两侧弯曲成O 形,再弯腰,戒指还没捡起来,就听一声:射门!足球从我两腿之间穿过来,把我的眼镜都打掉了……与此同时,我摸到地上那个戒指,它是个塑料的……
化学课,老师在讲题,我同桌悄悄对我说:我觉得你对班上那XX有点意思啊。我:放屁!结果我说话声不知怎么贼大,老师当时就愣住了,然后看了看黑板说:我没讲错啊?
昨天买了一部荣耀v10,然后手机自带语音,我给我手机智能语音起了个小林同学的名字。然后老婆夜班10点到家,就问我这个语音怎么弄的,我就告诉了她。然后她也玩,想了一伙起名小朱同学。然后我们就在对着手机各自玩,一伙就听见她对着她的手机叫小林同学,喊了半天手机没反应,就问我怎么不灵啊。然后我说了句,你喊我手机干嘛……
lz女在上大学和男朋友异地。今天男友给我打电话让我用手。教我怎么做 我竟然gc了。这以后怎么办
跟他是刚认识的同事,他看到我拿lv包包,私下跟其他同事说我装b,没钱还买假货。后来他知道我家是本地人,那包包也是真的,又是各种哥前哥后,说是跟我最投缘。天晓得,那个包包是抽奖抽到的,我家是本地人没错,但是,我家是本地最穷的。
经过女同事的位置,她指着电脑问我:“你是不是有一件这样的衣服?”我看了看说:“嗯是的,想买给你老公?”她:“你上星期打麻将说先欠着我三百时,穿的就是这件衣服。”
2018我的女朋友我相信糗友的力量,不过我一直发
就现在,外面不是很热,穿短袖刚刚好,在办公室,女同事穿着厚外套,说热,空调开的温度特别低,我这一个穿短袖的,被冻成狗,此时,内心是绝望的,上天啊,谁来带走这奇葩
为什么你们都不和我做朋友
开车了,系好安全带!
耳边好像传来了一首歌“西湖美景,三月天内……”
这招好像落伍了吧[doge]
俺们村有个丫头小丽,平常跟女汉子似的,天天就爱扎男人堆里玩。有一回秋天,我们村几个男人在吹牛皮,说到天冷了,我们想去给城里的洗头房的小妹妹送温暖。小丽听了,嚷嚷着也要去。我们就逗她:你去了不是送温暖,你去那里会被冻死的。”她没听懂,我们几个男人就在一旁坏笑��
我能说美女含蓄点吗,公共场合…
去新公司面试,HR负责人问我:“”你谈过几个女朋友?”。我告诉他我老婆就是我的初恋。面试官走过来,拍拍我肩膀“你是个痴情好男人,但你不符合我们公司要求”。我不解,他紧着说道:“因为泡妞是个挑战你就挑战一次就止步不前了,说明你是个不爱挑战创新的人”
刚才送闺女去兴趣班,电梯里遇到一个五六岁的小男孩,问他怎么一个人下去?小男孩说:“妈妈让我下去尿完再午睡”“为什么不在家里尿?一个人下去多危险啊”“妈妈说我尿多,在家里尿浪费水”我……
从小我乖乖女的外表下有着一颗调皮捣蛋的心。放寒假父母去上班把我反锁在家里让我写作业,结果他们吃完午饭前脚刚走,我就翻出备用钥匙,从阳台把钥匙丢给住在隔壁的小伙伴帮我“越狱”,溜出去疯玩了整整一下午,直到父母下班时间快到了,再故技重施让小伙伴把我反锁起来,毫无破绽!谁知那天妈妈回到家,看到我像往常一样安静地坐在书桌前写作业。她盯着我看了一会儿,毫无征兆地抄起了鸡毛掸子:“在外面玩到很开心是吧?”我一惊,急忙狡辩:“没有啊,我一直在做作业!”老妈的鸡毛掸子像雨点般落下来:“你大冬天穿着单衣做作…查看全文
话接上回,上个贴子说二闷子想去他爸的裤裆里找奶水把子,被他妈发现了…………我问:你妈发现了你偷唆你爸的奶水就把你打成猪头了?“屁啊!是我被我妈突然进房里来给下尿了,伸进我爸裤衩里的手下意识的一紧…………”然后怎么样了?找到你爸的奶水把子了?“然后我就扯到了我爸裤裆里的一蓬草”(现在想想估计这二逼是抓住了他爹的鸟毛了)啥玩意啊????你爸裤裆里有草?卧槽!我又扯开自己的裤腰往裆里瞅????怎么我裤裆里就一杆…查看全文
只发图,不说话。
小时候跟着电视学会的第一句英语是“oh my god”,但是那部电视的字幕翻译很缺德,因为他是用我们生活中的习惯用语来翻译的,比如刚才这句“oh my god”,他就直接给翻译成了“卧槽”,于是我也好死不死的跟着学会了。结果第一次上英语课的时候,老师在黑板上写出“oh my god”,问我们谁会翻译的时候,我第一个站了起来……
小时候,一天,老爸下班,买回一大条驴打滚(香甜软糯),老爸切开,我和哥哥各一段。我见哥哥比我多,刚要哭,老爸拿起我那段,拉成细长,小声说:你比哥哥的长、比他多……当时,我就感觉哪里不对,直到后来学了体积……
好朋友要和他女神表白,车钥匙扔给我,让我搞点重量级,大场面的!刚才钥匙已经给他了,并且千叮咛万嘱咐,千万不要打开,这东西是一次性的,我花了好大的力气才弄出来的,全是我辛勤的汗水啊~我觉得是时候出去旅个游避个风头了~哼,谁让他昨天吃雪糕不给我带的!
这一天天的,前天大姑爷去世去参加葬礼,车钥匙折了花了七十三,,昨天表妹结婚,皮鞋底掉了,花了八十四。。。。下礼拜送亲我不敢想了。。。。。。。[大哭][大哭][大哭][大哭][大哭]
许愿树许愿树,妹子的爱情就靠你了

猜你喜欢

转载自blog.csdn.net/key_book/article/details/80313898