最适合新手上手的爬虫项目!requests的用法最全合集!

然后我们在知乎搜索框内输入需要搜索的内容,你将会看到网页后台与前台数据交互的变化,加载的数据以及数据请求的方式和参数。如图1.2:

多了一个search的请求文件,我们点开和第一个对比发现,offset字段从0变成了10。我们复制一下这里的url在新开的标签页粘贴后,发现如图1.5:

扫描二维码关注公众号,回复: 892356 查看本文章

好了第一层我们差不多做好了,进入网站第二层,随意点击一个我们搜索产生的内容标题,跳转至一个新的页面,我们用同样的方法,观察第二层我们与服务端交互的信息 如图 1.6:

(2) 文章样式提取数据

(3)问答模板提取数据

欢迎大家关注我的博客:http://www.cnblogs.com/sm123456/

猜你喜欢

转载自blog.csdn.net/qq_42156420/article/details/80350018