Python爬虫入门教程 89-100 定个小目标，先用Python爬个一亿B站用户 - 代码天地

Python爬虫入门教程 89-100 定个小目标，先用Python爬个一亿B站用户

企业开发 2020-09-13 10:42:48 阅读次数: 0

梦想橡皮擦：2020年B站知名度越来越高，用户数量越来越多，作为一个爬虫爱好者，爬取一些用户信息过来做测试，美滋滋~ 声明一下，用户在我电脑存储2个小时就删除了，只供学习使用。

定个小目标，先用Python爬个一亿B站用户目录

写在前面

今天这篇博客单纯练习爬虫的点不多，就是requests抓取数据，顺带增加一个切换IP的操作，对于我们坚持到现在的学习者来说，非常简单，不过本篇博客，顺带着练习使用一下sqlite3数据存储。

思路的来源依旧是Web爬取不了就爬取移动端网页，B站的个人中心页在手机端打开如下图所示

猜你喜欢

转载自blog.csdn.net/hihell/article/details/108513271

Python爬虫入门教程 89-100 定个小目标，先用Python爬个一亿B站用户

Python爬虫入门教程 71-100 续上篇，python爬虫爬取B站视频

Python爬虫入门教程 73-100 Python分布式爬虫顶级教程

Python爬虫入门教程 34-100 掘金网全站用户爬虫 scrapy

Python爬虫入门教程 35-100 知乎网全站用户爬虫 scrapy

Python爬虫入门教程 80-100 Python 玩转NewSpaper爬虫框架

Python爬虫入门教程 99-100 Python爬虫在线服务大全

Python爬虫入门教程 50-100 Python3爬虫爬取VIP视频-Python爬虫6操作

Python爬虫入门教程 68-100 一招解决爬虫程序卡死问题

Python爬虫入门教程 84-100 通过＜老家伙＞spiderkeeper运行scrapy爬虫

Python爬虫入门教程 82-100 在windows搭建scrapyd跑scrapy爬虫

Python爬虫入门教程 78-100 用Scrapy+BloomFilter再写个增量爬虫

Python爬虫入门教程 77-100 增量爬虫不得不说的故事

Python爬虫入门教程 76-100 用Celery继续搞定分布式爬虫

Python爬虫入门教程 8-100 蜂鸟网图片爬取之三

Python爬虫入门教程 5-100 27270图片爬取

Python爬虫入门教程 7-100 蜂鸟网图片爬取之二

Python爬虫入门教程 6-100 蜂鸟网图片爬取之一

Python爬虫入门教程 3-100 美空网数据爬取

Python爬虫入门教程 4-100 美空网未登录图片爬取

Python爬虫入门教程 10-100 图虫网多线程爬取

Python爬虫入门教程 12-100 半次元COS图爬取

Python爬虫入门教程 14-100 All IT eBooks多线程爬取

Python爬虫入门教程 10-100 图虫网多线程爬取！

Python爬虫入门教程 2-100 妹子图网站爬取

Python爬虫入门教程 15-100 石家庄政民互动数据爬取

Python爬虫入门教程 100-100 我用了800天，才成为爬虫领域的一个新人

Python爬虫入门教程 91-100 帮粉丝写Python爬虫之【河北单招学校信息爬虫】

Python爬虫入门教程 74-100 Python分布式夯实，夯实，还是**夯实

Python爬虫入门教程 87-100 glidedsky网站爬虫解析，爬虫闯关第一篇

今日推荐

基于大语言模型的开源知识库问答系统 MaxKB GitHub Star 数量突破 5,000 个！

美国拟限制 AI 大模型出口中国和俄罗斯

苹果将与 OpenAI 达成协议，将 ChatGPT 应用于 iPhone

openKylin 社区生态委员会第六次会议圆满召开

阿里云正式发布通义千问 2.5

Python 3.13 发布首个 Beta：实验性自由线程模式和 JIT、改进交互式解释器

Stack Overflow 拿我的代码去训练 AI 大模型，还封了我的账号

Pop!_OS 的 COSMIC 桌面完成 App Store 上架工作

《2024 年一季度互联网投融资运行情况》研究报告

报告：Django 仍然是 74% 开发者的首选

15 年前上了“FFmpeg 耻辱柱”，今天他还得谢谢咱——腾讯QQPlayer一雪前耻？

TIOBE 5 月榜单：Fortran “复活”进入 Top 10

周排行

记一下去大梅沙的准备（2018-05-26）

Spring 注解事务

基于HTTP协议的客户端缓存

阿里云rds 备份和还原

[PHP] 几个拖慢 PHP 程序/API 运行速度的点

python 代码风格------------PEP8规则

js控制json生成菜单——自制菜单（一）

将字符串: 'k:1|k1:2|k2:3|k3:4 ' ,处理成 python 字典: {'k':1, 'k1':2, ...}

微信小程序转支付宝小程序

Qt551.窗口滚动条

每日归档

更多

2024-05-13(18)

2024-05-12(0)

2024-05-11(38)

2024-05-10(38)

2024-05-09(35)

2024-05-08(42)

2024-05-07(14)

2024-05-06(40)

2024-05-05(0)

2024-05-04(7)