思路
1. 分析目标网页,确定爬取的 url 路径
2. 发送请求 requests 模拟浏览器发送请求,获取响应数据
3. 解析数据
4. 保存数据
使用谷歌浏览器
- 打开王者荣耀官网
- 找到英雄资料
- 调出检查工具
- 点击network
- 选择XHR过滤器(服务器与客户端交互的数据会放在XHR过滤器中)
- 点击重新加载,可以看到herolist.json文件
- 双击下载
- 下载后可以看到里边的数据整体来说是列表类型的,其中的每一个元素是字典类型的(键值对)
1. 分析目标网页,确定爬取的 url 路径
2. 发送请求 requests 模拟浏览器发送请求,获取响应数据
3. 解析数据
4. 保存数据
使用谷歌浏览器