Python爬虫入门实例一之淘宝商品页面的爬取

1.爬取原界面

  今天给大家介绍第一个爬虫小例子，使用requests库爬取淘宝商品信息，首先想要爬取的内容如下图。

2.代码解析

  使用交互环境给大家带来代码解析

（1）首相导入requests库，然后将网页url地址保存到变量中

（2）使用requests库的get()方法得到地址，并用r.raise_for_status函数判断是否连接正常，正常则返回200，其他值则为错误

（3）将从网页内容中解析出的编码方式赋值给r.encoding，之后以字符串的方式将爬取内容输出

（4）输出内容如下

3.完整代码

import requests
url = "https://item.taobao.com/item.htm?id=625588903252&ali_refid=a3_430673_1006:1123185872:N:5Li%2BA5zGU7Aqz5docyZENQ%3D%3D:6620fa14ff820a1fe33c8d19bbbd1752&ali_trackid=1_6620fa14ff820a1fe33c8d19bbbd1752&spm=a2e15.8261149.07626516002.2"
try:
    r = requests.get(url)
    r.raise_for_status()
    r.encoding = r.apparent_encoding
    print(r.text)
except:
    print("爬取失败")

  所有编程实践中，代码最终的效果固然很重要，但更重要的还是代码的稳定性，所以使用try except代码块捕获异常

  本篇完，如有错误欢迎指出~

扫描二维码关注公众号，回复： 12083226 查看本文章

引用源自

中国大学MOOC Python网络爬虫与信息提取
https://www.icourse163.org/course/BIT-1001870001