Pythonの爬虫類の要求ライブラリ - アマゾン商品ページのクロール

これがあるので、アマゾンによって引き起こさ爬虫類にアクセスするためのブラウザがアクセスを拒否しました。だから、ユーザーエージェントは、標準ブラウザのMozilla / 5.0に変更されました取ります

import requests

url="https://www.amazon.cn/gp/product/B01M8L5Z3Y"
try:
    kv={'user-agent':'Mozilla/5.0'}
    r=requests.get(url,headers=kv)
    r.raise_for_status()
    r.encoding=r.apparent_encoding
    print(r.text[1000:2000])
except:
    print("爬取失败")