リクエストの爬虫類は、要求を取得します

1、シンプルなGETリクエスト

URL = 'https://www.baidu.com' 
ヘッダー= { 
    '受け入れる':「text / htmlの、アプリケーション/ XHTML + xmlの、アプリケーション/ XML、Q = 0.9、画像/ WEBP、画像/ APNG、* / * ; Q = 0.8' 、
    '符号化を受け入れる': 'GZIP、収縮、BR'、
    '言語受け入れる': 'ZH-CN、ZH; Q = 0.9を'、
    'アップグレード・安全でない、要求を': '1'、
    'ユーザーエージェント': 'のMozilla / 5.0(Windows NTの10.0; WOW64)のAppleWebKit / 537.36(ヤモリのようにKHTML、)クローム/ 65.0.3325.181サファリ/ 537.36'、 'クッキー': 'XXX、YYY、ZZZ'、 'リファラ': 'httpsを://xxx.yyy.zzz' 
} 

#发起取得请求
応答= requests.get(URL、ヘッダ=ヘッダ、= Trueの検証)
#获取HTML文本
html_data = response.contentを。デコード() 
プリント(html_data)
プリント(LEN(html_data))

  

おすすめ

転載: www.cnblogs.com/andy9468/p/11492910.html