Pythonの爬虫類の要求ライブラリ - 提出Baiduの/ 360検索キーワード

1、Baiduのキーワード提出

MOOCコードに従い、教師がキーワードを提出する場合は、我々はセキュリティ認証のBaidu満たします
私たちは、ブラウザを開き、Pythonの検索を、以下の結果が
ここに画像を挿入説明
観測されたURLの機能は、コードを書き始めるました

import requests

try:
    # kv={'wd':'python'}
    kv ={'ie':'utf-8','wd': 'Python','p_timestamp':'1583634916'}
    ua = {'user-agent': 'Mozilla/5.0 (Windows NT 6.2) AppleWebKit/536.3 (KHTML, like Gecko) Chrome/19.0.1062.0 Safari/536.3'}
    r=requests.get("http://www.baidu.com/s",headers=ua,params=kv)
    print(r.request.url)
    r.raise_for_status()
    print(len(r.text))
except:
    print("爬取失败")

2360個のキーワードが提出します

いいえ、セキュリティの検証は360個のキーワードを提出していない、キーワードを直接提出することができます

import requests

keyword="Python"
try:
    kv={'q':keyword}
    r=requests.get('http://www.so.com/s',params=kv)
    print(r.request.url)
    r.raise_for_status()
    print(len(r.text))
except:
    print("爬取失败")
リリース7件のオリジナルの記事 ウォンの賞賛0 ビュー18

おすすめ

転載: blog.csdn.net/qq_44838702/article/details/104984489