1、Baiduのキーワード提出
MOOCコードに従い、教師がキーワードを提出する場合は、我々はセキュリティ認証のBaidu満たします
私たちは、ブラウザを開き、Pythonの検索を、以下の結果が
観測されたURLの機能は、コードを書き始めるました
import requests
try:
# kv={'wd':'python'}
kv ={'ie':'utf-8','wd': 'Python','p_timestamp':'1583634916'}
ua = {'user-agent': 'Mozilla/5.0 (Windows NT 6.2) AppleWebKit/536.3 (KHTML, like Gecko) Chrome/19.0.1062.0 Safari/536.3'}
r=requests.get("http://www.baidu.com/s",headers=ua,params=kv)
print(r.request.url)
r.raise_for_status()
print(len(r.text))
except:
print("爬取失败")
2360個のキーワードが提出します
いいえ、セキュリティの検証は360個のキーワードを提出していない、キーワードを直接提出することができます
import requests
keyword="Python"
try:
kv={'q':keyword}
r=requests.get('http://www.so.com/s',params=kv)
print(r.request.url)
r.raise_for_status()
print(len(r.text))
except:
print("爬取失败")