requests使用ip代理

主要思路

import requests

proxies = {
  "http": "http://10.10.1.10:3128",
  "https": "http://10.10.1.10:1080",
}

requests.get("http://example.org", proxies=proxies)

代理ip的网站 http://www.xicidaili.com/

需要注意的是，你爬取的网站是https还是http要找对应的代理ip不然会出错