pyspider 爬虫爬360职位时一些知识

想爬360职位的技术一栏的职位,目前没有找到合适的办法

打开netbook看到点击技术的响应栏,看到query string parameters,一栏,搜索得到如下知识点。但是并没有解决问题。



query string parametersGET请求,formdataPOST请求。 请求的时候有点差别,比如:

#对GET:
url = 'http://www.example.com
data ={
    a: b,
}
get_url = url + urllib.urlencode(data)
urllib2.urlopen(urllib2.Request(get_url)

#对于POST
url = 'http://www.example.com
data={
    a: b
}
urllib2.urllopen(urllib2.Request(url, data=data)

# 对于GET+POST的, 直接把POST的url 改为 urlencode之后的,即可

猜你喜欢

转载自blog.csdn.net/bella8102/article/details/80040992
今日推荐