PHP获取Cookie模拟登录CURL

PHP获取Cookie模拟登录CURL

来源:PHP100中文网 时间:2013-09-12 07:57:44 阅读数:129077
分享到:17
[导读] 要提取google搜索的部分数据,发现google对于软件抓取它的数据屏蔽的厉害,以前伪造下 USER-AGENT就可以抓数据,但是现在却不行了。利用抓包数据发现,Google判断了cookies,当你没有cookies的时候,直接返回30

要提取google搜索的部分数据,发现google对于软件抓取它的数据屏蔽的厉害,以前伪造下 USER-AGENT 就可以抓数据,但是现在却不行了。利用抓包数据发现,Google 判断了 cookies,当你没有cookies的时候,直接返回 302 跳转,而且是连续几十个302跳转,根本抓不了数据。

因此,在发送搜索命令时,需要先提取 cookies 并保存,然后利用保存下来的这个cookies再次发送搜索命令即可正常抓数据了。这其实和论坛的模拟登录一个道理,先POST登录,获取cookies并保存,然后利用这个cookies访问就可以了。

一、定义Cookie存储路径

必须使用绝对路径

view sourceprint?
1.$cookie_jar = dirname(FILE)."/pic.cookie";

二、获取Cookie

将cookie存入文件

view sourceprint?
1. u r l = " h t t p : / / 1.2.3.4 / " ; 2. url = "http://1.2.3.4/"; 2. ch = curl_init();
3.curl_setopt($ch, CURLOPT_URL, u r l ) ; 4. c u r l s e t o p t ( url); 4.curl_setopt( ch, CURLOPT_HEADER, 0);
5.curl_setopt( c h , C U R L O P T R E T U R N T R A N S F E R , t r u e ) ; 6. c u r l s e t o p t ( ch, CURLOPT_RETURNTRANSFER, true); 6.curl_setopt( ch, CURLOPT_COOKIEJAR, c o o k i e j a r ) ; 7. cookie_jar); 7. content = curl_exec( c h ) ; 8. c u r l c l o s e ( ch); 8.curl_close( ch);

三、模拟浏览器获取验证码

该服务器验证码有漏洞,可以自己指定

取出cookie,一起提交给服务器,让服务器以为是浏览器打开登陆页面

view sourceprint?
1. c h = c u r l i n i t ( ) ; 2. c u r l s e t o p t ( ch = curl_init(); 2.curl_setopt( ch, CURLOPT_URL, ‘http://1.2.3.4/getCheckpic.action?rand=6836.185874812305’);
3.curl_setopt($ch, CURLOPT_COOKIEFILE, c o o k i e j a r ) ; 4. c u r l s e t o p t ( cookie_jar); 4.curl_setopt( ch, CURLOPT_HEADER, 0);
5.curl_setopt( c h , C U R L O P T R E T U R N T R A N S F E R , 1 ) ; 6. ch, CURLOPT_RETURNTRANSFER, 1); 6. ret = curl_exec( c h ) ; 7. c u r l c l o s e ( ch); 7.curl_close( ch);

四、POST提交

view sourceprint?
01.KaTeX parse error: Expected 'EOF', got '&' at position 15: post = "name=2&̲userType=1&pass…ch = curl_init();
03.curl_setopt( c h , C U R L O P T U R L , " h t t p : / / 1.2.3.4 / l o g i n s t u d e n t . a c t i o n " ) ; 04. c u r l s e t o p t ( ch, CURLOPT_URL, "http://1.2.3.4/loginstudent.action"); 04.curl_setopt( ch, CURLOPT_HEADER, false);
05.curl_setopt( c h , C U R L O P T R E T U R N T R A N S F E R , 1 ) ; 06. c u r l s e t o p t ( ch, CURLOPT_RETURNTRANSFER,1); 06.curl_setopt( ch, CURLOPT_POSTFIELDS, p o s t ) ; 07. c u r l s e t o p t ( post); 07.curl_setopt( ch, CURLOPT_COOKIEFILE, c o o k i e j a r ) ; 08. cookie_jar); 08. result=curl_exec( c h ) ; 09. c u r l c l o s e ( ch); 09.curl_close( ch);

五、到指定页面获取数据

view sourceprint?
01. c h = c u r l i n i t ( ) ; 02. c u r l s e t o p t ( ch = curl_init(); 02.curl_setopt( ch, CURLOPT_URL, “http://1.2.3.4/accountcardUser.action”);
03.curl_setopt( c h , C U R L O P T H E A D E R , f a l s e ) ; 04. c u r l s e t o p t ( ch, CURLOPT_HEADER, false); 04.curl_setopt( ch, CURLOPT_HEADER, 0);
05.curl_setopt( c h , C U R L O P T R E T U R N T R A N S F E R , 0 ) ; 06. c u r l s e t o p t ( ch, CURLOPT_RETURNTRANSFER,0); 06.curl_setopt( ch, CURLOPT_COOKIEFILE, c o o k i e j a r ) ; 07. cookie_jar); 07. html=curl_exec( c h ) ; 08. / / v a r d u m p ( ch); 08.// var_dump( html);
09.curl_close($ch);PHP获取Cookie模拟登录CURL

来源:PHP100中文网 时间:2013-09-12 07:57:44 阅读数:129077
分享到:17
[导读] 要提取google搜索的部分数据,发现google对于软件抓取它的数据屏蔽的厉害,以前伪造下 USER-AGENT就可以抓数据,但是现在却不行了。利用抓包数据发现,Google判断了cookies,当你没有cookies的时候,直接返回30

要提取google搜索的部分数据,发现google对于软件抓取它的数据屏蔽的厉害,以前伪造下 USER-AGENT 就可以抓数据,但是现在却不行了。利用抓包数据发现,Google 判断了 cookies,当你没有cookies的时候,直接返回 302 跳转,而且是连续几十个302跳转,根本抓不了数据。

因此,在发送搜索命令时,需要先提取 cookies 并保存,然后利用保存下来的这个cookies再次发送搜索命令即可正常抓数据了。这其实和论坛的模拟登录一个道理,先POST登录,获取cookies并保存,然后利用这个cookies访问就可以了。

一、定义Cookie存储路径

必须使用绝对路径

view sourceprint?
1.$cookie_jar = dirname(FILE)."/pic.cookie";

二、获取Cookie

将cookie存入文件

view sourceprint?
1. u r l = " h t t p : / / 1.2.3.4 / " ; 2. url = "http://1.2.3.4/"; 2. ch = curl_init();
3.curl_setopt($ch, CURLOPT_URL, u r l ) ; 4. c u r l s e t o p t ( url); 4.curl_setopt( ch, CURLOPT_HEADER, 0);
5.curl_setopt( c h , C U R L O P T R E T U R N T R A N S F E R , t r u e ) ; 6. c u r l s e t o p t ( ch, CURLOPT_RETURNTRANSFER, true); 6.curl_setopt( ch, CURLOPT_COOKIEJAR, c o o k i e j a r ) ; 7. cookie_jar); 7. content = curl_exec( c h ) ; 8. c u r l c l o s e ( ch); 8.curl_close( ch);

三、模拟浏览器获取验证码

该服务器验证码有漏洞,可以自己指定

取出cookie,一起提交给服务器,让服务器以为是浏览器打开登陆页面

view sourceprint?
1. c h = c u r l i n i t ( ) ; 2. c u r l s e t o p t ( ch = curl_init(); 2.curl_setopt( ch, CURLOPT_URL, ‘http://1.2.3.4/getCheckpic.action?rand=6836.185874812305’);
3.curl_setopt($ch, CURLOPT_COOKIEFILE, c o o k i e j a r ) ; 4. c u r l s e t o p t ( cookie_jar); 4.curl_setopt( ch, CURLOPT_HEADER, 0);
5.curl_setopt( c h , C U R L O P T R E T U R N T R A N S F E R , 1 ) ; 6. ch, CURLOPT_RETURNTRANSFER, 1); 6. ret = curl_exec( c h ) ; 7. c u r l c l o s e ( ch); 7.curl_close( ch);

四、POST提交

view sourceprint?
01.KaTeX parse error: Expected 'EOF', got '&' at position 15: post = "name=2&̲userType=1&pass…ch = curl_init();
03.curl_setopt( c h , C U R L O P T U R L , " h t t p : / / 1.2.3.4 / l o g i n s t u d e n t . a c t i o n " ) ; 04. c u r l s e t o p t ( ch, CURLOPT_URL, "http://1.2.3.4/loginstudent.action"); 04.curl_setopt( ch, CURLOPT_HEADER, false);
05.curl_setopt( c h , C U R L O P T R E T U R N T R A N S F E R , 1 ) ; 06. c u r l s e t o p t ( ch, CURLOPT_RETURNTRANSFER,1); 06.curl_setopt( ch, CURLOPT_POSTFIELDS, p o s t ) ; 07. c u r l s e t o p t ( post); 07.curl_setopt( ch, CURLOPT_COOKIEFILE, c o o k i e j a r ) ; 08. cookie_jar); 08. result=curl_exec( c h ) ; 09. c u r l c l o s e ( ch); 09.curl_close( ch);

五、到指定页面获取数据

view sourceprint?
01. c h = c u r l i n i t ( ) ; 02. c u r l s e t o p t ( ch = curl_init(); 02.curl_setopt( ch, CURLOPT_URL, "
03.curl_setopt( c h , C U R L O P T H E A D E R , f a l s e ) ; 04. c u r l s e t o p t ( ch, CURLOPT_HEADER, false); 04.curl_setopt( ch, CURLOPT_HEADER, 0);
05.curl_setopt( c h , C U R L O P T R E T U R N T R A N S F E R , 0 ) ; 06. c u r l s e t o p t ( ch, CURLOPT_RETURNTRANSFER,0); 06.curl_setopt( ch, CURLOPT_COOKIEFILE, c o o k i e j a r ) ; 07. cookie_jar); 07. html=curl_exec( c h ) ; 08. / / v a r d u m p ( ch); 08.// var_dump( html);
09.curl_close($ch);

http://lf.pzi.cn/

猜你喜欢

转载自blog.csdn.net/a15732111571/article/details/88950462