博客
关于我
强烈建议你试试无所不能的chatGPT,快点击我
PHP获取Cookie模拟登录CURL
阅读量:4355 次
发布时间:2019-06-07

本文共 1837 字,大约阅读时间需要 6 分钟。

要提取google搜索的部分数据,发现google对于软件抓取它的数据屏蔽的厉害,以前伪造下 USER-AGENT 就可以抓数据,但是现在却不行了。利用抓包数据发现,Google 判断了 cookies,当你没有cookies的时候,直接返回 302 跳转,而且是连续几十个302跳转,根本抓不了数据。

因此,在发送搜索命令时,需要先提取 cookies 并保存,然后利用保存下来的这个cookies再次发送搜索命令即可正常抓数据了。这其实和论坛的模拟登录一个道理,先POST登录,获取cookies并保存,然后利用这个cookies访问就可以了。

 

一、定义Cookie存储路径
必须使用绝对路径

 
1.
$cookie_jar = dirname(__FILE__)."/pic.cookie";

二、获取Cookie
将cookie存入文件

 
1.
$url "";
2.
$ch = curl_init();
3.
curl_setopt($ch, CURLOPT_URL, $url);
4.
curl_setopt($ch, CURLOPT_HEADER, 0);
5.
curl_setopt($ch, CURLOPT_RETURNTRANSFER, true);
6.
curl_setopt($ch, CURLOPT_COOKIEJAR, $cookie_jar);
7.
$content = curl_exec($ch);
8.
curl_close($ch);

三、模拟浏览器获取验证码
该服务器验证码有漏洞,可以自己指定
取出cookie,一起提交给服务器,让服务器以为是浏览器打开登陆页面

 
1.
$ch = curl_init();
2.
curl_setopt($ch, CURLOPT_URL, '');
3.
curl_setopt($ch, CURLOPT_COOKIEFILE, $cookie_jar);
4.
curl_setopt($ch, CURLOPT_HEADER, 0);
5.
curl_setopt($ch, CURLOPT_RETURNTRANSFER, 1);
6.
$ret = curl_exec($ch);
7.
curl_close($ch);

四、POST提交

 
01.
$post ="name=2&userType=1&passwd=asdf&loginType=1&rand=6836&imageField.x=25&imageField.y=7";   
02.
$ch = curl_init();
03.
curl_setopt($ch, CURLOPT_URL, "");
04.
curl_setopt($ch, CURLOPT_HEADER, false);
05.
curl_setopt($ch, CURLOPT_RETURNTRANSFER,1);
06.
curl_setopt($ch, CURLOPT_POSTFIELDS, $post);
07.
curl_setopt($ch, CURLOPT_COOKIEFILE, $cookie_jar);
08.
$result=curl_exec($ch);
09.
curl_close($ch);

五、到指定页面获取数据

 
01.
$ch = curl_init();
02.
curl_setopt($ch, CURLOPT_URL, "");
03.
curl_setopt($ch, CURLOPT_HEADER, false);
04.
curl_setopt($ch, CURLOPT_HEADER, 0);
05.
curl_setopt($ch, CURLOPT_RETURNTRANSFER,0);       
06.
curl_setopt($ch, CURLOPT_COOKIEFILE, $cookie_jar);
07.
$html=curl_exec($ch);
08.
// var_dump($html);
09.
curl_close($ch);
 

大家在累了的时候,就躺在床上拿着手机看片把 http://www.530312.net  吧!

 

手机版在线观看:http://m.530312.net   手机看片

转载于:https://www.cnblogs.com/xieemanhua/p/3771597.html

你可能感兴趣的文章
day2-三级菜单
查看>>
java retry_java里面的retry:
查看>>
linux下升级4.5.1版本gcc
查看>>
Beanutils
查看>>
FastJson
查看>>
excel4j
查看>>
Thread
查看>>
HtmlEmail
查看>>
ThreadLocal
查看>>
线程池
查看>>
XMAL 中x名称控件的Auttribute
查看>>
java笔记11-内部类
查看>>
基本数据类型
查看>>
BZOJ 1004 [HNOI2008]Cards
查看>>
[POJ 2689] Prime Distance
查看>>
[ 原创 ] Linux下查找指定类型文件以及删除
查看>>
win10环境下jdk1.8+Android Developer Tools Build: v22.3.0-887826的问题
查看>>
对于测试流程的阶段性总结
查看>>
python redis使用
查看>>
sql时间日期函数格式转换
查看>>