PHP curl实现抓取302跳转后页面的示例
更新时间：2014年07月04日 10:43:25 投稿：junjie
这篇文章主要介绍了PHP curl实现抓取302跳转后页面的示例,主要是对CURLOPT_CUSTOMREQUEST参数的运用,需要的朋友可以参考下
PHP的CURL正常抓取页面程序如下：
$url = 'http://www.baidu.com'; $ch = curl_init(); curl_setopt($ch, CURLOPT_URL, $url); curl_setopt($ch, CURLOPT_VERBOSE, true); curl_setopt($ch, CURLOPT_HEADER, true); curl_setopt($ch, CURLOPT_NOBODY, true); curl_setopt($ch, CURLOPT_CUSTOMREQUEST, 'GET'); curl_setopt($ch, CURLOPT_RETURNTRANSFER, true); curl_setopt($ch, CURLOPT_TIMEOUT, 20); curl_setopt($ch, CURLOPT_AUTOREFERER, true); curl_setopt($ch, CURLOPT_FOLLOWLOCATION, true); $ret = curl_exec($ch); $info = curl_getinfo($ch); curl_close($ch);
如果你抓取到的是302状态，是因为再抓取的过程中，有的跳转需要给下一个链接传递参数，而下一个链接同时也设置了如果没接收到相应的参数是为非法访问。
curl_setopt($curl, CURLOPT_CUSTOMREQUEST, 'GET');
显示就应该正常了。
上面用来抓取功能，几乎应该没问题的。你可以查一下CURLOPT_CUSTOMREQUEST相关资料。
使用一个自定义的请求信息来代替”GET”或”HEAD”作为HTTP请求。这对于执行”DELETE” 或者其他更隐蔽的HTTP请求。有效值如”GET”，”POST”，”CONNECT”等等。也就是说，不要在这里输入整个HTTP请求。例如输入”GET /index.html HTTP/1.0\r\n\r\n”是不正确的。
相关文章
windows环境下使用Composer安装ThinkPHP5
本文给大家分享的是在windows环境下使用Composer安装ThinkPHP5的具体步骤和方法，非常的简单实用，有需要的小伙伴可以参考下2018-05-05
这篇文章主要介绍了YII关联查询的相关资料,需要的朋友可以参考下2016-01-01
下面小编就为大家带来一篇PHP调试及性能分析工具Xdebug详解。小编觉得挺不错的，现在就分享给大家，也给大家做个参考。一起跟随小编过来看看吧2017-02-02
本篇文章主要介绍了PHP实现微信红包金额拆分试玩的算法示例，小编觉得挺不错的，现在分享给大家，也给大家做个参考。一起跟随小编过来看看吧2018-04-04
下面小编就为大家带来一篇php读取qqwry.dat ip地址定位文件的类实例代码。小编觉得挺不错的，现在就分享给大家，也给大家做个参考。一起跟随小编过来看看吧2016-11-11
这篇文章主要介绍了使用php获取bing每日壁纸的示例,需要的朋友可以参考下2014-02-02
这篇文章主要介绍了DEDE实现转跳属性文档在模板上调用出转跳地址，有需要的朋友可以参考一下。2016-11-11
PHP仿qq空间或朋友圈发布动态、评论动态、回复评论、删除动态或评论的功能（上）
我们大部分人都发过动态，想必都知道发动态、回复评论、删除动态的整个过程，那么这个功能是如何实现的呢？下面小编给大家带来了实例代码，对PHP仿qq空间或朋友圈发布动态、评论动态、回复评论、删除动态或评论的功能感兴趣的朋友，一起学习吧2017-05-05
这篇文章主要介绍了Laravel 6 将新增为指定队列任务设置中间件的功能,本文给大家介绍的非常详细，具有一定的参考借鉴价值，需要的朋友可以参考下2019-08-08
这篇文章主要介绍了thinkphp5框架前后端分离项目实现分页功能的方法,结合实例形式分析了thinkPHP5前后端分离项目的分页功能常见实现技巧与操作注意事项,需要的朋友可以参考下2019-10-10
最新评论