基于php实现七牛抓取远程图片
更新时间:2015年12月01日 10:35:34 作者:confused_man
由于公司网站之前的用户头像都是存储在自己的服务器上的,后来感觉管理不方便,新增加的用户头像都上传到了七牛,为了方便统一管理,领导说把本地服务器的头像全部迁移到了七牛
由于公司网站之前的用户头像都是存储在自己的服务器上的,后来感觉管理不方便,新增加的用户头像都上传到了七牛,为了方便统一管理,领导说把本地服务器的头像全部迁移到了七牛。
1.梳理下思路
先判断用户的头像是否在七牛,若不存在,本地如果有则抓取到七牛,然后进行批量抓取
2.七牛判断图片是否存在
/**
* 查看七牛url是否存在
* @param string $url
*/
function url_exists($url) {
require_once(COMMON_PATH."qiniu/rs.php");
require_once(COMMON_PATH."qiniu/http.php");
$parts=parse_url($url);
$bucket ;//桶
$key=substr($parts['path'], );//七牛文件名
//密钥
$accessKey ;
$secretKey ;
Qiniu_SetKeys($accessKey, $secretKey);
$client = new Qiniu_MacHttpClient(null);
list($ret, $err) = Qiniu_RS_Stat($client, $bucket, $key);//查看单个文件信息
if ($err !== null) {
return false;
} else {
return true;
}
}
3.移动单个文件到七牛
/**
* 移动单个头像到七牛
* @param string $remotePath 远程文件在服务器上的物理地址
* @param string $qiniuPath 七牛文件地址
*/
function oneFetch($remotePath,$qiniuPath){
if(!$this->url_exists($qiniuPath) && file_exists($remotePath)){
require_once(COMMON_PATH."qiniu/rs.php");
require_once(COMMON_PATH."qiniu/http.php");
require_once(COMMON_PATH."qiniu/conf.php");
$client = new Qiniu_MacHttpClient(NULL);
/*$accessUrl 远程文件访问地址
*$bucket桶
*$key 存储在七牛的文件名
*/
$ret = Qiniu_RS_Fetch($client,$accessUrl, $bucket, $key);
if($ret != NULL)
{
$errlog = 'fail.log';//写错误日志
file_put_contents($errlog, "{$key}\n", FILE_APPEND);
}
else
{
var_dump($ret);
}
}else{
var_dump('已有头像');
}
}
4.批量抓取
function t(){
header("Content-type: text/html; charset=utf-8");
set_time_limit(0);
$start = intval($_GET['num']);//开始位置
$str = '';
/*从数据库查询记录*/
$link = mysql_connect("localhost", "root", "root") or die("error");
$db_selected = mysql_select_db("test", $link);
mysql_query ("SET NAMES UTF8");
$limit = 10;//每次查询数
$sql = "SELECT * FROM test order by id desc limit {$start},{$limit}";
$result = mysql_query($sql) or die(mysql_error());
if(mysql_num_rows($result))
{
while($row=mysql_fetch_assoc($result)){
oneFetch($row['remotePath'], $row['qiniuPath']);
}
$start += 10;
$url = "/t?num={$start}";
$str = '已经更新'.$start.'条<br />';
$str .= '<script>location.href="'.$url.'";</script>';//更新$limit条,跳转防止脚本无响应
}
else
{
echo '结束';
}
echo $str;
ob_flush();
flush();
sleep(2);
unset($sql,$result,$row);
}
以上内容是基于php实现七牛抓取远程图片的全部内容,希望大家喜欢。
相关文章
CentOS下搭建PHP环境与WordPress博客程序的全流程总结
这篇文章主要介绍了CentOS下搭建PHP环境与WordPress博客程序的全流程总结,这里我们以Apache服务器程序和MySQL数据库程序为例进行讲解,需要的朋友可以参考下2016-05-05
Laravel最佳分割路由文件(routes.php)的方式
本文是一篇关于Laravel分割路由文件(routes.php)的最佳方式教程文章,内容介绍的很详细,学习Laravel的小伙伴可以参考学习。2016-08-08
windows7配置Nginx+php+mysql的详细教程
这篇文章主要介绍了windows7配置Nginx+php+mysql的详细教程 的相关资料,需要的朋友可以参考下2016-09-09
Symfony2使用第三方库Upload制作图片上传实例详解
这篇文章主要介绍了Symfony2使用第三方库Upload制作图片上传的方法,结合实例形式较为详细的分析了Symfony2使用第三方库Upload的具体步骤与相关使用技巧,需要的朋友可以参考下2016-02-02


最新评论