PHP按行读取、处理较大CSV文件的代码实例
更新时间：2014年04月09日 11:59:15 作者：
这篇文章主要介绍了PHP按行读取、处理较大CSV文件的代码实例,需要的朋友可以参考下
对于数百万条数据量的CSV文件，文件大小可能达到数百M，如果简单读取的话很可能出现超时或者卡死的现象。
为了成功将CSV文件里的数据导入数据库，分批处理是非常必要的。
下面这个函数是读取CSV文件中指定的某几行数据：
复制代码 代码如下:
/**
* csv_get_lines 读取CSV文件中的某几行数据
* @param $csvfile csv文件路径
* @param $lines 读取行数
* @param $offset 起始行数
* @return array
* */
function csv_get_lines($csvfile, $lines, $offset = 0) {
if(!$fp = fopen($csvfile, 'r')) {
return false;
}
$i = $j = 0;
while (false !== ($line = fgets($fp))) {
if($i++ < $offset) {
continue;
}
break;
}
$data = array();
while(($j++ < $lines) && !feof($fp)) {
$data[] = fgetcsv($fp);
}
fclose($fp);
return $data;
}
调用方法：
复制代码 代码如下:
$data = csv_get_lines('path/bigfile.csv', 10, 2000000);
print_r($data);
函数主要采用行定位的思路，通过跳过起始行数来实现文件指针定位。
上述函数对500M以内的文件进行过测试，运行通畅，对于更大的文件未做测试，请斟酌使用或加以改进。
相关文章
下面小编就为大家带来一篇PHP加密技术的简单实现。小编觉得挺不错的，现在就分享给大家，也给大家做个参考。一起跟随小编过来看看吧2016-09-09
这篇文章主要介绍了Yii2中添加全局函数的方法,结合实例形式对比分析了2种添加全局函数的实现技巧,需要的朋友可以参考下2017-05-05
对于ThinkPHP框架早期版本的一个SQL注入漏洞详细分析
这篇文章主要介绍了对于ThinkPHP框架早期版本的一个SQL注入漏洞详细分析，对于网站安全十分重要！需要的朋友可以参考下2014-07-07
这篇文章主要介绍了CI框架网页缓存简单用法,结合实例形式分析了CI框架网页缓存的原理,以及开启缓存、删除缓存等操作技巧,需要的朋友可以参考下2018-12-12
今天小编就为大家分享一篇基于Laravel 多个中间件的执行顺序详解，具有很好的参考价值，希望对大家有所帮助。一起跟随小编过来看看吧2019-10-10
这篇文章主要介绍了Thinkphp整合微信支付功能的相关资料,非常不错，具有参考借鉴价值，需要的朋友可以参考下2016-12-12
这篇文章主要给大家介绍了关于php如何根据IP获取当前经纬度以及地域信息的相关资料,文中通过实例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要的朋友可以参考下2022-01-01
这篇文章主要介绍了PHP8.0新功能之Match表达式的使用，文中通过示例代码以及图文介绍的非常详细，对大家的学习或者工作具有一定的参考学习价值，需要的朋友们下面来一起学习学习吧2020-07-07
PHP中的empty、isset、isnull的区别与使用实例
今天小编就为大家分享一篇关于PHP中的empty、isset、isnull的区别与使用实例，小编觉得内容挺不错的，现在分享给大家，具有很好的参考价值，需要的朋友一起跟随小编来看看吧2019-03-03
这篇文章主要介绍了ThinkPHP模板循环输出Volist标签用法,结合实例形式详细分析了Volist标签的功能,使用方法与相关注意事项,需要的朋友可以参考下2016-03-03
最新评论