php使用file函数、fseek函数读取大文件效率对比分析

只看该作者 · 发表于 2018-2-14 05:31:08

         php读取大文件可以使用file函数和fseek函数，但是二者之间效率可能存在差异，本文章向大家介绍php file函数与fseek函数实现大文件读取效率对比分析，需要的朋友可以参考一下。
1. 直接采用file函数来操作
由于 file函数是一次性将所有内容读入内存，而PHP为了防止一些写的比较糟糕的程序占用太多的内存而导致系统内存不足，使服务器出现宕机，所以默认情况下限制只能最大使用内存16M,这是通过php.ini里的 memory_limit = 16M 来进行设置，这个值如果设置-1，则内存使用量不受限制。
下面是一段用file来取出这具文件最后一行的代码：
整个代码执行完成耗时 116.9613 (s)。
我机器是2个G的内存，当按下F5运行时，系统直接变灰，差不多20分钟后才恢复过来，可见将这么大的文件全部直接读入内存，后果是多少严重，所以不在万不得以，memory_limit这东西不能调得太高，否则只有打电话给机房，让reset机器了。
2.直接使用PHP的 fseek 来进行文件操作
这种方式是最为普遍的方式，它不需要将文件的内容全部读入内容，而是直接通过指针来操作，所以效率是相当高效的。在使用fseek来对文件进行操作时，也有多种不同的方法，效率可能也是略有差别的，下面是常用的两种方法：
方法一
首先通过fseek找到文件的最后一位EOF，然后找最后一行的起始位置，取这一行的数据，再找次一行的起始位置，再取这一行的位置，依次类推，直到找到了$num行。
实现代码如下
0)
  {
while ($t != "\n")
{
   fseek($fp, $pos, SEEK_END);
   $t = fgetc($fp);
   $pos--;
}// http://www.manongjc.com
$t = " ";
$data .= fgets($fp);
$line--;
  }
  fclose($fp);
  echo $data
  ?>
整个代码执行完成耗时 0.0095 (s)
方法二
还是采用fseek的方式从文件最后开始读，但这时不是一位一位的读，而是一块一块的读，每读一块数据时，就将读取后的数据放在一个buf里，然后通过换行符(\n)的个数来判断是否已经读完最后$num行数据。
实现代码如下
$chunk) ? $chunk : $max - $len;
fseek($fp, ($len + $seekSize) * -1, SEEK_END);
$readData = fread($fp, $seekSize) . $readData;
if (substr_count($readData, "\n") >= $num + 1)
{
   // 作者：码农教程  http://www.manongjc.com
   preg_match("!(.*?\n){" . ($num) . "}$!", $readData, $match);
   $data = $match[0];
   break;
}
  }
  fclose($fp);
  echo $data;
  ?>
整个代码执行完成耗时 0.0009(s)。
方法三
0);
$pos = $n + 1;
$lines = array();
while (count($lines)
整个代码执行完成耗时 0.0003(s)
以上就是本文的全部内容，希望对大家的学习有所帮助，也希望大家多多支持脚本之家。


您可能感兴趣的文章:

PHP之将POST数据转化为字符串的实现代码

PHP获取访问页面HTTP状态码的实现代码

前端实现文件的断点续传(前端文件提交+后端PHP文件接收)

PHP利用超级全局变量$_POST来接收表单数据的实例

PHP利用超级全局变量$_GET来接收表单数据的实例

PHP中获取文件创建日期、修改日期、访问时间的方法

PHP数组的定义、初始化和数组元素的显示实现代码

PHP运行模式汇总

深入了解PHP中的Array数组和foreach

php 时间time与日期date之间的使用详解及区别

php使用FFmpeg接口获取视频的播放时长、码率、缩略图以及创建时间

php实现的http请求封装示例