PHP快速读取大文件的例子

本文格式为Word版，下载可任意编辑——PHP快速读取大文件的例子PHP快速读取大文件的例子

在PHP中，对于文件的读取时，最快捷的方式莫过于使用一些诸如file、file_get_contents之类的函数，简简朴单的几行代码就能很美丽的完成我们所需要的功能。但当所操作的文件是一个对比大的文件时，这些函数可能就显的力不从心,以下是我为大家探寻整理的PHP快速读取大文件的例子，梦想能给大家带来扶助!更多精彩内容请实时关注我们我!

下面将从一个需求入手来说明对于读取大文件时，常用的操作方法。

需求

有一个800M的日志文件，大约有500多万行，用PHP返回结果几行的内容。

实现方法

1.直接采用file函数来操作

由于file函数是一次性将全体内容读入内存，而PHP为了防止一些写的对比糟糕的程序占用太多的内存而导致系统内存缺乏，使服务器展现宕机，所以默认处境下限制只能最大使用内存16M,这是通过php.ini里的memory_limit=16M来举行设置，这个值假设设置-1，那么内存使用量不受限制。

下面是一段用file来取出这具文件结果一行的代码：

代码如下?php

ini_setmemory_limit,-1;

$file=access.log;

$data=file$file;

$line=$data[count$data-1];

echo$line;

?整个代码执行完成耗时116.9613s。

我机器是2个G的内存，当按下F5运行时，系统直接变灰，差不多20分钟后才恢复过来，可见将这么大的文件全部直接读入内存，后果是多少严重，所以不在万不得以，memory_limit这东西不能调得太高，否那么只有打电话给机房，让reset机器了。

2.直接调用Linux的tail命令来显示最后几行

在Linux命令行下，可以直接使用tail-n10access.log很轻易的显示日志文件结果几行，可以直接用PHP来调用tail命令，执行PHP代码如下:

代码如下?php

$file=access.log;

$file=escapeshellarg$file;//对命令行参数举行安好转义

$line=`tail-n1$file`;

echo$line;

?整个代码执行完成耗时0.0034s

3.直接使用PHP的fseek来举行文件操作

这种方式是最为普遍的方式，它不需要将文件的内容全部读入内容，而是直接通过指针来操作，所以效率是相当高效的。在使用fseek来对文件举行操作时，也有多种不同的方法，效率可能也是略有区别的，下面是常用的两种方法：

方法一

首先通过fseek找到文件的'结果一位EOF，然后找结果一行的起始位置，取这一行的数据，再找次一行的起始位置，再取这一行的位置，依次类推，直到找到了$num行。

#实现代码如下

代码如下?php

$fp=fopen$file,r;

$line=10;

$pos=-2;

$t=;

$data=;

while$line0

while$t!=＼n

fseek$fp,$pos,SEEK_END;

$t=fgetc$fp;

$pos--;

$t=;

$data.=fgets$fp;

$line--;

fclose$fp;

echo$data

?整个代码执行完成耗时0.0095s

方法二

还是采用fseek的方式从文件结果开头读，但这时不是一位一位的读，而是一块一块的读，每读一块数据时，就将读取后的数据放在一个buf里，然后通过换行符\n的个数来判断是否已经读完结果$num行数据。

#实现代码如下

代码如下?php

$fp=fopen$file,r;

$num=10;

$chunk=4096;

$fs=sprintf%u,filesize$file;

$max=intval$fs==PHP_INT_MAX?PHP_INT_MAX:filesize$file;

for$len=0;$len$max;$len+=$chunk

$seekSize=$max-$len$chunk?$chunk:$max-$len;

fseek$fp,$len+$seekSize*-1,SEEK_END;

$readData=fread$fp,$seekSize.$readData;

ifsubstr_count$readData,＼n=$num+1

preg_match!.*?＼n.$num.$!,$readData,$match;

$data=$match[0];

break;

fclose$fp;

echo$data;

?整个代码执行完成耗时0.0009s。

方法三

代码如下?php

functiontail$fp,$n,$base=5

assert$n0;

$pos=$n+1;

$lines=array;

whilecount$lines=$n

try

fseek$fp,-$pos,SEEK_END;

catchException$e

fseek0;

break;

$pos*=$base;

while!feof$fp

array_unsh