欧美bbbwbbbw肥妇,免费乱码人妻系列日韩,一级黄片

PHP讀取大文件的幾種方法介紹

 更新時(shí)間：2016年10月27日 09:06:00   作者：chenpingzhao  
本篇文章主要介紹了基于PHP讀取大文件的幾種方法，主要有3種方法。感興趣的朋友可以參考一下。

讀取大文件一直是一個(gè)頭痛的問題，我們像使用php開發(fā)讀取小文件可以直接使用各種函數(shù)實(shí)現(xiàn)，但一到大文章就會(huì)發(fā)現(xiàn)常用的方法是無法正常使用或時(shí)間太長(zhǎng)太卡了，下面我們就一起來看看關(guān)于php讀取大文件問題解決辦法，希望例子能幫助到各位。

場(chǎng)景：PHP讀取超大文件，例如1G的日志文件，我這里使用的是400M的access.log文件

1、使用file直接讀取

<?php
$starttime=microtime_float();
 
ini_set('memory_limit', '-1');
$file = 'testfile.txt';
 
$data = file($file);
$line = $data[count($data) - 1000];
$endtime=microtime_float();
 
echo count($data),"<br/>";
echo $endtime-$starttime;
 
function microtime_float(){
 list($usec, $sec) = explode(" ", microtime());
 return ((float)$usec + (float)$sec);
}
?>

運(yùn)行結(jié)果：10127784 行   共使用了，7.8764359951s

我的電腦是3G內(nèi)存，此方法不是推薦使用，因?yàn)樾枰盐募枯d入內(nèi)存

2、使用linux命令  tail

<?php
 
$starttime=microtime_float();
 
$file = 'testfile.txt';
$file = escapeshellarg($file); // 對(duì)命令行參數(shù)進(jìn)行安全轉(zhuǎn)義
$line = `tail -n 100 $file`;
 
echo $line,"<br/>";
 
$endtime=microtime_float();
echo $endtime-$starttime;
 
function microtime_float(){
 list($usec, $sec) = explode(" ", microtime());
 return ((float)$usec + (float)$sec);
}
 
//end

運(yùn)行結(jié)果：只使用了幾毫秒、輕松搞定、這種方法不能在windows下使用

3、使用fseek函數(shù)

這種方式是最為普遍的方式，它不需要將文件的內(nèi)容全部讀入內(nèi)容，因?yàn)镻HP是C寫的，所以實(shí)現(xiàn)的時(shí)候也類似C讀取文件，通過指針的移動(dòng)，所以效率是相當(dāng)高效的。在使用fseek來對(duì)文件進(jìn)行操作時(shí)，也有多種不同的方法，效率可能也是略有差別的，

下面是常用的幾種方法

方法一：使用fopen打開文件（從文件指針資源句柄）

<?php
$starttime=microtime_float();
 
$file = 'testfile.txt';
$fp = fopen($file, "r+");
 
$line = 100;
$pos = -2;
$t =$data="";
 
while ($line > 0)
{
 while ($t != "\n") //換行符
 {
 fseek($fp, $pos, SEEK_END);//移動(dòng)指針
 $t = fgetc($fp);//獲取一個(gè)字符
 $pos--;//向前偏移
 }
 
 $t = "";
 $data = fgets($fp);//獲取當(dāng)前行的數(shù)據(jù)
 $line--;
}
fclose($fp);
echo $data,"<br/>";
$endtime=microtime_float();
 
echo $endtime-$starttime;
 
function microtime_float(){
 list($usec, $sec) = explode(" ", microtime());
 return ((float)$usec + (float)$sec);
}
?>

運(yùn)行結(jié)果：0.338493108749

方法二：一塊一塊的讀取

<?php
$starttime=microtime_float();
 
$file = 'testfile.txt';
$fp = fopen($file, "r");
$num = 10;
$chunk = 4096;//4K的塊
$fs = sprintf("%u", filesize($file));
$readData='';
$max = (intval($fs) == PHP_INT_MAX) ? PHP_INT_MAX : $fs;
 
for($len = 0; $len < $max; $len += $chunk){
 
 $seekSize = ($max - $len > $chunk) ? $chunk : $max - $len;
 fseek($fp, ($len + $seekSize) * -1, SEEK_END);
 $readData = fread($fp, $seekSize) . $readData;
 
if (substr_count($readData, "\n") >= $num + 1) {
 
 $ns=substr_count($readData, "\n")-$num+2;
 preg_match('/(.*?\n){'.$ns.'}/',$readData,$match);
 $data = $match[1];
 break;
}
}
fclose($fp);
echo $data,"<br/>";
 
 
$endtime=microtime_float();
 
echo $endtime-$starttime;
 
function microtime_float(){
 list($usec, $sec) = explode(" ", microtime());
 return ((float)$usec + (float)$sec);
}
?>

運(yùn)行時(shí)間：0.00199198722839

使用fgets函數(shù),一行一行讀取

<?php
$file = fopen("testfile.txt","r");
 while(!feof($file))
 {
   echo fgets($file);
 }
 fclose($file);

spl庫函數(shù)

<?php
try{
  foreach( new SplFileObject('testfile.txt') as $line)
  echo $line.'<br />';
}catch (Exception $e){
  echo $e->getMessage();
}

另外網(wǎng)上有很多按照塊讀取文件的，有興趣的讀者可以試試，我試了沒成功，好像必須含有換行符“\n”才可以。

以上就是本文的全部?jī)?nèi)容，希望對(duì)大家的學(xué)習(xí)有所幫助，也希望大家多多支持腳本之家。

相關(guān)文章

最新評(píng)論