专注于前端开发, 追求更好的用户体验, 更好的开发体验 [长沙前端QQ群:234746733]

大文件

  • PHP 读取大文件的X行到Y行的内容

    / 分类: 开发,实践 / 5 Comments

    最新写了个小程序,需要读取一个文件的几行内容,但是文件比较大,所以研究了下PHP读取大文件的几行内容的方法,写了一个方法,代码如下(加了注释):

    1. //返回文件从X行到Y行的内容(支持php5、php4)
    2. function getFileLines($filename, $startLine = 1, $endLine=50, $method='rb') {
    3. $content = array();
    4. $count = $endLine - $startLine;
    5. if(version_compare(PHP_VERSION, '5.1.0', '>=')){// 判断php版本(因为要用到SplFileObject,PHP>=5.1.0)
    6. $fp = new SplFileObject($filename, $method);
    7. $fp->seek($startLine-1);// 转到第N行, seek方法参数从0开始计数
    8. for($i = 0; $i <= $count; ++$i) {
    9. $content[]=$fp->current();// current()获取当前行内容
    10. $fp->next();// 下一行
    11. }
    12. }else{//PHP<5.1
    13. $fp = fopen($filename, $method);
    14. if(!$fp) return 'error:can not read file';
    15. for ($i=1;$i<$startLine;++$i) {// 跳过前$startLine行
    16. fgets($fp);
    17. }
    18. for($i;$i<=$endLine;++$i){
    19. $content[]=fgets($fp);// 读取文件行内容
    20. }
    21. fclose($fp);
    22. }
    23. return array_filter($content); // array_filter过滤:false,null,''
    24. }

    Ps:
    上面都没加"读取到末尾的判断":!$fp->eof() 或者 !feof($fp),加上这个判断影响效率,自己加上测试很多很多很多行的运行时间就晓得了,而且这里加上也完全没必要。

    从上面的函数就可以看出来使用SplFileObject比下面的fgets要快多了,特别是文件行数非常多、并且要取后面的内容的时候。fgets要两个循环才可以,并且要循环$endLine次。

    此方法花了不少功夫,测试了很多中写法,就是想得出效率最高的方法。哪位觉得有值得改进的欢迎赐教。

    使用,返回35270行-35280行的内容:

    1. echo '<pre>';var_dump(getFileLines('test.php',35270,35280));