PHP - 从目录中读取大量文件

时间:2017-09-29 12:52:12

标签: php file-handling large-data

我有一个包含大量图片的文件夹(至少10000个文件),我需要使用PHP获取所有这些文件的名称。 问题是我使用scandir()时出现内存限制错误。 另外,我尝试使用这样的代码:

          $files = [];
          $dir = opendir($this->path);
          $i = 0;
          while(($file = readdir($dir)) !== false) {
              $files[] = $file;
              $i++;
              if ($i == 100)
                  break;
          }

此代码工作正常,但这不是我需要的。当我尝试获取所有文件时,脚本仍然崩溃。

此外我考虑过以某种方式在$dir中保存指针的状态,以便稍后通过AJAX请求使用它并获取所有文件,但我找不到任何解决方案。

是否有任何设置限制和偏移的方法来读取文件? 我的意思是喜欢分页。

2 个答案:

答案 0 :(得分:6)

如果内存存在巨大问题,您可以将RecursiveDirectoryIteratorGenerator一起使用。

function recursiveDirectoryIterator($path) {
  foreach (new RecursiveIteratorIterator(new RecursiveDirectoryIterator($path)) as $file) {
    if (!$file->isDir()) {
      yield $file->getFilename() . $file->getExtension();
    }
  }
}

$start = microtime(true);
$instance = recursiveDirectoryIterator('../vendor');
$total_files = 0;
foreach($instance as $value) {
  // echo $value
  $total_files++;
}
echo "Mem peak usage: " . (memory_get_peak_usage(true)/1024/1024)." MiB";
echo "Total number of files: " . $total_files;
echo "Completed in: ", microtime(true) - $start, " seconds";

这是我在不太好的笔记本电脑上得到的东西。

enter image description here

答案 1 :(得分:0)

我有Unix背景,所以你可以这样做(假设你在Linux或Unix上运行你的PHP):

  • 系统调用:/ bin / ls -c1> files.list
  • 您可以使系统调用变得如您想要排序,解析,编辑......
  • 读取files.list并显示
  • 您可以使用file_get_contents()来读取文件。