PHP - 下载大文件的安全方式?

时间:2013-06-06 18:02:19

标签: php curl download fopen file-get-contents

信息

有很多方法可以用PHP下载文件,file_get_contents + file_put_contentsfopenreadfile和cURL。

问题吗

  • 当拥有一个大文件时,让我们说来自另一个服务器/域的500 MB,安全下载它的“正确”方法是什么?如果连接失败,它应该找到该位置并继续或如果它包含错误则再次下载该文件。
  • 它将在网站上使用,而不是在php.exe shell中使用。

到目前为止我的想法

  • 我已经阅读了有关进度条的AJAX解决方案,但我真正想要的是一个PHP解决方案。
  • 我不需要将文件缓冲到像file_get_contents那样的字符串。那可能也会使用内存。
  • 我也读过有关内存问题的文章。可能更喜欢不使用那么多内存的解决方案。

概念

如果结果为假,这就是我想要的。

function download_url( $url, $filename ) {
    // Code
    $success['success'] = false;
    $success['message'] = 'File not found';
    return $success;
}

2 个答案:

答案 0 :(得分:2)

复制大文件的最简单方法可以在Save large files from php stdin进行演示,但不显示如何复制具有http范围的文件

$url = "http://REMOTE_FILE";
$local = __DIR__ . "/test.dat";

try {
    $download = new Downloader($url);
    $download->start($local); // Start Download Process
} catch (Exception $e) {
    printf("Copied %d bytes\n", $pos = $download->getPos());
}

当发生异常时,您可以恢复最后一点的文件下载

$download->setPos($pos);

使用过的课程

class Downloader {
    private $url;
    private $length = 8192;
    private $pos = 0;
    private $timeout = 60;

    public function __construct($url) {
        $this->url = $url;
    }

    public function setLength($length) {
        $this->length = $length;
    }

    public function setTimeout($timeout) {
        $this->timeout = $timeout;
    }

    public function setPos($pos) {
        $this->pos = $pos;
    }

    public function getPos() {
        return $this->pos;
    }

    public function start($local) {
        $part = $this->getPart("0-1");

        // Check partial Support
        if ($part && strlen($part) === 2) {
            // Split data with curl
            $this->runPartial($local);
        } else {
            // Use stream copy
            $this->runNormal($local);
        }
    }

    private function runNormal($local) {
        $in = fopen($this->url, "r");
        $out = fopen($local, 'w');
        $pos = ftell($in);
        while(($pos = ftell($in)) <= $this->pos) {
            $n = ($pos + $this->length) > $this->length ? $this->length : $this->pos;
            fread($in, $n);
        }
        $this->pos = stream_copy_to_stream($in, $out);
        return $this->pos;
    }

    private function runPartial($local) {
        $i = $this->pos;
        $fp = fopen($local, 'w');
        fseek($fp, $this->pos);
        while(true) {
            $data = $this->getPart(sprintf("%d-%d", $i, ($i + $this->length)));

            $i += strlen($data);
            fwrite($fp, $data);

            $this->pos = $i;
            if ($data === - 1)
                throw new Exception("File Corupted");

            if (! $data)
                break;
        }

        fclose($fp);
    }

    private function getPart($range) {
        $ch = curl_init();
        curl_setopt($ch, CURLOPT_URL, $this->url);
        curl_setopt($ch, CURLOPT_RANGE, $range);
        curl_setopt($ch, CURLOPT_BINARYTRANSFER, 1);
        curl_setopt($ch, CURLOPT_RETURNTRANSFER, 1);
        curl_setopt($ch, CURLOPT_TIMEOUT, $this->timeout);
        $result = curl_exec($ch);
        $code = curl_getinfo($ch, CURLINFO_HTTP_CODE);
        curl_close($ch);

        // Request not Satisfiable
        if ($code == 416)
            return false;

            // Check 206 Partial Content
        if ($code != 206)
            return - 1;

        return $result;
    }
}

答案 1 :(得分:1)

您想要以块的形式下载远程文件。这个答案有一个很好的例子:

How download big file using PHP (low memory usage)