如何在重定向URL时使用CasperJS下载

时间:2016-08-27 18:52:08

标签: javascript download phantomjs casperjs

我花了几天时间阅读答案并进行测试,并试图找出如何在重定向URL时让CasperJS下载文件。我重新尝试从https://firefox.com下载Firefox时出现问题我收到警告:

[warning] [phantom] Loading resource failed with status=fail (HTTP 200): https://download.mozilla.org/?product=firefox-48.0.2-SSL&os=linux64&lang=en-US
[warning] [phantom] Loading resource failed with status=fail (HTTP 200): https://download-installer.cdn.mozilla.net/pub/firefox/releases/48.0.2/linux-x86_64/en-US/firefox-48.0.2.tar.bz2

和一个名为?product=firefox-48.0.2-SSL&os=linux64&lang=en-US

的0字节文件

第二个警告告诉我casperjs获取新的url(如果你使用浏览器导航到它们,则下载相同的zip文件)

捕获下载的文件我缺少什么?

var casper = require('casper').create({
    pageSettings: {
        userAgent: "Mozilla/5.0 (X11; Linux x86_64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/52.0.2743.116 Safari/537.36"
    }
});

casper.start().thenOpen("https://firefox.com", function () {
    this.viewport(1200, 800);
});

casper.then(function () {
    this.click('li.os_linux64 a');
    this.wait(3000);
});

casper.on('resource.received', function (resource) {
    if (resource.stage !== "end") {
        return;
    }
    if (resource.url.indexOf('download') > -1) {
        this.download(resource.url, 'out/' + new String(resource.url).substring(resource.url.lastIndexOf('/') + 1));
    }
});

casper.run();

版本:

casperjs 1.1.3
phantomjs 2.1.1

命令行:

casperjs --verbose --log-level=warning --ssl-protocol=any --ignore-ssl-errors=true --web-security=no script.js

1 个答案:

答案 0 :(得分:1)

我回答了自己的问题。我看到的所有例子都有

if (resource.stage !== "end") {
    return;
}
casper.on('resource.received'...函数中的

删除会导致下载成功。我不确定它做了什么(或现在不做)。

注意:我还必须使用较小的下载文件进行测试,因为casperjs / phantomjs资源接收似乎有30秒的超时。见CasperJS File Download Times Out After 30 Seconds