使用node.js(http.get)读取远程文件

时间:2013-01-27 21:42:08

标签: node.js

读取远程文件的最佳方法是什么?我想得到整个文件(不是块)。

我从以下示例开始

var get = http.get(options).on('response', function (response) {
    response.on('data', function (chunk) {
        console.log('BODY: ' + chunk);
    });
});

我想将文件解析为csv,但为此我需要整个文件而不是分块数据。

4 个答案:

答案 0 :(得分:79)

我会使用request

request('http://google.com/doodle.png').pipe(fs.createWriteStream('doodle.png'))

或者,如果您不需要先保存到文件中,并且只需要将CSV读入内存,则可以执行以下操作:

var request = require('request');
request.get('http://www.whatever.com/my.csv', function (error, response, body) {
    if (!error && response.statusCode == 200) {
        var csv = body;
        // Continue with your processing here.
    }
});

答案 1 :(得分:17)

http.get(options).on('response', function (response) {
    var body = '';
    var i = 0;
    response.on('data', function (chunk) {
        i++;
        body += chunk;
        console.log('BODY Part: ' + i);
    });
    response.on('end', function () {

        console.log(body);
        console.log('Finished');
    });
});

对此的更改,有效。有什么意见吗?

答案 2 :(得分:2)

您可以执行此类操作,而无需使用任何外部库。

const fs = require("fs");
const https = require("https");

const file = fs.createWriteStream("data.txt");

https.get("https://www.w3.org/TR/PNG/iso_8859-1.txt", response => {
  var stream = response.pipe(file);

  stream.on("finish", function() {
    console.log("done");
  });
});

答案 3 :(得分:0)

function(url,callback){
    request(url).on('data',(data) => {
        try{
            var json = JSON.parse(data);    
        }
        catch(error){
            callback("");
        }
        callback(json);
    })
}

您也可以使用它。这是异步流程。当响应不是JSON时,会出现错误。也在404状态代码中。