如何并行运行API调用(Node.js)

时间:2018-08-09 15:34:19

标签: arrays node.js asynchronous parallel-processing

我试图并行运行一些API调用,但是遇到了问题,因为我试图在返回API数据之前再次调用函数。

我认为我可以在Node中使用new命令,但是不确定如何将其构造为该方案。我正在尝试避免递归,因为我已经有一个递归版本,而且速度很慢。

当前,我正在尝试在服务器上使用此代码。

loopThroughArray(req, res) { 
  for(let i=0; i<req.map.length; i++) {
    stack[i] = (callback) => {
      let data = getApi(req, res, req.map[i], callback)
    }
  }

  async.parallel(stack, (result) => {
      res.json(result)
  })
}

....

function getApi(req, res, num, cb) {
  request({
    url: 'https://example.com/api/' + num
  },
  (error, response, body) => {
    if(error) {
      // Log error
    } else {
      let i = {
        name: JSON.parse(body)['name'],
        age: '100'
      }
      console.log(body) // Returns empty value array.length > 1 (req.map[i])
      cb(i)
    }
  })

是否有一种方法可以在每次调用时生成该函数的新实例,并累积结果以将其作为一个结果发送回客户端?

1 个答案:

答案 0 :(得分:2)

下面是一个使用Async库调用Web API(每个都有不同参数)的示例,我们首先创建N个函数变量的数组。

const async = require('async');
const request = require('request');

//Set whatever request options you like, see: https://github.com/request/request#requestoptions-callback
var requestArray = [
    {url: 'https://httpbin.org/get'},
    {url: 'https://httpbin.org/ip'}
];

let getApi = function (opt, callback) {
    request(opt, (err, response, body) => {
        callback(err, JSON.parse(body));
    });
};

const functionArray = requestArray.map((opt) => { 
    return (callback) => getApi(opt, callback); 
});

async.parallel(
    functionArray, (err, results) => {
        if (err) {
            console.error('Error: ', err);
        } else {
            console.log('Results: ', results.length, results);
        }
});

您可以轻松切换Url和Query值以匹配所需的内容。我在这里使用HttpBin,因为它很好地用于说明目的。