如何使用node.js执行多个http请求

时间:2012-10-05 04:42:34

标签: javascript node.js asynchronous design-patterns

我需要执行几个http请求。我有一个url数组,当每个请求完成时,JSON object被推入一个数组。当所有请求完成后,JSON object将使用新构造的Array发送到客户端。如果我在做这个客户端,我会使用类似jQuery的Deferred对象。是否有另一种方法使用node.js而不必import jQuery's Deferred object?似乎不会使用事件发射器来处理这个问题。或者是吗?谢谢!

2 个答案:

答案 0 :(得分:2)

确保您首先在 Node.js 中允许多个连接

require('http').globalAgent.maxSockets = 1000

此代码段允许您的Node.js服务器为每个客户端接受1000个http请求。


Node.js中有许多流量控制库。

着名的是asyncstep

我个人更喜欢async,因为它的功能类似于underscorelodash,但它的异步版本。

答案 1 :(得分:0)

这是一个可能的解决方案。

此类扩展了EventEmitter。它的作用是每个异步请求响应,我们发出已完成的异步请求的计数并存储响应的主体。

var UrlHandler, events, request, urlHandler,
  __hasProp = {}.hasOwnProperty,
  __extends = function(child, parent) { for (var key in parent) { if (__hasProp.call(parent, key)) child[key] = parent[key]; } function ctor() { this.constructor = child; } ctor.prototype = parent.prototype; child.prototype = new ctor(); child.__super__ = parent.prototype; return child; };

events = require("events");
request = require("request");

UrlHandler = (function(_super) {
  __extends(UrlHandler, _super);

  function UrlHandler() {
    return UrlHandler.__super__.constructor.apply(this, arguments);
  }

  UrlHandler.prototype.getUrls = function(urls) {
    var processedUrls, url, urlhandler, _i, _len, _results;
    processedUrls = 0;
    urlhandler = this;
    urlhandler.urlResponse = [];
    _results = [];
    for (_i = 0, _len = urls.length; _i < _len; _i++) {
      url = urls[_i];
      _results.push(request({
        uri: url
      }, function(error, response, body) {
        urlhandler.urlResponse.push(response);
        processedUrls++;
        return urlhandler.emit("processed:" + processedUrls);
      }));
    }
    return _results;
  };

  return UrlHandler;

})(events.EventEmitter);

urlHandler = new UrlHandler();

module.exports = {
  urlHandler: urlHandler
};

然后在你的主应用程序中,我们将监听器设置为'processed:' + urls.length,这样一旦完成所有异步请求,它就会触发。

urls = ['http://stackoverflow.com/questions/12739605/how-to-perform-several-http-requests-with-node-js', 'http://stackoverflow.com'];

UrlHandler.getUrls(urls);
UrlHandler.once("processed:" + urls.length, function() {
  return res.json(UrlHandler.urlResponse);
});