如何限制Google Cloud Pub / Sub Queue

时间:2017-07-13 17:37:20

标签: node.js google-cloud-functions google-cloud-pubsub

我正在使用Google的Pub / Sub队列来处理服务之间的消息。一些订户连接到速率限制API。

例如,我正在将街道地址推送到pub / sub主题。我有一个Cloud功能,可以订阅(通过推送)到该主题,并呼叫外部速率限制地理编码服务。理想情况下,我的街道地址可以毫不拖延地推送到主题上,主题将保留这些消息 - 以限速的方式呼叫用户。

是否有配置此类延迟或邮件分发率限制?增加Ack窗口并没有多大帮助:我已经构建了这个系统以防止长时间运行的功能。

1 个答案:

答案 0 :(得分:2)

解决问题的方法是使用:async.queue

你有一个并发属性,你可以管理速率限制。

// create a queue object with concurrency 2
var q = async.queue(function(task, callback) {
    console.log('hello ' + task.name);
    callback();
}, 2);

// assign a callback
q.drain = function() {
    console.log('all items have been processed');
};

// add some items to the queue
q.push({name: 'foo'}, function(err) {
    console.log('finished processing foo');
});

// quoted from async documentation