Question

我正在使用Stackoverflow API来收集Stackoverflow中的标记。我正在使用NodeJS并面临一个典型的问题。在230-250次请求之后，我的速率限制被超出。就我所知，它允许<30req / sec。所以根据我的程序应该可以正常工作，但是我在200多个周期后得到一个例外.MY nodejs代码如下： -

var request=require('superagent');
var request=require('mongoose');
mongoose.connect('mongodb://shivkumarganesh:11111@paulo.mongohq.com:10090/lklklklkkkkl_gshiv_sk');
var db = mongoose.connection;
db.on('error', console.error.bind(console, 'connection error:'));
db.once('open', function callback () {
  console.log('Connected');
});

//Schema for Tags
var tagSchema = mongoose.Schema({
    name:String,
    count:Number,
    is_required:Boolean
,    is_moderator_only:Boolean,
    has_synonyms:Boolean});

var Tags = mongoose.model('Tags', tagSchema);

var saveSchema = function(Model){
    Model.save();
}
 ///usr/local/lib/node_modules/superagent  
var i=1;
var req=function(){
    request.get('http://api.stackexchange.com/2.1/tags?page='+i+'&pagesize=100&fromdate=1199145600&todate=1377648000&order=asc&sort=popular&site=stackoverflow')
   .set('X-API-Key', 'foobar')
   .set('Accept', 'application/json')
   .end(function(res){
     if (res.ok && i<346) {
       console.log('yay got ' + res.body);
       var jsonResponse = res.body;
       console.log(jsonResponse.items.length);
       for(var j=0;j<jsonResponse.items.length;j++)
       {
           var model = new Tags(jsonResponse.items[j]);
           saveSchema(model);
       }
       i++;
       console.log("Number of Iteration ---- > "+i);
       setTimeout(function() {
           req();
       }, 3000);

     } else {
       console.log('Oh no! error ' + res.text);
       console.log('Processing Over'+i)
     }
   });

}
req();

请帮我解决这个问题。如有可能，请纠正该计划。注意：我很有意使用MongoHQ来存储数据。

Answer 1

您应该阅读以下信息性链接：https://api.stackexchange.com/docs/throttle

具体做法是：

每个方法级别也有动态限制。如果应用程序收到设置了退避字段的响应，则必须等待很多秒才能再次使用相同的方法。

因此，请查看返回的backoff字段，并在再次请求之前等待那么多。

是什么导致我的计划超出限额？

1 个答案: