限制节点中的API AJAX请求(获取速率受限) - 使用AXIOS进行AJAX调用...

时间:2017-07-07 00:58:23

标签: javascript node.js ajax axios throttling

我受到限制,每秒向API发出太多请求。

我正在将联系人导入我的数据库并将数据映射到我的数据库架构。

API最初会返回其联系人组' (即类别)作为一个链接数组,需要为了检索实际值而进行单独的API调用。

我必须迭代每个联系人,并为与每个联系人关联的数组中的每个链接进行单独的API调用。我很快达到了我的速率限制(根据API文档,每秒最多10次)并因此得到一堆不完整的条目和错误。

我正在使用Axios库在Node中发出请求。

我的代码如下 - 任何帮助解决这个难题的人都会非常感激 - 谢谢!

        .then(authUser => {

            // RETURN A LIST OF CONTACTS FROM API

            axios.get('url', {
              headers: {
                Authorization: credentials
              }
            })
            .then(response => {

              // MAP OVER EACH CONTACT
              response.data.map( contact => {

                let groups = contact.groupLinks.map(group => {

                    // MAP OVER EACH LINK IN EACH CONTACTS GROUP ARRAY AND MAKE AJAX REQUEST. 
                    return axios.get(`${group.url}/?alt=json`, {
                      headers: {
                        Authorization: 'credentials'
                      }
                    })
                    .then(result => {
                      return result.data
                    })
                    .catch(err => {
                      console.error('FETCH GROUP MEMBERSHIP FAILURE', err.response.data.error)
                      next(err)
                    })
                  })

                return Promise.all(groups)
                .then( response => {
                  return [contact, response]
                })

2 个答案:

答案 0 :(得分:0)

我不熟悉AXIOS,所以我不确定这是否可行。当你使用数组/对象映射让每个组调用它的url时如何绑定外部变量?你能做这样的事吗?

// MAP OVER EACH CONTACT
response.data.map( contact => {
/*right here set an interval
*/
var interval = 0;
let groups = contact.groupLinks.map(group => {
    //increment interval
    interval += 150;

    // MAP OVER EACH LINK IN EACH CONTACTS GROUP ARRAY AND MAKE AJAX REQUEST. 
    setInterval(function()
      {
          return axios.get(`${group.url}/?alt=json`, {
          headers: {
            Authorization: 'credentials'
          }
        })
        .then(result => {
          return result.data
        })
        .catch(err => {
          console.error('FETCH GROUP MEMBERSHIP FAILURE', err.response.data.error)
          next(err)
        })
      }, interval);
  })

否则我会将组响应的处理移动到递归函数,该函数接受从API返回的组,进行必要的调用,弹出刚刚调用的组,然后在150ms延迟时调用自身。

答案 1 :(得分:0)

好吧,我最终做了一些完全不同的事情,因为这被证明太复杂和低效。我无法让它发挥作用。

API允许您下载所有用户组的完整列表。 我创建了一个名为“ContactGroups”的新数据库表

对于Contacts,API返回一个包含组ID数组的对象。

要显示组,我向API端点发出单独的POST请求,并在有效负载中使用groupIds数组调用'/ getgroups',并进行以下数据库查询:

ContactGroups.findAll({
      where: {
        groupId: req.body.groups // [this is an array of ids]
      }
    })

返回匹配组的数组。