Node.js Twitter API游标

时间:2015-01-18 10:56:49

标签: javascript node.js twitter

我使用npm-twit来获取特定帐户的关注者。

Twitter API从单个GET请求返回最多5000个结果。

如果我查询的用户拥有超过5000个关注者a" next_cursor"值随数据一起返回。

要获得接下来的5000个结果,我需要重新运行GET函数,并将其传递给" next_cursor"价值作为一个论点。我似乎无法理解如何做到这一点。

我在想一个while循环,但是我无法重置全局变量,我认为是因为范围:

var cursor = -1

while ( cursor != 0 ) { 

  T.get('followers/ids', { screen_name: 'twitter' },  function (err, data, response) {

  // Do stuff here to write data to a file

  cursor = data["next_cursor"];

  })

}

显然我不是JS的天才,所以任何帮助都会非常感激。

3 个答案:

答案 0 :(得分:8)

您遇到的问题是由于Node.js 异步

T.get('followers/ids', { screen_name: 'twitter' },  function getData(err, data, response) {

  // Do stuff here to write data to a file

  if(data['next_cursor'] > 0) T.get('followers/ids', { screen_name: 'twitter', next_cursor: data['next_cursor'] }, getData);

  })

}

请注意:

  1. 我给内部回调函数命名了。这样我们就可以从内部递归调用它。
  2. 循环被替换为递归回调。
  3. 如果有next_cursor数据,则我们使用相同的函数T.get调用getData
  4. 请注意这里的东西代码将被执行多次(与下一个游标一样多)。由于它是递归回调 - 保证订单。


    如果您不喜欢递归回调的想法,可以通过以下方式避免它:

    1. 如果可能,事先找出所有 next_cursor ,并使用 for 循环生成请求。
    2. 或者,使用像Async这样的异步辅助模块(虽然出于学习目的,我会避免使用模块,除非你已经熟悉这个概念)。

答案 1 :(得分:1)

考虑使用一些5K +帐户进行测试。

    const T = new Twit(tokens)

    function getFollowers (screenName, followers = [], cur = -1) {
      return new Promise((resolve, reject) => {
        T.get('followers/ids', { screen_name: screenName, cursor: cur, count: 5000 }, (err, data, response) => {
          if (err) {
            cur = -1
            reject(err)
          } else {
            cur = data.next_cursor
            followers.push(data.ids)
            if (cur > 0) {
              return resolve(getFollowers(screenName, followers, cur))
            } else {
              return resolve([].concat(...followers))
            }
          }
        })
      })
    }

    async function getXaqron () {
      let result = await getFollowers('xaqron')
      return result
    }

 console.log(getXaqron().catch((err) => {
  console.log(err) // Rate limit exceeded
}))

答案 2 :(得分:0)

挣扎着这一切..一切似乎都有效,但数据['next_cursor']没有改变,永远!

代码应该是这样的:

T.get('followers/ids', { screen_name: 'twitter' },  function getData(err, data, response) {

  // Do stuff here to write data to a file

  if(data['next_cursor'] > 0) T.get('followers/ids', { screen_name: 'twitter', cursor: data['next_cursor'] }, getData);

  })

}

Twit的参数不是“next_cursor”,它只是“光标”;)