我正在尝试使用 Twitter API Tweepy 以快速/可扩展的方式抓取和存储 Twitter 数据。我对追随者/追随者关系最感兴趣。有没有办法让我比现在更快地实现这一目标?似乎在 15 分钟的刷新周期内,我每 15 分钟只能存储十几个连接。 tweepy.Cursor 行似乎是瓶颈。
for iters in range(20):
nameSearching = namesToSearch[0]
print("getting followers of " + nameSearching)
for id in tweepy.Cursor(api.followers_ids, screen_name='elonmusk').items(bfs_value):
print(id)
ids.append(id)
print("ids loaded")
namesToSearch.pop(0)
nodeSearching = nodemap[nameSearching]