我根据唯一的帖子ID来下载新帖子的Twitter Feed。我可以删除项目或将其添加到Feed中,但我会抓取。所以当我到第2页时,第1页可能已经改变了。
我试着用一个说明性的例子来描述这个过程,
第1页的PID:1,2,3,4,5
第2页的PID:6,7,8,9,10
我下载了第1页,所有的PID都是新的,所以我下载了第2页。但是我下载了一个项目,从第一页开始删除了一段时间。
所以第2页的PID现在是:7,8,9,10,1
我最终得到的PID是1,2,3,4,5,7,8,9,10,1
我缺少PID 6,PID 1是最新的,所以我找不到PID 6。
我可以使用什么算法来确保获得所有可用的PID?