R查找网页API来抓取数据

时间:2019-11-13 06:10:23

标签: xml web-scraping rvest xml2

我正在寻找使用R从网页抓取数据的方法。大多数时候,我会找到网页,然后使用XML2和rvest的组合来抓取我想要的数据(通常使用选择器小工具来查找所选的xpath) 。

但是,尤其是对于移动应用程序,我已经意识到,通常在页面后面有一个隐藏的数据库,用于存放我想要的数据。通常可以通过url中的一系列api请求(使用特定的api密钥)来访问此文件。

我的问题是:数据库中是否有标准的后门方式?您如何找到不同的api请求?有谁知道任何网站或书籍可以为我所谈论的方法提供帮助?

谢谢

0 个答案:

没有答案
相关问题