从本网站抓取信息的更好方法是什么?

时间:2020-10-06 18:57:41

标签: python scrapy scrapy-splash

我试图用刮擦刮擦website,我不得不搜索每个链接以从每个链接中提取信息,我想知道网站上是否有我可以使用的API(我不知道如何找到它。)

我还想知道如何获得经度和纬度?当前显示了地图,但我不知道如何获取数字

我很感谢任何建议

1 个答案:

答案 0 :(得分:0)

网站可能正在使用Javascript动态加载数据。使用浏览器开发工具并查看“网络”选项卡,查找可能正在访问API的所有XHR调用。然后,您可以直接从中抓取。