从按下按钮时添加的html进行Web抓取

时间:2016-10-17 21:49:07

标签: javascript html web-scraping web-crawler

我试图从具有巨大表格的页面中抓取数据,该表格默认显示100个条目。底部有一个选择/选项,可让您将条目更改为200或全部。

如何在抓取表格之前将选择器设置为All,因为我想从所有条目中删除,而不仅仅是前100个。

我正在使用node.js / JavaScript从页面中删除。

1 个答案:

答案 0 :(得分:0)

您在评论中提供的链接上显示的表格由JSON文件填充。您可以直接在this path下访问JSON文件。

您需要的数据,在简洁的JSON文件中提供。您可以解析它并获取所需的所有信息。