无法从具有不同标签和日期的网站上抓取数据

时间:2019-07-05 05:33:30

标签: angularjs scrape

我无法从下面的网站上抓取数据。 无论如何,我们可以在几天内抓取网站上不同选项卡的数据。

https://www.aemo.com.au/Gas/Gas-Bulletin-Board

在R上也进行了一些爬取,但由于数据范围需要更改,因此似乎不起作用,因此不确定如何解决该问题吗?

1 个答案:

答案 0 :(得分:1)

例如,您是否尝试将Python与Scrapy和Selenium一起使用。

尝试创建间谍程序以打开服务器链接或从“选项卡”中导入“选择”

和用于过滤数据的选择器。

使用配置定义每个请求/作业的周期...