我无法从下面的网站上抓取数据。 无论如何,我们可以在几天内抓取网站上不同选项卡的数据。
https://www.aemo.com.au/Gas/Gas-Bulletin-Board
在R上也进行了一些爬取,但由于数据范围需要更改,因此似乎不起作用,因此不确定如何解决该问题吗?
答案 0 :(得分:1)
例如,您是否尝试将Python与Scrapy和Selenium一起使用。
尝试创建间谍程序以打开服务器链接或从“选项卡”中导入“选择”
和用于过滤数据的选择器。
使用配置定义每个请求/作业的周期...