How to scrape through multiple levels of navigation links which don't allow URL based navigation using puppeteer?

时间:2018-12-30 01:07:01

标签: web-scraping puppeteer

I am trying to scrape this website- https://nrlm.gov.in/shgOuterReports.do?methodName=showShgreport

这样打开网址

仅通过单击元素就可以进行导航,即使返回也可以,否则会出现表单重新提交错误。打开其他选项卡中的链接也是如此。该网站有7层层次结构-  州>区>块> GramPanchayat>村>组>数据。

前6层具有多个链接,我需要遍历每种情况并保存数据。 我可以在静态网站上执行此操作,但事实证明,在这种情况下执行相同操作是一个挑战。

在执行过程中提供的任何帮助将不胜感激。 谢谢

0 个答案:

没有答案