使用大量的javascript调用来刮取ASP.NET网站

Question

我想抓住这个网站 - https://recorder.co.clark.nv.us/RecorderEcommerce/default.aspx。

我需要先模拟点击'Parcel＃'链接，然后在Parcel＃文本框中输入一个值（即1234），然后点击搜索。

我需要抓下桌子底部显示的数据。

我想在ASP.NET中编写它，因此我可以将Parcel＃etc参数作为请求的一部分。一旦我收到请求，我相信我可以自己解析它，我只是不确定我应该如何准确发送原始请求，因为它不像发送参数那么简单？

Answer 1

在你的问题中，你已经指定了Javascript和asp.net，所以我真的不知道你计划使用什么技术。我推荐HtmlAgility pack。它从url选项下载。它也有助于解析。

HtmlAgilityPack.HtmlDocument doc = new HtmlAgilityPack.HtmlDocument();
doc.Load("https://recorder.co.clark.nv.us/RecorderEcommerce/default.aspx");