如何刮.aspx

时间:2016-01-15 06:20:38

标签: asp.net web-scraping

http://fs.tblaw.com/Sales/PendingSales.aspx

I want to see all the available data records at this web page by sending only a single HTTP request。但是当我尝试时,响应只返回前20个。

所以这就是我所做的:

  1. 打开开发者工具
  2. 检查网络请求
  3. 在目标网站上,我手动设置"每页记录数"菜单值为300
  4. 执行此操作后,我在POST请求中看到参数ddlNumRows: 300作为标题。

    所以我前往https://www.hurl.it看看我是否可以按如下方式构建自己的POST请求。

    Destination: POST http://fs.tblaw.com/Sales/PendingSales.aspx
    Parameters: ddlNumRows: 300
    

    但是,同样,服务器只返回了第一个 20条记录

    问题

      

    有没有人有任何建议如何从HTTP服务器请求获取所有记录而无需手动操作目标页面上的表单或单击分页按钮?

0 个答案:

没有答案