Screen Scraping - 如何获取基于AJAX的过滤数据

Question

我正在进行屏幕抓取，在查询字符串中过滤时很容易，但基于AJAX的过滤问题，

e.g。 here is an sample URL 当您打开此页面时，输入酒店名称并单击Go，Ajax过滤器工作并相应地显示结果，或者单击Next Page，它将显示使用基于AJAX的下一条记录。

请建议我，在屏幕刮痧工作时如何处理这类问题？

非常感谢

Answer 1

您可能想尝试2个Firefox附加组件。它们是“Firebug”和“Tamper Data”。

Firebug的“控制台”窗口显示了AJAX请求和响应。

然后，您可以使用PHP / cURL库编写脚本来模仿请求。

Answer 2

像通常那样为任何链接或表单提交http请求，但使用与ajax一起使用的URL。有时您可能需要阅读javascript源以确定如何构建URL。