如何从网站上抓取Ajax数据

时间:2015-12-25 07:16:19

标签: php curl web-scraping fetch scrapy-spider

我正在尝试获取网站数据

www.deutsches-krankenhaus-verzeichnis.de/suche/Bundesland/Nordrhein-Westfalen.jsf

此页面正在使用ajax,我无法弄清楚如何获取该数据。正如我尝试过卷曲和其他方法。

请提供一些建议。

谢谢

2 个答案:

答案 0 :(得分:0)

答案 1 :(得分:0)

使用curl时,您只需获取原始页面的源代码,而不执行任何javascript。尝试使用一些无头浏览器解决方案,如PhantomJs来加载页面并执行javascript。它允许您在加载Ajax数据后使用css选择器查​​询页面。

http://phantomjs.org