如何抓取ajax生成网页？

Question

我试图抓取https://world.taobao.com/search/search.htm?cat=50008090&_ksTS=1461999216322_20&spm=a21bp.7806943.banner_XX_cat.13.UxfRzO&_input_charset=utf-8&navigator=all&json=on&callback=__jsonp_cb&cna=CKNtDjuNxTgCAdIGQMzvfvwH&abtest=_AB-LR517-LR854-LR895-PR517-PR854-PV895_2462

但没有成功，响应页面来源与视图页面不匹配，任何人都知道该怎么做？谢谢

Answer 1

你必须使用一些可以捕获JS内容的库，这就是php-curl在这里不起作用的原因。

您可以使用各种库，例如phantomjs，casperjs