使用Scrapy刮擦AJAX内容

时间:2015-05-15 19:07:08

标签: javascript ajax web-scraping scrapy

我正在开展一项涉及从Google Play商店获取最新评论的项目。我查看了thisthis,但无法解决我的问题

游戏商店的评论默认按“有用”排序,但我想获得最新评论。

对于前 https://play.google.com/store/apps/details?id=com.supercell.boombeach

我查看了chrome-> dev工具 - >网络,并在选择“最新”按钮时发出此请求

reviewType=0&pageNum=0&id=com.playdead.limbo.full&reviewSortOrder=0&xhr=1

我正在尝试https://play.google.com/store/apps/details?reviewType=0&pageNum=0&id=com.supercell.boombeach&reviewSortOrder=0 但它始终打开默认页面。

我正在使用scrapy。

0 个答案:

没有答案