用cheerio和nodejs抓取数据

时间:2015-04-23 06:23:03

标签: javascript node.js

我使用cheerio模块从网站上删除产品列表。但有问题,网站使用" Infinite Scrolling"加载数据(向下滚动时数据加载更多)。所以,cheerio无法获得所有产品。

有人可以建议我解决这个问题吗?谢谢你。

1 个答案:

答案 0 :(得分:1)

您可以查看滚动时页面执行的查询类型。然后自己点击这些查询并获取数据。

或者你可以尝试使用node-phantom-simple之类的东西,通过幻影触发滚动并刮擦。

我会自己选择第一个选项。