节点蜘蛛等待延迟加载内容

时间:2019-11-14 10:40:35

标签: node.js web-crawler

我正在使用NodeJS的node-spider来抓取网站内容,但这带来了一个问题,那就是它不会等待延迟加载的内容才获取页面内容,尤其是像Angular这样的实现页面的页面懒惰很多。

我是Spider / Crawler技术的新手,不确定要完成什么配置或解决此问题的任何更好的库。

我的代码与库中的代码示例完全相同:https://www.npmjs.com/package/node-spider

0 个答案:

没有答案