标签: node.js web-crawler
我正在使用NodeJS的node-spider来抓取网站内容,但这带来了一个问题,那就是它不会等待延迟加载的内容才获取页面内容,尤其是像Angular这样的实现页面的页面懒惰很多。
node-spider
我是Spider / Crawler技术的新手,不确定要完成什么配置或解决此问题的任何更好的库。
我的代码与库中的代码示例完全相同:https://www.npmjs.com/package/node-spider