检测网站是否在Node.js中具有电子商务

时间:2019-03-25 07:03:35

标签: node.js web-scraping e-commerce

我需要以编程方式检测网站是否具有电子商务平台/系统 我不需要知道哪个,我只需要知道网站是否有一个。 (我的网站列表很多,所以我可能需要抓取它们) 非常感谢您提供关于如何使用外部网站(例如rescan.io/builtwith/etc等)执行此操作的任何建议! 谢谢!

1 个答案:

答案 0 :(得分:0)

您可以使用一个名为Puppeteer的程序包,该程序包用于在node.js中进行网络抓取。

我不知道您要寻找的平台,但是我想您可以尝试将诸如要检查的网站列表提供给node.js进程,然后让Puppeteer进行抓取。然后,您查看返回的内容,例如,在标签中查找Shopify的CDN或检查标签中的关键字。

您肯定需要检查每个不同的平台(如Magento或Shopify),以获取独特的源代码,这些源代码清楚地将您要查看的框架与其他工具区分开。