我正在尝试使找出在网站上运行的第三方JavaScript库的过程自动化。我想检查一下Alexa排名前100万的产品,因此手工测试不在范围之内。
我尝试编写一个python脚本来拉出页面并再次检查预编译列表,但这很简短。例如,在twitch上umatrix向我展示了它使用的是google-analytics,但对它的引用保存在.js文件中。当我拉网站时,这些链接不会被跟踪,因此我永远也不会加载Google分析。
有没有做这项工作的框架或库?如果没有,您对我如何完成此任务有任何建议?
我已经在处理请求,漂亮的汤,phantomjs和硒,但是找不到任何解决方案。