标签: scala apache-spark yarn bigdata
可以通过端口4040上的浏览器查看Spark程序的分析统计信息。但是,我正在运行它的群集,没有浏览器,而且我不是管理员。这些信息是否也记录在某个文件中,以便我可以创建自己的工具来通过阅读这样的文件来显示统计信息?
请注意,我在YARN上运行Spark。但有时我也使用本地独立模式运行。因此,任何与此相关的答案也表示赞赏。