有没有办法监控Apache Spark应用程序的RAM和CPU使用情况?

时间:2015-11-04 18:03:38

标签: apache-spark monitor

我需要监控在独立的Spark Cluster上运行的Spark应用程序的RAM和CPU。

我尝试使用java控制台并且它运行良好,但我需要监视各种applicationi,我需要为每个应用程序设置一个不同的java控制台端口。

在防火墙后面,这将成为一项非常漫长而乏味的工作。

有没有办法从Spark UI监控应用程序,例如或其他什么?

1 个答案:

答案 0 :(得分:0)

如果您使用Ubuntu,则可以使用htop。 要安装,请执行

sudo apt-get install htop