标签: scala apache-spark monitoring pagerank
我在scala IDE上运行了sparkRank的pageRank示例。我想保留作业执行的历史记录,即使执行已经完成。 是否有任何工具可以帮助我以图形方式显示结果,跟踪这些指标:内存量,I / O光盘,时间执行,CPU,......
提前谢谢
答案 0 :(得分:1)
有一个监控rest-api
http://spark.apache.org/docs/latest/monitoring.html#rest-api
以下是如何使用它
http://techblog.kenshoo.com/2015/11/spark-monitoring-tips-from-trenches.html