使用'groupByKey'跟踪火花过程

时间:2016-07-06 10:13:02

标签: apache-spark

我想了解一下我的火花过程。我假设一些带有'groupByKey'的代码花了很多时间,但没办法检查出来。 有没有办法检查这个'groupByKey'函数如何在我的应用程序中流动?

1 个答案:

答案 0 :(得分:0)

如果您想监控流程,最佳解决方案是Spark WEB UI:https://jaceklaskowski.gitbooks.io/mastering-apache-spark/content/spark-webui.html