使用Cloudera Manager提交Spark作业

时间:2017-09-21 14:59:29

标签: apache-spark cloudera

有没有办法可以使用Cloudera Manager提交Spark Job?

在Cloudera教程here中,他们说"登录到群集主机", 但是我不知道如何在Cloudera Manager中做到这一点。

1 个答案:

答案 0 :(得分:0)

我了解文档[1]中的“登录到群集主机”是指仅通过终端登录到主机。

为了您的理解,我会说,“运行Hadoop PiEstimator示例”是下一步,它是终端命令。

但是,如文档中所述,通过终端提交的作业的进度和状态在Cloudera Manager中非常明显。

简而言之,无法从Cloudera Manager提交Spark作业。

[1] https://www.cloudera.com/documentation/enterprise/5-3-x/topics/cm_qs_quick_start.html#cmig_topic_6_5