通过用户界面提交Spark作业

时间:2017-06-12 13:49:33

标签: apache-spark intellij-idea spark-streaming yarn spark-submit

有没有办法在某些UI上通过YARN提交Spark作业,甚至可以通过IntelliJ方式编写应用程序。

提交作业的公司模式风格的最佳解决方案。

我们正在使用Apache Ambari,我们安装了Yarn,Hadoop,Spark。 Ty:)

1 个答案:

答案 0 :(得分:1)

使用Cloudera的Hue(Hadoop用户体验)UI为scala / java作业提交jar或为Python作业提交py文件:http://gethue.com/how-to-schedule-spark-jobs-with-spark-on-yarn-and-oozie/