有没有办法在某些UI上通过YARN提交Spark作业,甚至可以通过IntelliJ方式编写应用程序。
提交作业的公司模式风格的最佳解决方案。
我们正在使用Apache Ambari,我们安装了Yarn,Hadoop,Spark。 Ty:)
答案 0 :(得分:1)
使用Cloudera的Hue(Hadoop用户体验)UI为scala / java作业提交jar或为Python作业提交py文件:http://gethue.com/how-to-schedule-spark-jobs-with-spark-on-yarn-and-oozie/