Zeppelin Cluster Mode无法使用spark 1.2 Ambari,Hortonworks CLuster

时间:2015-07-25 19:56:05

标签: scala hadoop apache-spark ambari apache-zeppelin

我正在尝试部署一个集群并在其上运行一些示例Spark / scala代码,而当我在独立模式下使用zeppelin时默认参数一切正常,我无法让它在集群模式下工作。 我尝试使用spark中的 spark-class start-master 标准shell文件手动创建spark集群,然后传递 spark:// .. Zeppelin的URL,但是在运行代码之后,我不断得到不同的异国错误(比如缺少java sys.process._库),经过一段时间火花工人'状态更改为Spark MasterUI中的DEAD

我还尝试在zeppelin spark.home变量中放置 yarn-client 而不是spark-URL,但它不能产生类似的错误。

你能否帮我在Ambari集群上部署zeppelin和/或暗示我做错了什么?

1 个答案:

答案 0 :(得分:1)

对于Zeppelin与Ambari的整合,请使用Hortonworks的ambari-zeppelin-service

它有详细记录,也可以在群集模式下工作。