我正在尝试在Zeppelin中可视化来自spark的数据集。但即使对于Hello世界,Zeppelin也会抛出java.net.ConnectException: Connection refused: connect
错误。
我正在SPARK_HOME
中使用Windows 10正确地将zeppelin-env.cmd
设置为我的火花之家。
以下是Zeppelin GUI中我的Spark解释器的屏幕截图。
以下是我对输出的看法。
感谢。
答案 0 :(得分:0)
我对此很新,但这是我在发生此错误时所做的事情。 运行一个段落,转到日志文件夹。以修改的相反顺序列出文件(ls -lrt:shell命令)。现在,您有了修改后的日志列表。检查最新编辑的日志文件。
可能的原因之一可能是辅助名称节点中的检查点异常。为此,请停止dfs,删除/ tmp / hadoop-user /目录内容和hadoop-namenode-directory以及hadoop-datanode-directory,并使用命令格式化namenode
/ path-to-hadoop / bin / hadoop fs namenode -format
现在重新启动您的设置。 这通常适用于我,但您必须查看日志文件以检测发生这种情况的确切原因。
答案 1 :(得分:0)
这可能是因为使用了错误的解释器。单击笔记本中右上角的cog图标(“interpreter binding”)。 Spark应该是最重要的。或者您可以添加%spark
作为段落的第一行,以确保您使用的是spark解释器。 (或%spark2
如果你使用的是Spark 2)。