如何在HDP中安装scala库(Hortonworks数据平台)

时间:2016-04-05 12:39:13

标签: scala hadoop apache-spark spark-streaming hortonworks-data-platform

提前感谢您阅读此内容并抱歉我的英语不好。

我正在尝试使用Spark流进行实时数据处理。我在HDP(Hortonworks数据平台)中安装了Spark,对于我的进程,我需要为JSONparsing安装一个scala库。我在互联网上阅读了很多相关内容,但它只是针对一个简单的Spark Cluster而不是像HDP和CDH这样的解决方案,我试图调整解决方案,但我不能,我找不到任何scala要安装它的文件。有人知道帮助我的解决方案或提示吗? 谢谢

1 个答案:

答案 0 :(得分:0)

要在Zeppelin中加载Spark的依赖项,您需要创建一个新单元格并使用以下内容:

<body oncontextmenu="return false;" onkeydown="return false;" onmousedown="return false;"></body>

有关加载Zeppelin依赖关系的其他详细信息,请访问: https://zeppelin.apache.org/docs/latest/interpreter/spark.html#3-dynamic-dependency-loading-via-dep-interpreter

一个不在这里的瘦,是依赖加载必须是你在笔记本上运行的第一个单元格,如果不是,它会给你一个错误信息。要解决此问题,请单击解释器选项卡,然后单击Spark解释器上的重新启动,然后返回到您的笔记本并使用%dep运行单元格