在EMR笔记本电脑上安装其他Scala库

时间:2019-06-10 08:38:44

标签: scala apache-spark jupyter-notebook amazon-emr

我有一个EMR scala笔记本,我想做的是安装一个用于绘制火花数据的库。该库称为Vegas。 我该怎么做? 谢谢

2 个答案:

答案 0 :(得分:1)

您可以在笔记本中将scala依赖项配置为

%%configure -f
{
"conf": {"spark.jars.packages": "//maven coordinates of Vegas package"}
}

答案 1 :(得分:0)

如果您在EMR中使用 Apache Toree(提供Spark,PySpark,SparkR和SparkSQL内核),则可以执行以下操作:

%AddDeps "org.vegas-viz" %% "vegas" % {vegas-version} --transitive

它将开始下载罐子,您将可以在笔记本中使用vegas