为Spark包添加解析器

时间:2016-11-18 06:56:15

标签: maven apache-spark

我们可以通过以下方式自动获取罐子。

  • 包裹坐标为spark.jars.packages
  • 使用--packages的{​​{1}}选项传递包裹坐标。

但我们如何配置其他解析器?

1 个答案:

答案 0 :(得分:10)

可以使用spark-submit选项提供其他存储库:

--repositories
{p}或bin/spark-shell --repositories https://oss.sonatype.org/content/repositories/releases 中的spark.jars.repositories

spark-defaults.com