Question

我正在使用Windows计算机并安装了spark和scala进行学习。对于需要处理json输入数据的spark-sql。

scala> sc
res4: org.apache.spark.SparkContext = org.apache.spark.SparkContext@7431f4b8

scala> import play.api.libs.json._
<console>:23: error: not found: value play
       import play.api.libs.json._
              ^

scala>

如何在我的spark-shell commnad中导入play api。

Answer 1

如果要在使用spark-shell时使用其他库，则需要使用spark-shell和/或--jars运行--packages命令。例如，要在spark shell中使用play，请运行以下命令；

spark-shell --packages "com.typesafe.play":"play_2.11":"2.6.19"

有关更多信息，您可以使用spark-shell -h。希望对您有所帮助！

如何在Windows的Spark Shell中导入Play Framwork Jar？

1 个答案: