在主节点中创建Spark会话

时间:2019-02-05 05:36:38

标签: apache-spark pyspark

我试图将我的Spark代码从jupyter笔记本运行到我的公司服务器。 所以我添加了以下代码

spark = SparkSession.builder.master("spark://host:port") \
.appName("usres information analysis") \
.config("spark.executor.memory","5g") \
.getOrCreate()

在我的笔记本中。但是我遇到了以下错误

An error occurred while calling None.org.apache.spark.api.java.JavaSparkContext.
: java.lang.NullPointerException

我的代码有问题吗?

0 个答案:

没有答案