IllegalArgumentException:“在使用spark.read.csv时实例化'org.apache.spark.sql.hive.HiveSessionState'时出错:”

时间:2019-06-24 09:18:51

标签: python apache-spark pyspark ibm-watson data-science-experience

我正在使用IBM dsx服务执行机器学习。我正在尝试将Windows计算机中的CSV文件'textcat.csv'引入jupyter笔记本,但是我不断收到此错误'IllegalArgumentException:实例化'org.apache.spark.sql.hive.HiveSessionState'时出错

我尝试了以下命令 df = spark.read.csv('// D:/documents/bigdatacv/textcat.csv',header = True)

执行的命令应将csv文件作为spark数据框带入我的spark环境中。

但我收到此错误消息

IllegalArgumentException:“实例化org.apache.spark.sql.hive.HiveSessionState时出错:”

任何解决此问题的建议都会受到欢迎

0 个答案:

没有答案