spark sql权限被拒绝user = anonymous

时间:2017-02-24 02:03:32

标签: apache-spark apache-spark-sql

当被拒绝的用户是anonoymous时,Spark SQL返回的错误:

src:hdfs://ournamenode:8020/tmp/hive/spark-root_hive_2017-02-24_00-40-48_944_8869995689545229744-1/-ext-10000/load_date=20170223/part-07262, dest: hdfs://ournamenode:8020/user/hive/warehouse/p13n.db/message_viewed_new/load_date=20170223/part-07262, Status:true
chmod: changing permissions of 'hdfs://ournamenode:8020/user/hive/warehouse/p13n.db/message_viewed_new/load_date=20170223/part-07262': Permission denied. user=anonymous is not the owner of inode=part-07262

有什么地方可以解决吗?

1 个答案:

答案 0 :(得分:1)

我假设你使用beeline来运行查询。一种解决方法是使用-n选项指定用户名。

导致此权限被拒绝问题的问题是“spark-warehouse”目录是在“anonymous”用户下创建的,而此目录中的文件是在运行beeline命令的用户下创建的。