Spark作业错误:无法续订令牌:种类:TIMELINE_DELEGATION_TOKEN

时间:2017-07-11 18:15:48

标签: apache-spark kerberos kerberos-delegation

我提交的火花会用以下命令写入Kerborized集群。我没有在spark程序中添加任何代码来启用身份验证等内容。我只是通过spark-submit传递了principal和keytab。 但我得到'无法更新令牌'错误。我的火花程序可以连接到hive Metastore。

我能知道造成这种情况的原因吗?

> ./spark-submit --class com.abcd.xyz.voice.cc.cc.cc --verbose --master
> yarn --deploy-mode cluster --executor-cores 6 --executor-memory 6g
> --driver-java-options "-Dlog4j.configuration=file:/app/home/abcd/conf/my_Driver.log4j" 
> --principal myowner@CABLE.abcd.COM --keytab /app/home/emm/myfile.keytab --conf
> "spark.executor.extraJavaOptions=-Dlog4j.configuration=file:/app/home/emm/conf/my_Executor.log4j
> -Ddm.logging.name=LegalDemand" /app/home/emm/bin/myjar.jar --files file:///app/home/emm/mykeytab.keytab --conf
> spark.hadoop.fs.hdfs.impl.disable.cache=true
> /app/home/emm/conf/my.properties
  

17/07/11 18:02:42 INFO yarn.Client:            客户端令牌:N / A.            诊断:无法续订令牌:种类:TIMELINE_DELEGATION_TOKEN,服务:172.27.30.133:8188,Ident:   (owner = myowner,renewer = yarn,realUser =,issueDate = 1499796160528,   maxDate = 1500400960528,sequenceNumber = 74505,masterKeyId = 294)            ApplicationMaster主机:N / A.            ApplicationMaster RPC端口:-1            队列:默认            开始时间:1499796160725            最终状态:失败            跟踪网址:http://abcd.net:8088/proxy/application_1499697586013_1727/            用户:myowner

0 个答案:

没有答案