我想运行一个包含spark-submit
和i kerberos的shell脚本。这是我的档案:
#!/bin/sh
kinit -kt zeri.keytab zeri@GT.COM
spark-submit --class structure_Ot --master yarn://xx.xx.xx.50 /home/spark_jars/ot_spark_2.10-0.1-SNAPSHOT.jar /user/zeri/worskspace/ hdfs:///user/zeri/file/app_desc hdfs:///user/zeri/file/rat_desc ot_appsession ot_appsession_agg hdfs:///user/zeri/filter
我的spark-submit
工作正常,但是当我尝试使用该文件与oozie建立工作流程时,我收到了错误。
我试图用oozie运行火花罐,我也得到了一个错误,这是我的另一个question。