使用oozie java动作运行spark job

时间:2017-03-18 20:11:15

标签: apache-spark yarn oozie hadoop2

我可以运行oozie示例,MR和Hive在使用spark运行oozie时遇到问题。

我在纱线上使用火花,我想在oozie中使用java动作来运行这个例子。

提交作业后,iam无法连接到资源管理器,它正在尝试多次连接rm并且作业正在被杀死。

在我的代码中,iam也将资源管理器地址和端口传递给spark conf。

非常感谢任何帮助!!!

0 个答案:

没有答案