如何通过Hadoop 2.5.1 Rest api运行mapreduce作业?

时间:2014-10-30 16:05:29

标签: rest hadoop mapreduce submit

Hadoop 2.5.1添加了一个新的Rest api来提交申请: http://hadoop.apache.org/docs/r2.5.1/hadoop-yarn/hadoop-yarn-site/ResourceManagerRest.html#Cluster_Applications_APISubmit_Application

“Cluster Applications API(提交申请)  提交应用程序API可用于提交应用程序。如果要提交应用程序,则必须首先使用Cluster New Application API获取application-id。 “

在Hadoop 2.4从命令行运行mapreduce示例之前,我们必须执行hadoop命令行shell:  bin / hadoop jar share / hadoop / mapreduce / hadoop-mapreduce-examples-2.5.1.jar grep input output'dfs [a-z。] +'

现在在Hadoop 2.5.1中可以使用上面的Rest api运行相同的mapreduce示例,但是我无法(我不明白)应该如何编写http Request Body。  我阅读上面的文档,示例是关于YARN应用程序,但我无法为mapreduce应用程序创建一个主体。  特别是我不清楚如何填充am-container-spec对象的元素(特别是local-resources和命令)让应用程序运行hadoop-mapreduce-examples-2.5.1.jar grep示例。  有人可以发送有关请求主体的JSON或XML来运行上面的mapreduce示例吗?

0 个答案:

没有答案