用于Cosmos map-reduce的RESTful API

时间:2015-05-20 11:19:25

标签: fiware

我正在使用FIWARE BigData Analysis GE - Cosmos,我需要使用RESTful API。 我知道有用于HDFS的RESTful API(例如WebHDFS),但我可以运行MapReduce作业吗?怎么样?

由于

1 个答案:

答案 0 :(得分:0)

没有用于运行MapReduce作业的REST API,但在FIWARE LAB中的Cosmos实例上运行了Oozie服务器来解决此问题。

通过使用Oozie,您可以描述数据分析的工作流程;您可以将这些工作流视为一系列为处理数据而执行的操作,包括MapReduce作业,Hive查询,shell脚本等操作。

因此,您可以为MapReduce作业描述单个操作工作流程。

Oozie可以在several ways中使用,其中一个是通过其REST API。所有细节都可以找到here