我正在使用FIWARE BigData Analysis GE - Cosmos,我需要使用RESTful API。 我知道有用于HDFS的RESTful API(例如WebHDFS),但我可以运行MapReduce作业吗?怎么样?
由于
答案 0 :(得分:0)
没有用于运行MapReduce作业的REST API,但在FIWARE LAB中的Cosmos实例上运行了Oozie服务器来解决此问题。
通过使用Oozie,您可以描述数据分析的工作流程;您可以将这些工作流视为一系列为处理数据而执行的操作,包括MapReduce作业,Hive查询,shell脚本等操作。
因此,您可以为MapReduce作业描述单个操作工作流程。
Oozie可以在several ways中使用,其中一个是通过其REST API。所有细节都可以找到here。