如何设置cron job来运行map reduce?

时间:2013-12-26 05:22:26

标签: hadoop oozie

我有三个map reduce作业,需要配置为cron作业。

我尝试创建cron作业来运行mapreduce但它不起作用。我的意思是地图减少作业运行没有启动。

请帮助设置cron作业来运行map reduce work。我可以使用Oozie来设置工作流程作业,但只想使用cronjob。

1 个答案:

答案 0 :(得分:0)

我强烈建议使用Oozie进行MapReduce作业调度。为您完成了大量工作 - 工作流程,数据依赖性,监控。您可以从简单的类似cron的场景开始,然后在没有大型重新设计的情况下进行扩展。有关示例,请参阅https://github.com/yahoo/oozie/wiki/Oozie-Coord-Use-Cases