我有三个map reduce作业,需要配置为cron作业。
我尝试创建cron作业来运行mapreduce但它不起作用。我的意思是地图减少作业运行没有启动。
请帮助设置cron作业来运行map reduce work。我可以使用Oozie来设置工作流程作业,但只想使用cronjob。
答案 0 :(得分:0)
我强烈建议使用Oozie进行MapReduce作业调度。为您完成了大量工作 - 工作流程,数据依赖性,监控。您可以从简单的类似cron的场景开始,然后在没有大型重新设计的情况下进行扩展。有关示例,请参阅https://github.com/yahoo/oozie/wiki/Oozie-Coord-Use-Cases。