我正在伪分布式hadoop安装上运行一个简单的ItemSimilarityJob mahout作业,并且该过程在一段时间后停止,只有消息被杀死:
12/06/05 21:04:52 INFO mapred.JobClient: map 33% reduce 8%
12/06/05 21:05:18 INFO mapred.JobClient: map 36% reduce 8%
12/06/05 21:05:30 INFO mapred.JobClient: map 39% reduce 8%
Killed
任何人都知道为什么会这样?我有几次跑,这种情况总是发生,但是在不同的阶段。
解决:看来,如果我的计算机休眠,它会杀死所有HADOOP工作。
谢谢, 伊利亚·
答案 0 :(得分:2)
让计算机进入睡眠状态不会导致进程中断。问题在于,当它醒来时,工人似乎没有在很长一段时间内报告,并且他们被认为被卡住了,所以被杀死了。是的,“修复”当然是不让它进入睡眠状态。