Hadoop地图任务停留在100％

Question

我使用cloudera的hadoop发行版在多个peta字节集群中运行map reduce作业。我看到一些地图被卡在100％。它们显示为100％但继续运行。经过很多延迟后，他们终于成功了，但这需要花费很多时间，比如有些时候他们需要花费几个小时才会显示为100％。

Answer 1

根据输入读数计算地图进度百分比。因此，如果您在阅读数据后在映射器中做了大量工作，或者在处理完之前阅读，那么您会更频繁地看到这一点。