标签: hadoop mapreduce
我目前正在使用带有5个从属设备的hadoop 5节点群集 每个datanode的容量为8.7 TB。我正在执行map reduce作业以执行312 GB的数据,但在执行程序后出现Apllication错误。我无法理解这个错误,首先是地图缩减工作开始,它从1%再次开始后达到了11%。
1)我是否正在执行一个无法在群集配置中执行的更大的数据集?
2)我是否需要配置我的地图缩减驱动程序以在数据集上运行作业,可能的配置是什么? 有关详细信息,请参阅屏幕截图。