标签: hadoop mapreduce hdfs
我有一个自定义OutputFileFormat,其中包含自定义FileOutputCommitter。我注意到虽然我FileOutputCommitter.commitJob&调用abortJob commitTask & abortTask未被调用。
OutputFileFormat
FileOutputCommitter
FileOutputCommitter.commitJob
abortJob
commitTask & abortTask
我还重写了两个needTaskCommit方法以返回true。
needTaskCommit