HDFS是否在Flume中使用带有默认配置的“反模式”

时间:2012-10-07 11:03:38

标签: hadoop hdfs flume gfs

HDFS sink default parameters in Apache Flume,这似乎会产生大量非常小的文件(1 kB卷)。根据我对GFS / HDFS的了解,块大小为64MB,文件大小应该是千兆字节,以确保一切运行有效。

所以我很好奇Flume的默认参数是误导还是我错过了其他的东西。

干杯。

0 个答案:

没有答案