如何将大量的小型非结构化文件传输到HDFS

Question

我有以下问题：

1. 我需要在一个目录（文件名后附有时间戳）中将较少数量的文件（每3小时近1000000个）传输到HDFS

任何人都可以确定FLUME是这种情况的最佳选择（kafka不是套件，因为我不需要实时）

请提出建议。