在Hadoop中将多个文件合并为更大的文件

时间:2015-07-10 16:28:37

标签: hadoop

有没有办法可以将大量文件合并到Hadoop中较小的文件集中?

我有大约1000多个由进程创建的文件。我想将这些文件合并到我本地服务器上的10个文件中。我使用了getmerge但是将1000多个文件合并到我本地服务器上的1个大文件中。我使用了copyToLocal,并按原样复制了所有1000多个文件。

0 个答案:

没有答案