YARN负责通过HDFS分发数据

时间:2018-03-13 13:43:49

标签: hadoop hdfs yarn

我是Hadoop的初学者,我无法理解我们如何通过HDFS分发数据:

1- Manually   
2- with YARN
3- other ways to do it
4- Automatically

1 个答案:

答案 0 :(得分:1)

将数据添加到HDFS时会自动复制数据。只需执行命令

hdfs dfs -copyFromLocal <local-file> <hdfs-location>

将文件放在HDFS上,复制因子为3(默认情况下)。复制完全自动化,并从用户那里抽象出来。