是从每个节点上的本地文件系统输入还是仅在驱动程序节点上输入?

时间:2016-06-30 09:44:22

标签: hadoop2 hadoop-streaming

Hadoop接受来自本地文件系统的输入,但是我发现没有明确的指令,无论输入是来自所有节点的本地文件系统还是仅来自驱动程序节点的本地文件系统?

在Hadoop Streaming中,-input选项似乎意味着来自具有给定文件名的所有节点的输入,我还想确认这个

1 个答案:

答案 0 :(得分:0)

hadoop流的-input选项不是来自本地文件系统,它应该是HDFS路径。

因此,这是一个HDFS路径,文件/目录可供执行的MapReduce作业使用。