sqoop作业数据也存储在edgenode和namenode中

时间:2018-10-03 18:49:52

标签: cluster-computing sqoop

当我使用edgenode向集群提交一个sqoop作业时,数据也存储在edgenode,name节点和data-node中。在50070上的hdfs文件系统中单击一个文件时,我注意到了这一点。我使用的群集是前提条件。我不确定这是什么错误。我认为可能与群集设置有关。有人可以帮我吗?

1 个答案:

答案 0 :(得分:0)

可能是您也可能将“ edgenode / namenode”配置为“ datanode”。如果您使用的是Cloudera / Hortonworks之类的任何发行版,请检查配置到datanode的主机数,并删除edgenode / namenode主机(如果有)。