我想将数据从AWS S3复制到我的hadoop集群。在研究复制数据时,我找到了S3DistCp。在阅读它时,我遇到了群集ID术语。我从here了解了群集ID,但无法确定如何获取我的hadoop群集的群集ID。
我在哪里可以找到我的hadoop群集的群集ID?
注意:我正在使用Horton Works 2.2群集设置
答案 0 :(得分:1)
假设您的dfs.namenode.name.dir
位置指向/hadoop/hdfs/namenode
。
您的hadoop群集ID将位于此文件/hadoop/hdfs/namenode/current/VERSION
。
在文本编辑器中打开VERSION
文件,然后搜索namespaceID
。 VERSION文件中的namespaceID是您的hadoop集群ID。
您还可以在namespaceID
文件中找到/hadoop/hdfs/namesecondary/current/VERSION
。
祝你好运!!!!