在Mac OS X上设置Hadoop客户端

时间:2014-04-17 18:43:45

标签: hadoop osx-mavericks cloudera-cdh

目前,我有3节点集群使用MRv1运行CDH 5.0。我想弄清楚如何在我的Mac上设置Hadoop。所以,我可以向集群提交作业。根据“在CDH 5中管理Hadoop API依赖项”,您只需要/usr/lib/hadoop/client-0.20/*中的文件我是否还需要以下文件? Cloudera在tarball中有hadoop-client吗?

- core-site.xml
- hdfs-site.xml
- mapred-site.xml

1 个答案:

答案 0 :(得分:1)

是的,我可以利用cloudera tarball来设置hadoop客户端,同样可以从以下路径下载,配置文件可以在Hadoop下的etc / hadoop /目录下使用,只需要修改那些文件根据你的环境。

http://archive-primary.cloudera.com/cdh5/cdh/5/hadoop-2.2.0-cdh5.0.0-beta-2.tar.gz

如果上述链接与您的版本不符,请使用以下链接获取可用的hadoop版本

http://archive-primary.cloudera.com/cdh5/cdh/5/