有可能只安装Hadoop HDFS吗?

时间:2015-01-21 17:06:00

标签: hadoop mapreduce hdfs mesos mesosphere

我是Hadoop世界的新手,我需要使用Hadoop HDFS安装mesos来构建容错的分布式文件系统,但所有安装引用都包含我的场景的必要组件,例如:MapReduce。

您对此有任何想法或参考吗?

1 个答案:

答案 0 :(得分:5)

绝对可能。不要认为Hadoop是一个可安装的程序,它只是由一群在集群内不同节点上运行的java进程组成。

如果你使用hadoop tar ball,你可以只运行NameNode和DataNodes进程,如果你只想要HDFS。

如果您使用其他hadoop发行版(例如HDP),我认为HDFS和mapreduce来自不同的rpm软件包,但安装两个rpm软件包都有害。如果您只需要HDFS,请再次运行NameNode和DataNodes。