我是Hadoop世界的新手,我需要使用Hadoop HDFS安装mesos来构建容错的分布式文件系统,但所有安装引用都包含我的场景的必要组件,例如:MapReduce。
您对此有任何想法或参考吗?
答案 0 :(得分:5)
绝对可能。不要认为Hadoop是一个可安装的程序,它只是由一群在集群内不同节点上运行的java进程组成。
如果你使用hadoop tar ball,你可以只运行NameNode和DataNodes进程,如果你只想要HDFS。
如果您使用其他hadoop发行版(例如HDP),我认为HDFS和mapreduce来自不同的rpm软件包,但安装两个rpm软件包都有害。如果您只需要HDFS,请再次运行NameNode和DataNodes。