默认安装哪些hadoop组件?

时间:2018-04-02 07:49:55

标签: bigdata apache-zookeeper hadoop2

我正在尝试安装Hadoop进行开发。我没有从Cloudera安装Hadoop,因为我有8GB的RAM限制,不建议安装CDH VM。因此,我通过下载tar文件手动安装hadoop然后解压缩它(hadoop-2.8.0.tar.gz。我想在Hadoop中尝试整个生态系统,因为我正在关注Hadoop一本权威指南。

我的问题:

  1. 此类安装中默认安装了哪些生态系统组件?

  2. 我是需要单独安装ZooKeeper还是已经存在?

  3. 组件是否会因为这样的安装而发生冲突?我需要采取哪些预防措施才能避免这种情况?

1 个答案:

答案 0 :(得分:0)

该档案仅包括HDFS和MapReduce框架。这足以让你开始使用hadoop,但它并没有包括hadoop生态系统中的任何其他项目。您可以在8GB虚拟机上运行Cloudera QuickStart VM。如果你想尝试其他项目(例如Spark,Hive,HBase ......),这就是你要走的路,因为你很难将所有那些来自hadoop生态系统的项目整合在一起你自己。

关于您的其他问题:

  • 不,您下载的存档中没有zookeeper (如果你只是想使用HDFS和MapReduce,你就不需要它了 一个VM)。

  • 不,组件赢了"#34;冲突" (请记住,只有两个 组件 - HDFS和MapReduce - 你在hadoop-2.8中有 记录)。