如何将两个单独的ubuntu计算机连接到同一个hadoop集群

时间:2014-04-14 09:56:06

标签: ubuntu hadoop vmware

我正在使用Hadoop为大学项目进行一些数据分析。我的大学很友好地让我访问了一台机器,系统正在运行Ubuntu。 在我在这个系统上放任何东西之前,我正在自己的笔记本电脑上测试它。我有虚拟机VMware和Ubuntu安装。 由于我的“主要工作”正在我的虚拟机上完成,到目前为止我在一个集群上使用Hadoop(无视我项目中“大数据分析”部分的全部内容)。 有没有办法让我将该机器连接到我的虚拟机VMware版本的Ubuntu,至少演示两个节点的集群,或者这是不可能的,因为它们不在同一个网络上?

提前致谢。

2 个答案:

答案 0 :(得分:0)

如果你想要hadoop多节点安装shell脚本,请转到下面的链接。 https://github.com/tonyreddy/Cloudera-Hadoop-2.0.0-MultiNode-shell-script 下载脚本并安装它将起作用。

答案 1 :(得分:0)

  1. 在主机文件
  2. 中添加主机名
  3. 执行无密码SSH
  4. 启动时,您必须将其中一个系统设为namenode。无论是笔记本电脑还是系统提供的。
  5. 根据您选择的名称节点更改HDFS-Site.xml。