为什么'mapred-site.xml'不包含在最新的Hadoop 2.2.0中?

时间:2013-11-23 17:26:43

标签: apache hadoop mapreduce bigdata

Hadoop的最新版本提供mapred-site.xml.template  我们是否需要使用此文件创建新的mapred-site.xml文件?  任何与Hadoop 2.2.0相关的文档或解释的链接都将非常感谢。

1 个答案:

答案 0 :(得分:11)

相信仍然需要它。对于我们工作的基本Hadoop 2.2.0双节点集群设置,我从设置文档中做了以下内容。

"

在Hadoop安装的基础上,编辑etc / hadoop / mapred-site.xml文件。一个新的 Hadoop 2的配置选项是为其指定框架名称的功能 MapReduce,设置mapreduce.framework.name属性。在这个安装中我们将使用 #34;纱线的价值"告诉MapReduce它将作为YARN应用程序运行。 首先,将模板文件复制到mapred-site.xml。

  

cp mapred-site.xml.template mapred-site.xml

接下来,将以下内容复制到Hadoop etc / hadoop / mapred-site.xml文件中,并删除原始的空标记。

 <configuration> 
 <property>   
 <name>mapreduce.framework.name</name>  
 <value>yarn</value>  
 </property>   
 </configuration>

&#34;

Wrt文档,我发现this最有用。此外,用于群集设置和其他群集相关配置的etc / hosts配置有点难以弄清楚。