在CDH 5 beta节点的子集上运行TestDFSIO测试

Question

我在两个ESXi服务器上的五个节点上设置了Cloudera CDH 5 beta群集：

ESXi Server 1 :
 1. NameNode VM
 2. DataNode1 VM
 3. DataNode3 VM

ESXi server 2:
 1. DataNode3 VM
 2. DataNode4 VM

我想运行TestDFSIO测试，以便它仅在ESXi 1 VM上运行。 即我想确保测试在同一网络上的虚拟机上运行。

我应该为此更改哪个配置参数？

我正在运行以下命令。

TestDFSIO命令：

写：

sudo -u hdfs hadoop jar /opt/cloudera/parcels/CDH-5.0.0-0.cdh5b1.p0.57/lib/hadoop-0.20-mapreduce/hadoop-test-2.2.0-mr1-cdh5.0.0-beta-1.jar TestDFSIO -write -nrFiles 100 -fileSize 10GB -resFile /tmp/TestDFSIOwrite.txt

读：

sudo -u hdfs hadoop jar /opt/cloudera/parcels/CDH-5.0.0-0.cdh5b1.p0.57/lib/hadoop-0.20-mapreduce/hadoop-test-2.2.0-mr1-cdh5.0.0-beta-1.jar TestDFSIO -read -nrFiles 100 -fileSize 10GB -resFile /tmp/TestDFSIOread.txt

我是否需要使用某些配置修改命令。选项？

Answer 1

在运行测试之前，您应该停止其他数据节点。您不能限制TestDFSIO在节点子集上运行。