我是hadoop的新手。我想对hadoop集群进行压力/性能测试。为此,我按照Hadoop benchmarking给出的说明进行操作。区别在于他在教程中谈论的是hadoop 0.20.0版本,我试图在hadoop 2.4.0中运行类似的东西。我理解教程可能无法完全运行,因为版本有很多变化。为了在Hadoop上执行IO性能测试,在教程中他告诉我使用TestDFSIO。但是在我的hadoop安装中我找不到相同的东西。
要查找TestDFSIO,我尝试了以下命令,
jar tf /home/hadoop/share/hadoop/hdfs/hadoop-hdfs-2.4.0-tests.jar|grep TestDFS
但是找不到它。所以,我假设我在新版本中更改了文件名。有人可以帮助找到新的文件名吗?或hadoop 2.4.0所需的等效基准技术?
答案 0 :(得分:1)
找到了具有TestDFSIO和其他基准标记类/代码的jar。它存在于
中/home/hadoop/share/hadoop/mapreduce/hadoop-mapreduce-client-jobclient-2.4.0-tests.jar
这里 / home / hadoop 是我的hadoop安装路径。它可能不一样。