JMH显示了不同方法的相同结果,无论这些方法是否包含任何代码。
示例1:要测试的空方法
public class MyBenchmark {
public static void main(String[] args) throws Exception {
org.openjdk.jmh.Main.main(args);
}
@Fork(value = 1, warmups = 0)
@Benchmark
@BenchmarkMode(Mode.AverageTime)
@Warmup(iterations = 5)
public String run() {
return "done";
}
}
运行此代码的结果是1e-8 s / op。
示例2:需要做一些工作的方法:
public class MyBenchmark {
public static void main(String[] args) throws Exception {
for (int i = 0; i < 10000000; i++) {
list.add(i);
}
org.openjdk.jmh.Main.main(args);
}
private static List<Integer> list = new ArrayList<>();
@Fork(value = 1, warmups = 0)
@Benchmark
@BenchmarkMode(Mode.AverageTime)
@Warmup(iterations = 5)
public String run() {
List<Integer> copy = new ArrayList<>();
for (Integer item : list) {
copy.add(item);
}
return "done";
}
}
结果相同:1e-8 s / op。
所以,基准显然不起作用。什么可能是错的?
答案 0 :(得分:2)
您使用的是不正确的时间刻度 - 每次操作的秒数。对于你的无操作测试来说,这似乎太大了。只需在测试中添加以下参数@OutputTimeUnit(TimeUnit.NANOSECONDS)
:
import org.openjdk.jmh.annotations.*;
import java.util.concurrent.TimeUnit;
public class MyBenchmark {
public static void main(String[] args) throws Exception {
org.openjdk.jmh.Main.main(args);
}
@Fork(value = 1, warmups = 0)
@Benchmark
@BenchmarkMode(Mode.AverageTime)
@Warmup(iterations = 5)
@OutputTimeUnit(TimeUnit.NANOSECONDS)
public String run() {
return "done";
}
}
以下结果:
# Run complete. Total time: 00:00:25
Benchmark Mode Cnt Score Error Units
MyBenchmark.run avgt 20 5.390 ± 0.264 ns/op
关于你的第二个例子,它包含几乎所有可能的问题/陷阱:
Setup
和State
以进行正确的基准初始化这是你的例子的“正确”版本(我刚刚删除了不经意的错误):
import org.openjdk.jmh.annotations.*;
import java.util.ArrayList;
import java.util.List;
import java.util.concurrent.TimeUnit;
@State(Scope.Benchmark)
@Fork(value = 1)
public class MyBenchmark {
private List<Integer> list;
@Setup
public void init() {
list = new ArrayList<>();
for (int i = 0; i < 10000000; i++) {
list.add(i);
}
}
@Benchmark
@BenchmarkMode(Mode.AverageTime)
@Warmup(iterations = 5)
@OutputTimeUnit(TimeUnit.NANOSECONDS)
public Object run() {
List<Integer> copy = new ArrayList<>();
for (Integer item : list) {
copy.add(item);
}
return copy;
}
}
有延迟:
# Run progress: 0.00% complete, ETA 00:00:25
# Fork: 1 of 1
# Warmup Iteration 1: 2488116493.000 ns/op
# Warmup Iteration 2: 201271178.600 ns/op
要了解微基准测试的所有可能问题,请阅读the following examples。