如何使用JMH按顺序运行基准测试中的方法？

Question

在我的场景中，基准测试中的方法应该在一个线程中按顺序运行并按顺序修改状态。

例如，有一个列表

调用序列必须是add（）--

也就是说，add（） 和 remove（） 必须按顺序在一个线程中调用。

在使用JMH控制方法的顺序中，我了解到这些方法按照字典顺序运行。我尝试了下面的代码：

java prettyprint-override">@State(Scope.Group)
@OutputTimeUnit(TimeUnit.MILLISECONDS)
@BenchmarkMode(Mode.AverageTime)
@Fork(value = 10)
public class ListBenchmark {

    private List<Integer> num;

    public static void main(String[] args) throws RunnerException {
        Options options = new OptionsBuilder()
                .verbosity(VerboseMode.NORMAL)
                .syncIterations(true)
                .threads(1)
                .include(".*" + ListBenchmark.class.getCanonicalName() + ".*")
                .build();

        new Runner(options).run();
    }

    @Setup(Level.Invocation)
    public void setup() throws Exception {
        num = new ArrayList<>();
    }

    @Benchmark
    @BenchmarkMode(Mode.SingleShotTime)
    @Group("num")
    public void add() throws Exception {
        num.add(1);
    }

    @Benchmark
    @BenchmarkMode(Mode.SingleShotTime)
    @Group("num")
    public void remove() throws Exception {
        num.remove(0);
    }
}

但它不起作用，因为add方法和remove方法同时运行。在某些情况下，remove在add之前运行，并引发 。

如何用JMH连续运行基准测试中的方法？




Answer 1

你从一个错误的前提条件开始，因此一切都失败了。你可以在这里看到作者更广泛的解释。你想在暗示不对称的地方得到对称。

如果你想看看需要多少添加-

@State(Scope.Thread)
public static class BothAddAndRemove {

    List<Integer> num;

    @Setup(Level.Invocation)
    public void setup() throws Exception {
        num = new ArrayList<>();
    }
}

@State(Scope.Thread)
public static class RemoveOnly {

    List<Integer> num;

    @Setup(Level.Invocation)
    public void setup() throws Exception {
        num = new ArrayList<>();
        num.add(1);
    }
}


@Fork(25)
@Benchmark
@BenchmarkMode(Mode.SingleShotTime)
public int add(BothAddAndRemove both) {
    both.num.add(1);
    return both.num.remove(0);
}

@Fork(25)
@Benchmark
@BenchmarkMode(Mode.SingleShotTime)
public int removeOnly(RemoveOnly removeOnly) {
    return removeOnly.num.remove(0);
}