深入理解 Benchmark 基准测试：从原理到实战优化

1次阅读

没有评论

共计 1605 个字符，预计需要花费 5 分钟才能阅读完成。

性能优化是开发者经常面临的任务，但如何准确评估代码性能却是一个挑战。许多开发者简单地使用 System.currentTimeMillis() 来测量执行时间，这种方法存在很多问题：

没有考虑 JVM 预热效应
容易受到系统负载波动的影响
无法准确测量短时间任务的性能
忽视统计显著性分析

基准测试 (Benchmark) 就是为了解决这些问题而生的系统化性能评估方法。它通过科学的设计和严谨的统计，为性能优化提供可靠依据。

主流基准测试框架各有特点：

JMH(Java Microbenchmark Harness)
优势：JVM 生态最成熟，提供丰富注解和统计功能
缺点：仅限于 Java 平台，配置略显复杂
Google Benchmark
优势：C++ 生态首选，轻量高效
缺点：跨平台支持有限
BenchmarkDotNet
优势：.NET 平台最佳选择，报告详尽
缺点：生态系统相对较小
Apache Benchmark(ab)
优势：HTTP 服务测试简单直接
缺点：功能较为基础

高质量基准测试依赖几个关键技术点：

预热(Warm-up)
JIT 编译、缓存预热等都会影响性能，因此需要先执行足够次数让系统进入稳定状态。
统计方法
使用置信区间而非单一数值
消除异常值影响
考虑方差分析
环境隔离
独占 CPU 核心
禁用电源管理
关闭后台进程

以下是使用 JMH 测试 ArrayList 和 LinkedList 性能差异的示例：

@BenchmarkMode(Mode.AverageTime)
@OutputTimeUnit(TimeUnit.NANOSECONDS)
@Warmup(iterations = 5, time = 1, timeUnit = TimeUnit.SECONDS)
@Measurement(iterations = 5, time = 1, timeUnit = TimeUnit.SECONDS)
@Fork(1)
@State(Scope.Thread)
public class ListBenchmark {@Param({"100", "1000", "10000"})
    private int size;

    private List<Integer> arrayList;
    private List<Integer> linkedList;

    @Setup
    public void setup() {arrayList = new ArrayList<>(size);
        linkedList = new LinkedList<>();
        for (int i = 0; i < size; i++) {arrayList.add(i);
            linkedList.add(i);
        }
    }

    @Benchmark
    public Integer arrayListGet() {return arrayList.get(size / 2);
    }

    @Benchmark
    public Integer linkedListGet() {return linkedList.get(size / 2);
    }
}

解读测试结果时要注意：