性能测试基础
性能测试是评估系统在特定工作负载下的响应时间、吞吐量、资源利用率等指标的过程。对于JVM应用来说，性能测试不仅要关注应用层面的性能，还要深入了解JVM层面的行为特征。
核心理解
性能测试不是一次性的活动，而是贯穿整个开发生命周期的持续过程。通过建立基准、监控变化、分析瓶颈，形成性能优化的闭环。
性能测试类型
基准测试
测量特定代码片段或算法的性能基线，为后续优化提供对比依据。
负载测试
在预期负载下测试系统性能，验证系统是否满足性能要求。
压力测试
超出正常负载测试系统极限，找出系统的瓶颈和破坏点。
稳定性测试
长时间运行测试，验证系统在持续负载下的稳定性。
关键性能指标
- 响应时间（Response Time）：系统处理请求所需的时间
- 吞吐量（Throughput）：单位时间内系统能处理的请求数量
- 并发用户数（Concurrent Users）：系统能同时支持的用户数量
- 资源利用率（Resource Utilization）：CPU、内存、网络等资源的使用情况
- 错误率（Error Rate）：请求失败的比例
JMH基准测试
JMH（Java Microbenchmark Harness）是OpenJDK提供的专业基准测试工具，专门用于测量Java代码的性能。它能够避免JVM优化带来的测试偏差，提供准确可靠的性能数据。
JMH核心特性
- JVM预热：自动处理JIT编译器的预热过程
- 死代码消除：防止编译器优化掉测试代码
- 常量折叠：避免编译时常量优化影响测试结果
- 循环展开：控制循环优化对测试的影响
- 统计分析：提供详细的统计数据和置信区间
JMH基本使用
@BenchmarkMode(Mode.AverageTime)
@OutputTimeUnit(TimeUnit.NANOSECONDS)
@State(Scope.Benchmark)
@Fork(1)
@Warmup(iterations = 3, time = 1, timeUnit = TimeUnit.SECONDS)
@Measurement(iterations = 5, time = 1, timeUnit = TimeUnit.SECONDS)
public class StringConcatBenchmark {
@Param({"10", "100", "1000"})
private int size;
@Benchmark
public String stringBuilder() {
StringBuilder sb = new StringBuilder();
for (int i = 0; i < size; i++) {
sb.append("test");
}
return sb.toString();
}
@Benchmark
public String stringBuffer() {
StringBuffer sb = new StringBuffer();
for (int i = 0; i < size; i++) {
sb.append("test");
}
return sb.toString();
}
@Benchmark
public String stringConcat() {
String result = "";
for (int i = 0; i < size; i++) {
result += "test";
}
return result;
}
}
运行JMH测试
// 运行基准测试
public static void main(String[] args) throws Exception {
Options opt = new OptionsBuilder()
.include(StringConcatBenchmark.class.getSimpleName())
.build();
new Runner(opt).run();
}
JMH注解详解
@Benchmark
标记需要进行基准测试的方法，JMH会对这些方法进行性能测量。
@Warmup
配置预热参数，让JIT编译器充分优化代码后再进行正式测量。
@Measurement
配置正式测量的参数，包括迭代次数和每次迭代的时间。
@State
定义测试状态的作用域，控制测试数据的生命周期。
性能分析工具
除了JMH基准测试，还需要使用各种性能分析工具来深入了解应用的运行状况，识别性能瓶颈，指导优化方向。
Profiling工具对比
JProfiler
功能强大的商业性能分析工具，提供CPU、内存、线程等全方位分析。
Async Profiler
低开销的采样分析器，支持CPU和内存分析，生成火焰图。
VisualVM
免费的可视化性能分析工具，集成了多种监控和分析功能。
Arthas
阿里开源的Java诊断工具，支持在线问题诊断和性能分析。
火焰图分析
火焰图是一种可视化性能分析工具，能够直观地展示程序的调用栈和CPU使用情况。通过火焰图可以快速定位性能热点，找出占用CPU时间最多的方法。
火焰图解读技巧
火焰图的宽度表示CPU使用时间，高度表示调用栈深度。最宽的部分通常是性能瓶颈所在，需要重点关注和优化。
性能测试实践
建立完整的性能测试体系需要从测试环境搭建、测试用例设计、测试执行到结果分析的全流程考虑。
测试环境要求
- 环境一致性：测试环境应尽可能接近生产环境
- 资源隔离：避免其他进程干扰测试结果
- 网络稳定：确保网络延迟和带宽的稳定性
- 数据准备：准备足够的测试数据，模拟真实场景
- 监控完备：部署全面的监控系统，收集详细指标
测试策略
分层测试
从单元测试到集成测试，逐层验证性能，快速定位问题。
持续测试
集成到CI/CD流程中，每次代码变更都进行性能回归测试。
基线管理
建立性能基线，跟踪性能变化趋势，及时发现性能退化。
结果分析与优化
性能测试的最终目标是指导性能优化。通过科学的结果分析，找出真正的性能瓶颈，制定有效的优化策略。
分析维度
- 时间维度：分析响应时间分布，关注P95、P99等高分位数
- 空间维度：分析内存使用模式，关注内存泄漏和GC压力
- 并发维度：分析并发性能，关注锁竞争和线程状态
- 资源维度：分析系统资源利用率，找出资源瓶颈
- 业务维度：结合业务场景分析，关注核心业务路径性能
优化原则
遵循"测量-分析-优化-验证"的循环，每次优化都要有明确的目标和可量化的效果验证。避免过早优化，专注于解决真正的性能瓶颈。