Java--JMH--性能测试--测试软件运行效率/时间--StopWatch

这篇具有很好参考价值的文章主要介绍了Java--JMH--性能测试--测试软件运行效率/时间--StopWatch。希望对大家有所帮助。如果存在错误或未考虑完全的地方,请大家不吝赐教,您也可以点击"举报违法"按钮提交疑问。

写在前面:
很多时候想要测试代码运行时间,或者比较2个运行的效率。 最简单的方法就是Sytem.currentTimeMillis记录2开始和结束时间来算
但是Java 代码越执行越快,放在后面的方法会有优势,这个原因受留个眼,以后研究。大概有受类加载,缓存预热, jit 编译优化等原因。

简单点的StopWatch

//创建对象
StopWatch s = new StopWatch();
//计时
s.start("这一次的名字");
....程序
//结束
s.stop();
//生成一个字符串,其中包含描述所有已执行任务的表。
System.out.println(s.prettyPrint());

多个对象

需要有参构造

//使用给定的 ID 构造一个新 StopWatch 。
//当我们有来自多个秒表的输出并需要区分它们时,该 ID 很方便。
public StopWatch(String id) 

其他的应该不太用的着

JMH

一款一款官方的微基准测试工具 - JMH.
JMH(Java Microbenchmark Harness)是用于代码微基准测试的工具套件,主要是基于方法层面的基准测试,精度可以达到纳秒级。使用 JMH 可以让你方便快速的进行一次严格的代码基准测试,并且有多种测试模式,多种测试维度可供选择;而且使用简单、增加注解便可启动测试。

加入依赖

他们说高版本jdk自带,我用的jdk17不知道为啥没有,也没有找到有教程。

        <dependency>
            <groupId>org.openjdk.jmh</groupId>
            <artifactId>jmh-core</artifactId>
            <version>1.35</version>
        </dependency>
        <dependency>
            <groupId>org.openjdk.jmh</groupId>
            <artifactId>jmh-generator-annprocess</artifactId>
            <version>1.35</version>
        </dependency>

插件

这里可以使用JMH Java Microbenchmark Harness插件快速生成。而且可以像 JUnit 一样,运行单独的 Benchmark 方法\运行类中所有的 Benchmark 方法.
生成代码
java stopwatch性能问题,Java的哪些事,算法,java,开发语言,junit,测试工具,性能测试

右边可以直接运行
java stopwatch性能问题,Java的哪些事,算法,java,开发语言,junit,测试工具,性能测试

第一个案列

将要测试的方法添加@Benchmark注解即可。
然后用main方法启动就可以了。

public class JMHSample_01_HelloWorld {

    @Benchmark
    public void wellHelloThere() {
        // this method was intentionally left blank.
    }
    

    public static void main(String[] args) throws RunnerException {
        Options opt = new OptionsBuilder()
                .include(JMHSample_01_HelloWorld.class.getSimpleName())
                .forks(1)
                .build();

        new Runner(opt).run();
    }
}

最后的结果,前面还有一大堆,在结果进行分析
java stopwatch性能问题,Java的哪些事,算法,java,开发语言,junit,测试工具,性能测试

结果分析(逐行分析)

结果输出有这样几个部分
版本和参数

// JMH版本号
# JMH version: 1.35  
//jdk的版本和路径参数
# VM version: JDK 17, Java HotSpot(TM) 64-Bit Server VM, 17+35-LTS-2724
# VM invoker: D:\study\app\jdk\bin\java.exe
# VM options: -javaagent:D:\idea\IntelliJ IDEA 2021.3.3\lib\idea_rt.jar=9272:D:\idea\IntelliJ IDEA 2021.3.3\bin -Dfile.encoding=UTF-8

//黑洞模式
# Blackhole mode: compiler (auto-detected, use -Djmh.blackhole.autoDetect=false to disable)

//预热的次数和每一次的时间
# Warmup: 5 iterations, 10 s each //5次每次10s
// 测试的次数和时间
# Measurement: 5 iterations, 10 s each
// 超时,每次迭代10分钟
# Timeout: 10 min per iteration
//线程
# Threads: 1 thread, will synchronize iterations
//输出结果打印方式
# Benchmark mode: Throughput, ops/time//吞吐量
//执行的类
# Benchmark: org.openjdk.jmh.samples.JMHSample_01_HelloWorld.wellHelloThere

每次的统计

# Run progress: 0.00% complete, ETA 00:01:40
# Fork: 1 of 1
# Warmup Iteration   1: 1895950720.598 ops/s
# Warmup Iteration   2: 1906625977.172 ops/s
# Warmup Iteration   3: 2580159163.977 ops/s
# Warmup Iteration   4: 2564641382.865 ops/s
# Warmup Iteration   5: 2561493559.473 ops/s
Iteration   1: 2529900034.146 ops/s
Iteration   2: 2497119600.056 ops/s
Iteration   3: 2512703440.984 ops/s
Iteration   4: 2568341912.143 ops/s
Iteration   5: 2574424415.895 ops/s

这一部分是总体的统计
有最小值平均值和最大值 、标准差、置信区间


Result "org.openjdk.jmh.samples.JMHSample_01_HelloWorld.wellHelloThere":
  2536497880.645 ±(99.9%) 130763529.779 ops/s [Average]

  (min, avg, max) = (2497119600.056, 2536497880.645, 2574424415.895), stdev = 33958873.426
  CI (99.9%): [2405734350.865, 2667261410.424] (assumes normal distribution)

一些介绍,没啥用

# Run complete. Total time: 00:01:41

REMEMBER: The numbers below are just data. To gain reusable insights, you need to follow up on
why the numbers are the way they are. Use profilers (see -prof, -lprof), design factorial
experiments, perform baseline and negative tests that provide experimental control, make sure
the benchmarking environment is safe on JVM/OS/HW level, ask for reviews from the domain experts.
Do not assume the numbers tell you what you want them to tell.

NOTE: Current JVM experimentally supports Compiler Blackholes, and they are in use. Please exercise
extra caution when trusting the results, look into the generated code to check the benchmark still
works, and factor in a small probability of new VM bugs. Additionally, while comparisons between
different JVMs are already problematic, the performance difference caused by different Blackhole
modes can be very significant. Please make sure you use the consistent Blackhole mode for comparisons.

这里比较重要,一般都会看

属性 介绍
benchmark 执行的
mod 执行模式
cnt 轮次
score 执行的结果平均值
error 误差
units 单位
Benchmark                                Mode  Cnt           Score           Error  Units
JMHSample_01_HelloWorld.wellHelloThere  thrpt    5  2536497880.645 ± 130763529.779  ops/s

进程已结束,退出代码0

使用介绍

只打算简单介绍对象的配置,注解肯定用的更舒服。

对象配置

创建对象后在后面逐个添加属性,然后在使用Runner类启动。
java stopwatch性能问题,Java的哪些事,算法,java,开发语言,junit,测试工具,性能测试

Benchmark

为该方法生成基准代码,在基准列表中将该方法注册为基准,从注释中读出默认值,并大致为基准测试运行准备环境。

适用:ElementType.METHOD,后面用注解表示了

BenchmarkMode

基准测试模式声明运行此基准测试的默认模式。有关可用的基准测试模式

@Target({ElementType.METHOD, ElementType.TYPE})

Mode[] value:模式,必须的
	AverageTime - 调用的平均时间
	SampleTime - 随机取样,最后输出取样结果的分布,输出会比较多,但是不会全部统计
	SingleShotTime - 只会执行一次,通常用来测试冷启动时候的性能。
	All - 所有的benchmark modes。

Fork

执行次数,除了value默认就好了

@Target({ElementType.METHOD,ElementType.TYPE})

int BLANK_FORKS = -1;

String BLANK_ARGS = "blank_blank_blank_2014";

/** @return 表示该benchMark执行多少次 */
int value() default BLANK_FORKS;

/** @return 线束应分叉并忽略结果的次数 */
int warmups() default BLANK_FORKS;

/** @return 要运行的 JVM 可执行文件 */
String jvm() default BLANK_ARGS;

/** @return 要在命令行中替换的 JVM 参数 */
String[] jvmArgs() default { BLANK_ARGS };

/** @return 要在命令行中预置的 JVM 参数*/
String[] jvmArgsPrepend() default { BLANK_ARGS };

/** @return :要在命令行中追加的 JVM 参数*/
String[] jvmArgsAppend() default { BLANK_ARGS };

fork(0)同一个进程执行一次
fork(1)新建一个进程执行一次
fork(n)新建n个进程
默认的-1等同于传5

Warmup

允许为基准设置默认预热参数

@Target({ElementType.METHOD,ElementType.TYPE})

/** @return 预热迭代次数 */
int iterations() default BLANK_ITERATIONS;

/** @return每次预热迭代的时间 */
int time() default BLANK_TIME;

/** @return 预热迭代持续时间的时间单位 */
TimeUnit timeUnit() default TimeUnit.SECONDS;

/** @return 批大小:每个操作的基准方法调用数*/
int batchSize() default BLANK_BATCHSIZE;

Measurement

设置默认测量参数。
这个和上面一样,就换成翻译了

@Target({ElementType.METHOD,ElementType.TYPE})

/** @return Number of measurement iterations */
int iterations() default BLANK_ITERATIONS;

/** @return Time of each measurement iteration */
int time() default BLANK_TIME;

/** @return Time unit for measurement iteration duration */
TimeUnit timeUnit() default TimeUnit.SECONDS;

/** @return Batch size: number of benchmark method calls per operation */
int batchSize() default BLANK_BATCHSIZE;

OutputTimeUnit

为统计结果的时间单位

@Target({ElementType.METHOD,ElementType.TYPE})

value: 时间单位

State

状态对象通常作为参数注入到方法中Benchmar。
@State 可以被继承使用,如果父类定义了该注解,子类则无需定义。由于 JMH 允许多线程同时执行测试,不同的选项含义如下:

@Target(ElementType.TYPE)

Scope.Benchmark:所有测试线程共享一个实例,测试有状态实例在多线程共享下的性能
Scope.Group:同一个线程在同一个 group 里共享实例
Scope.Thread:默认的 State,每个测试线程分配一个实例

感觉这个不太好理解,这里看官方示例
这个代码中measureShared多个线程会同时操作这个x。
如2线程轮流那么x是1 2 3 4 5 6
measureUnshared同时操作那么就是
1 1 2 2 3 3

	@State(Scope.Benchmark)
    public static class BenchmarkState {
        volatile double x = Math.PI;
    }

    @State(Scope.Thread)
    public static class ThreadState {
        volatile double x = Math.PI;
    }


    @Benchmark
    public void measureUnshared(ThreadState state) {
        // 所有基准测试线程都将调用此方法。
        //
        // 但是,由于 ThreadState 是 Scope.Thread,因此每个线程将拥有自己的状态副本,此基准将衡量未共享的情况。
        state.x++;
    }

    @Benchmark
    public void measureShared(BenchmarkState state) {
        // 由于 BenchmarkState 是 Scope.Benchmark,所有线程都将共享状态实例,我们最终将测量共享案例。
        state.x++;
    }

如果标记到类,我们看第四个代码.
那么我们相当于可以调用这个类的属性,而不用注入了。

@State(Scope.Thread)
public class JMHSample_04_DefaultState {

    double x = Math.PI;

    @Benchmark
    public void measure() {
        x++;
    }

Setup and TearDown

会在执行 benchmark 之前/后被执行,主要用于初始化/资源处理。

@Target(ElementType.METHOD)

此方法的级别。
Level value() default Level.Trial;
参数
	Level.Trial:Benchmark级别,benchmark执行完执行,最大的。
	Level.Iteration:执行迭代级别,每次执行完都会
	Level.Invocation:每次方法调用级别,每次方法调用就都执行
类型 结果
Trial Iteration 2:x = 1.059139639E9
Iteration # Warmup Iteration x = 3.54500352E8
Iteration 1: x = 7.0472257E8
Iteration 2:x = 1.059033135E9
Invocation 每次都调用一下java stopwatch性能问题,Java的哪些事,算法,java,开发语言,junit,测试工具,性能测试
    @TearDown(Level.Iteration)
    public void check() {
        System.out.println("---------------------------------");
        System.out.println("x = " + x);
    }

    @Benchmark
    public void measureRight() {
        x++;
    }

死码消除问题

介绍

在第8给示例中主要介绍了死码优化的问题。
如果一个方法调用后没有什么用,就在编译器被消除了,但这给我做基准测试带了一些麻烦

我们看第八个:
讲道理来演示的意思是measureWrong比rigth应该慢超级多,但是我怎么测试都测试不出来,不知道为什么。而且第九个也测试不出来。

    private double x = Math.PI;

    @Benchmark
    public void baseline() {
        // do nothing, this is a baseline
    }

    @Benchmark
    public void measureWrong() {
        // This is wrong: result is not used and the entire computation is optimized away.
        Math.log(x);
    }

    @Benchmark
    public double measureRight() {
        // This is correct: the result is being used.
        return Math.log(x);
    }

java stopwatch性能问题,Java的哪些事,算法,java,开发语言,junit,测试工具,性能测试

解决

第九个示例告诉我们解决。
不过我测不出来。

  1. 使用他
  2. 注入Blackhole bh 对象,使用consume方法调用
  @Benchmark
    public void measureRight_2(Blackhole bh) {
        bh.consume(Math.log(x1));
        bh.consume(Math.log(x2));
    }

同一个进程会互相影响

众所周知,JVM擅长按配置文件优化。这对基准测试不利,因为不同的测试可以将它们的配置文件混合在一起,然后为每个测试呈现“统一错误”的代码。分叉(在单独的进程中运行)每个测试都有助于避免此问题。默认情况下,JMH 将分叉测试。

    @Benchmark
    @Fork(0)
    public int measure_1_c1() {
        return measure(c1);
    }

    /*
     * Then Counter2...
     */

    @Benchmark
    @Fork(0)
    public int measure_2_c2() {
        return measure(c2);
    }

    /*
     * Then Counter1 again...
     */

    @Benchmark
    @Fork(0)
    public int measure_3_c1_again() {
        return measure(c1);
    }

请注意,C1 更快,C2 更慢,但 C1 又慢了!这是因为 C1 和 C2 的配置文件已合并在一起。请注意分叉运行的测量是多么完美。
java stopwatch性能问题,Java的哪些事,算法,java,开发语言,junit,测试工具,性能测试

还有些案例,不过不想学了,这些够现在的用了,以后需要在学文章来源地址https://www.toymoban.com/news/detail-813059.html

到了这里,关于Java--JMH--性能测试--测试软件运行效率/时间--StopWatch的文章就介绍完了。如果您还想了解更多内容,请在右上角搜索TOY模板网以前的文章或继续浏览下面的相关文章,希望大家以后多多支持TOY模板网!

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处: 如若内容造成侵权/违法违规/事实不符,请点击违法举报进行投诉反馈,一经查实,立即删除!

领支付宝红包 赞助服务器费用

相关文章

  • JMH - Java微基准测试工具套件

        JMH 是 OpenJDK 团队开发的一款基准测试工具,一般用于代码的性能调优,精度甚至可以达到纳秒级别,适用于 java 以及其他基于 JVM 的语言。和 Apache JMeter 不同, JMH 测试的对象可以是任一方法,颗粒度更小,而不仅限于rest api 。 JMH 比较典型的应用场景如下: 想准确地知

    2023年04月10日
    浏览(39)
  • 超级利器!Postman自动化接口测试让你提升测试效率,节省宝贵时间!

    Postman自动化接口测试 该篇文章针对已经掌握 Postman 基本用法的读者,即对接口相关概念有一定了解、已经会使用 Postman 进行模拟请求的操作。 当前环境: Window 7 - 64 Postman 版本(免费版):Chrome App v5.5.3 不同版本页面 UI 和部分功能位置会有点不同,不过影响不大。 我们先思

    2024年01月20日
    浏览(64)
  • 测试工具之JMH详解

    在日常开发中,我们对一些代码的调用或者工具的使用会存在多种选择方式,在不确定他们性能的时候,我们首先想要做的就是去测量它。大多数时候,我们会简单的采用多次计数的方式来测量,来看这个方法的总耗时。 但是,如果熟悉 JVM 类加载机制的话,应该知道 JVM 默

    2024年02月08日
    浏览(45)
  • 提升测试效率,轻松并行运行测试——探秘Pytest插件pytest-xdist

    在软件开发中,测试是确保代码质量的重要一环。然而,随着项目规模的增大,测试用例的数量也随之增多,测试的执行时间可能成为一个瓶颈。为了解决这个问题,Pytest提供了丰富的插件生态系统,其中  pytest-xdist  插件是一个强大的工具,能够帮助我们并行运行测试,提

    2024年01月16日
    浏览(65)
  • 软件测试/测试开发丨学会与 AI 对话,高效提升学习效率

    ChatGPT 的主要优点之一是它能够理解和响应自然语言输入。在日常生活中,沟通本来就是很重要的一门课程,沟通的过程中表达越清晰,给到的信息越多,那么 沟通就越顺畅 。 和 ChatGPT 沟通也是同样的道理,如果想要ChatGPT给到的信息越准确,越清晰,和它的沟通就至关重要

    2024年02月09日
    浏览(61)
  • 软件测试优秀的测试工具,会用三款工作效率能提升一半

    我们将常用的测试工具分为10类。 1. 测试管理工具 2. 接口测试工具 3. 性能测试工具 4. C/S自动化工具 5.白盒测试工具 6.代码扫描工具 7.持续集成工具 8.网络测试工具 9.app自动化工具 10.web安全测试工具 注:工具排名没有任何意义。 大多数初学者,或者某个领域知识的入行者,

    2024年04月14日
    浏览(48)
  • 【性能测试】运维测试01之性能测试整体认知包括:TPS、请求响应时间、事务响应时间、并发用户数、吞吐量、吞吐率、点击率、资源使用率等性能指标详细介绍

    性能测试整体认知包括:TPS、请求响应时间、事务响应时间、并发用户数、吞吐量、吞吐率、点击率、资源使用率。 1.1 需求一 1.熟悉Linux、windows等操作系统,熟悉shell脚本; ⒉.熟悉jvm调优, tomcat调优等基础策略 3.熟悉mysq数据库,熟练掌握javascript、java、python、groovy等至少一门

    2024年02月16日
    浏览(41)
  • JVM逃逸分析原理解析:优化Java程序性能和内存利用效率

    在Java开发中,性能和内存利用效率一直是开发者关注的焦点。为了提高Java程序的执行效率,JVM引入了逃逸分析技术。本文将详细解析JVM逃逸分析的原理,帮助读者深入理解其工作机制。 逃逸分析是一种用于确定对象在方法的生命周期内是否逃逸出方法外部范围的技术。在

    2024年01月20日
    浏览(62)
  • 软件测试——性能测试

    为什么要进行性能测试(WHY)(最重要) 应用程序是否能够很快的响应用户的要求? 应用程序是否能处理预期的用户负载并有盈余能力? 应用程序是否能处理业务所需要的事务数量? 在预期和非预期的用户负载下,应用程序是否稳定? 是否能够确保用户在真正使用软件时

    2024年01月17日
    浏览(43)
  • 软件测试之【性能测试】

    性能测试的定义:通过自动化测试工具或者代码手段,来模拟正常、峰值负载访问被测系统,来观测系统各项性能指标是否合格的过程。 基于代码的性能测试(关注点是函数或方法执行的效率) 基于协议的性能测试(关注服务器的性能) 客户端的性能测试(页面或者客户端

    2024年02月08日
    浏览(54)

觉得文章有用就打赏一下文章作者

支付宝扫一扫打赏

博客赞助

微信扫一扫打赏

请作者喝杯咖啡吧~博客赞助

支付宝扫一扫领取红包,优惠每天领

二维码1

领取红包

二维码2

领红包