草庐IT

读Java性能权威指南(第2版)笔记26_性能测试方法下

躺柒 2023-03-28 原文

1. 理解可变性

1.1. 理解测试结果如何随时间变化

1.2. 可以通过多次运行测试后取平均值来解决

1.3. 因代码改进而进行的测试叫作回归测试(regression testing)

  • 1.3.1. 原本的代码叫作基线(baseline)

  • 1.3.2. 新的代码叫作样本(specimen)

1.4. 结果的变化越大,越难判断平均值的差异是由于真正的性能问题还是随机变化

1.5. 正确判断两个测试的结果是否有差异需要进行一定程度的统计分析,以确保感知到的差异不是随机波动造成的

  • 1.5.1. 要进行严谨的统计分析,可以使用T检验比较测试结果

  • 1.5.2. 检验的结果表示出现性能倒退的概率,但是它并不能显示出哪些倒退应该忽略,哪些应该追踪。在这两者间找到平衡是一种性能工程艺术

2. 早测试、常测试

2.1. 性能测试作为开发周期中的必要部分

2.2. 早期测试带来的问题

  • 2.2.1. 受发布时间的限制,开发人员需要尽快检入代码

  • 2.2.2. 代码的性能特征会随着代码的变化而变化

2.3. 自动化一切

  • 2.3.1. 所有的性能测试都应该脚本化(或者程序化,不过脚本化通常更容易)

2.4. 测量一切

  • 2.4.1. 自动化必须收集可以想到的每一份数据,以便用于以后的分析

2.5. 在目标系统上运行

  • 2.5.1. 很多重要的调优标志会基于JVM运行的底层硬件系统,计算出它们的默认值

  • 2.5.2. 不同平台的代码编译方式不同

  • 2.5.3. 软件缓存和更重要的硬件缓存,在不同的系统和不同的负载下的表现也不同

3. jmh提供微基准测试

3.1. 适用于纳(nano)/微(micro)/毫(milli)/宏(macro)等规模的基准测试

3.2. 随着Java 9一起发布的

  • 3.2.1. 组成jmh的类库兼容JDK 8及之后的版本

  • 3.2.2. 并没有与任何具体的Java版本绑定

  • 3.2.3. JDK中没有支持jmh的工具

3.3. Blackhole类是jmh的特性

  • 3.3.1. 解决了微基准测试的一个重要问题:如果一个操作的值没有用到,那么编译器会直接优化这个操作

  • 3.3.2. 所以把值传递给Blackhole的consume()方法可以确保值被使用

3.4. Setup注解的Level值

  • 3.4.1. Level.Trial

    • 3.4.1.1. 在基准测试代码初始化时执行一次
  • 3.4.2. Level.Iteration

    • 3.4.2.1. 在基准测试每次迭代前完成(每个测量期)
  • 3.4.3. Level.Invocation

    • 3.4.3.1. 在每次测试方法执行之前完成

3.5. -f 5

  • 3.5.1. 派生试验的运行次数(默认为5)

3.6. -wi 5

  • 3.6.1. 每次试验的预热迭代次数(默认为5)

3.7. -i 5

  • 3.7.1. 每次试验的测量迭代次数(默认为5)

3.8. -r 10

  • 3.8.1. 每次迭代的最少时间(以秒为单位)

  • 3.8.2. 迭代的时间可能比这个时间长,具体取决于目标方法的实际执行时间

3.9. 对于更稳定的测试,降低这些参数的值一般可以缩短运行测试所需的时间

3.10. 通常让Java代码变得更好、更快的方法是写出更好的算法,但这个实现与任何Java调优实践或者Java编码实践无关

有关读Java性能权威指南(第2版)笔记26_性能测试方法下的更多相关文章

  1. ruby - 如何使用 Nokogiri 的 xpath 和 at_xpath 方法 - 2

    我正在学习如何使用Nokogiri,根据这段代码我遇到了一些问题:require'rubygems'require'mechanize'post_agent=WWW::Mechanize.newpost_page=post_agent.get('http://www.vbulletin.org/forum/showthread.php?t=230708')puts"\nabsolutepathwithtbodygivesnil"putspost_page.parser.xpath('/html/body/div/div/div/div/div/table/tbody/tr/td/div

  2. ruby - 如何从 ruby​​ 中的字符串运行任意对象方法? - 2

    总的来说,我对ruby​​还比较陌生,我正在为我正在创建的对象编写一些rspec测试用例。许多测试用例都非常基础,我只是想确保正确填充和返回值。我想知道是否有办法使用循环结构来执行此操作。不必为我要测试的每个方法都设置一个assertEquals。例如:describeitem,"TestingtheItem"doit"willhaveanullvaluetostart"doitem=Item.new#HereIcoulddotheitem.name.shouldbe_nil#thenIcoulddoitem.category.shouldbe_nilendend但我想要一些方法来使用

  3. ruby - 为什么我可以在 Ruby 中使用 Object#send 访问私有(private)/ protected 方法? - 2

    类classAprivatedeffooputs:fooendpublicdefbarputs:barendprivatedefzimputs:zimendprotecteddefdibputs:dibendendA的实例a=A.new测试a.foorescueputs:faila.barrescueputs:faila.zimrescueputs:faila.dibrescueputs:faila.gazrescueputs:fail测试输出failbarfailfailfail.发送测试[:foo,:bar,:zim,:dib,:gaz].each{|m|a.send(m)resc

  4. ruby-on-rails - 使用 Ruby on Rails 进行自动化测试 - 最佳实践 - 2

    很好奇,就使用ruby​​onrails自动化单元测试而言,你们正在做什么?您是否创建了一个脚本来在cron中运行rake作业并将结果邮寄给您?git中的预提交Hook?只是手动调用?我完全理解测试,但想知道在错误发生之前捕获错误的最佳实践是什么。让我们理所当然地认为测试本身是完美无缺的,并且可以正常工作。下一步是什么以确保他们在正确的时间将可能有害的结果传达给您? 最佳答案 不确定您到底想听什么,但是有几个级别的自动代码库控制:在处理某项功能时,您可以使用类似autotest的内容获得关于哪些有效,哪些无效的即时反馈。要确保您的提

  5. ruby - Facter::Util::Uptime:Module 的未定义方法 get_uptime (NoMethodError) - 2

    我正在尝试设置一个puppet节点,但ruby​​gems似乎不正常。如果我通过它自己的二进制文件(/usr/lib/ruby/gems/1.8/gems/facter-1.5.8/bin/facter)在cli上运行facter,它工作正常,但如果我通过由ruby​​gems(/usr/bin/facter)安装的二进制文件,它抛出:/usr/lib/ruby/1.8/facter/uptime.rb:11:undefinedmethod`get_uptime'forFacter::Util::Uptime:Module(NoMethodError)from/usr/lib/ruby

  6. Ruby 方法() 方法 - 2

    我想了解Ruby方法methods()是如何工作的。我尝试使用“ruby方法”在Google上搜索,但这不是我需要的。我也看过ruby​​-doc.org,但我没有找到这种方法。你能详细解释一下它是如何工作的或者给我一个链接吗?更新我用methods()方法做了实验,得到了这样的结果:'labrat'代码classFirstdeffirst_instance_mymethodenddefself.first_class_mymethodendendclassSecond使用类#returnsavailablemethodslistforclassandancestorsputsSeco

  7. ruby-on-rails - Rails 3.2.1 中 ActionMailer 中的未定义方法 'default_content_type=' - 2

    我在我的项目中添加了一个系统来重置用户密码并通过电子邮件将密码发送给他,以防他忘记密码。昨天它运行良好(当我实现它时)。当我今天尝试启动服务器时,出现以下错误。=>BootingWEBrick=>Rails3.2.1applicationstartingindevelopmentonhttp://0.0.0.0:3000=>Callwith-dtodetach=>Ctrl-CtoshutdownserverExiting/Users/vinayshenoy/.rvm/gems/ruby-1.9.3-p0/gems/actionmailer-3.2.1/lib/action_mailer

  8. ruby - 使用 C 扩展开发 ruby​​gem 时,如何使用 Rspec 在本地进行测试? - 2

    我正在编写一个包含C扩展的gem。通常当我写一个gem时,我会遵循TDD的过程,我会写一个失败的规范,然后处理代码直到它通过,等等......在“ext/mygem/mygem.c”中我的C扩展和在gemspec的“扩展”中配置的有效extconf.rb,如何运行我的规范并仍然加载我的C扩展?当我更改C代码时,我需要采取哪些步骤来重新编译代码?这可能是个愚蠢的问题,但是从我的gem的开发源代码树中输入“bundleinstall”不会构建任何native扩展。当我手动运行rubyext/mygem/extconf.rb时,我确实得到了一个Makefile(在整个项目的根目录中),然后当

  9. ruby - Highline 询问方法不会使用同一行 - 2

    设置:狂欢ruby1.9.2高线(1.6.13)描述:我已经相当习惯在其他一些项目中使用highline,但已经有几个月没有使用它了。现在,在Ruby1.9.2上全新安装时,它似乎不允许在同一行回答提示。所以以前我会看到类似的东西:require"highline/import"ask"Whatisyourfavoritecolor?"并得到:Whatisyourfavoritecolor?|现在我看到类似的东西:Whatisyourfavoritecolor?|竖线(|)符号是我的终端光标。知道为什么会发生这种变化吗? 最佳答案

  10. ruby - Ruby 的 Hash 在比较键时使用哪种相等性测试? - 2

    我有一个围绕一些对象的包装类,我想将这些对象用作散列中的键。包装对象和解包装对象应映射到相同的键。一个简单的例子是这样的:classAattr_reader:xdefinitialize(inner)@inner=innerenddefx;@inner.x;enddef==(other)@inner.x==other.xendenda=A.new(o)#oisjustanyobjectthatallowso.xb=A.new(o)h={a=>5}ph[a]#5ph[b]#nil,shouldbe5ph[o]#nil,shouldbe5我试过==、===、eq?并散列所有无济于事。

随机推荐