草庐IT

【性能测试】jmeter数据库性能测试

峡江转弯处 2023-07-29 原文

文章目录

前言

本文是记录使用jmeter对数据库进行性能测试，以及在测试过程中常使用的方法。

一、工具安装

  • 上传解压包，解压，配置环境变量
tar -xvf apache-jmeter-5.1.1.tar

vim /etc/profile
exprot JMETER_HOME=/home/apache-jmeter-5.1.1
export CLASSPATH=$JMETER_HOME/lib/ext/ApacheJMeter_core.jar:$JMETER_HOME/lib/jorphan.jar:$CLASSPATH
export PATH=$JMETER_HOME/bin:$PATH

source /etc/profile
  • 检查安装结果
jmeter -v

说明：
windows为免安装，直接执行bin目录下jmeter.bat可执行文件

二、数据库压测

1.测试前准备

  • 将被测数据库JDBC对应的jar包，拷贝至jmeter工具lib目录下

  • 数据库对访问client开启免密访问
    以PG数据库或kingbase为例，修改data目录下pg_hba.conf或sys_hba.conf，将认证方式改为trust

2.jmeter脚本配置

2.1 JDBC配置

测试计划 -> 添加 -> 配置元件 -> JDBC Connection Configuration


参数说明：

参数说明备注
Variable Name Bound to pool连接池名称线程组中引用连接池需一致
Max Number of Connections连接池最大连接数
Auto Commit事务是否自动提交默认：true
Transaction IsolationJDBC事务控制选项DEFAULT：TRANSACTION_READ_COMMITTED禁止脏读，但允许可不重复读和幻读

脏读：一个事务读取了另外一个事务未提交的数据
不可重复读：一个事务再次读取之前的数据时，这个数据已经被另一个事务修改
幻读：一个事务重新执行一个查询，返回的记录包含了其它事务提交的新记录

2.2 添加线程组

测试计划 -> 添加 -> 线程 -> 线程组

  • 添加“计数器”

  • 添加“取样器”
    创建5000张表

drop table if exists testtable${num};
create table testtable${num} (t1 int,t2 varchar(16));
insert into testtable${num} values(${num},'${__RandomString(16,azxsdcvfgbhnmjkliuyttwq1234567,)}');
select * from testtable${__Random(1,5000,n)};


参数说明：

名称说明
Select Statement执行查询语句
Update Statement执行插入与修改语句
Callable Statement调用存储过程，可以有入参和站位符
Prepared Select Statement预编译查询语句，绑定变量，同样的sql只会被编译一次
Prepared Update Statement预编译更新语句

2.3 添加结果树和聚合报告

  • 察看结果树
    线程组 -> 添加 -> 监听器 ->察看结果树

  • 聚合报告
    线程组 -> 添加 -> 监听器 ->聚合报告

  • TPS
    线程组 -> 添加 -> 监听器 ->jp@Transactions per Second

  • 响应时间
    主要观察压测或性能测试过程，接口请求是否平稳，是否出现长时间等待
    线程组 -> 添加 -> 监听器 ->jp@Response Times Over Time

说明：
“TPS”和“响应时间”监控，需要从插件管理器添加(jmeter-plugins-manager-1.8jar)，将jar包放在jmeter工具lib/ext目录下，重启jmeter可查询到

选项 -> Plugins Manager -> Available Plugins ->(jpgc-Standard Set) - Apply Changes and Restart Jmeter

3.执行测试脚本

性能测试和压力测试尽量使用非GUI模式调用，因为jmeter本身java程序会占用较多内存，在高并发场景应用端会成为瓶颈。在非GUI调用的jmeter结果可以导入工具进行解析，统计更加清晰。

jmter -n -t perf_test.jmx -l jmeter_result/select_500threads_500loop.jtl

参数说明：
-n：非GUI模式调用
-t：指定配置文件地址及名称（后缀.jmx）
-l：指定日志输出位置（后缀.jtl）

4.常用功能

4.1 函数助手

Tools -> 函数助手 -> 选择一个功能

  1. __Random
    随机函数返回位于给定最小值和最大值之间的随机数，适用于int numericl类型
  2. __RandomDate
    返回一个位于给定开始日期和结束日期值之间的随机日期
  3. __CSVRead
    将文本内容作为jmeter引用内容：
    线程组 -> 添加 -> 配置元件 -> CSV数据文件设置


    说明：
    纯文本文件需要在文件头尾加引号，否则解析结果会异常

4.2 用户自定义变量

名称值
RandomString_8${__RandomString(8,qwertyuiopasdfghjklzxcvbnm,)}
RandomNumber_16${__Random(1000000000000000,9999999999999999,)}
RandomDateTime${__RandomDateTime(,2020-01-01,2022-01-01,)}

4.3 JVM修改内存

异常报错：

ERROR o.a.j.JMETER:Uncaught exception:
java.lang.OutOfMemoryError: Java heap space
  • windows修改bin目录下jmeter.bat
  • linux修改bin目录下jmeter文件
    修改后可通过jconsole确认VM参数：
    java 监视和管理控制台 -> JConsole新建连接 ->ApacheJmeter.jar ->VM概要 ->VM参数

总结

在使用jmeter对数据库进行性能或压力测试时，场景较为复杂多样，需要根据业务模型对jmeter脚本进行调整。主要涉及并发数、压测时间、表字段、表结构，以及数据库本身性能相关参数，有时高并发下会出现死锁，但不一定是有死锁就是数据出问题，也可能是数据库自身的保护机制。
总之使用jmeter对数据库进行压力测试较为方便，且比较同行，针对各种性能场景以后再做总结输出。

jmeter性能xffxff0cpic_center数据库性能优化

有关【性能测试】jmeter数据库性能测试的更多相关文章

  1. ruby-on-rails - 使用 Ruby on Rails 进行自动化测试 - 最佳实践 - 2

    很好奇，就使用ruby​​onrails自动化单元测试而言，你们正在做什么？您是否创建了一个脚本来在cron中运行rake作业并将结果邮寄给您？git中的预提交Hook？只是手动调用？我完全理解测试，但想知道在错误发生之前捕获错误的最佳实践是什么。让我们理所当然地认为测试本身是完美无缺的，并且可以正常工作。下一步是什么以确保他们在正确的时间将可能有害的结果传达给您？ 最佳答案 不确定您到底想听什么，但是有几个级别的自动代码库控制:在处理某项功能时，您可以使用类似autotest的内容获得关于哪些有效，哪些无效的即时反馈。要确保您的提

  2. ruby - 解析 RDFa、微数据等的最佳方式是什么，使用统一的模式/词汇(例如 schema.org)存储和显示信息 - 2

    我主要使用Ruby来执行此操作，但到目前为止我的攻击计划如下:使用gemsrdf、rdf-rdfa和rdf-microdata或mida来解析给定任何URI的数据。我认为最好映射到像schema.org这样的统一模式，例如使用这个yaml文件，它试图描述数据词汇表和opengraph到schema.org之间的转换:#SchemaXtoschema.orgconversion#data-vocabularyDV:name:namestreet-address:streetAddressregion:addressRegionlocality:addressLocalityphoto:i

  3. ruby - 使用 C 扩展开发 ruby​​gem 时，如何使用 Rspec 在本地进行测试？ - 2

    我正在编写一个包含C扩展的gem。通常当我写一个gem时，我会遵循TDD的过程，我会写一个失败的规范，然后处理代码直到它通过，等等......在“ext/mygem/mygem.c”中我的C扩展和在gemspec的“扩展”中配置的有效extconf.rb，如何运行我的规范并仍然加载我的C扩展？当我更改C代码时，我需要采取哪些步骤来重新编译代码？这可能是个愚蠢的问题，但是从我的gem的开发源代码树中输入“bundleinstall”不会构建任何native扩展。当我手动运行rubyext/mygem/extconf.rb时，我确实得到了一个Makefile(在整个项目的根目录中)，然后当

  4. ruby - Ruby 的 Hash 在比较键时使用哪种相等性测试？ - 2

    我有一个围绕一些对象的包装类，我想将这些对象用作散列中的键。包装对象和解包装对象应映射到相同的键。一个简单的例子是这样的:classAattr_reader:xdefinitialize(inner)@inner=innerenddefx;@inner.x;enddef==(other)@inner.x==other.xendenda=A.new(o)#oisjustanyobjectthatallowso.xb=A.new(o)h={a=>5}ph[a]#5ph[b]#nil,shouldbe5ph[o]#nil,shouldbe5我试过==、===、eq?并散列所有无济于事。

  5. ruby - RSpec - 使用测试替身作为 block 参数 - 2

    我有一些Ruby代码，如下所示:Something.createdo|x|x.foo=barend我想编写一个测试，它使用double代替block参数x，这样我就可以调用:x_double.should_receive(:foo).with("whatever").这可能吗？ 最佳答案 specify'something'dox=doublex.should_receive(:foo=).with("whatever")Something.should_receive(:create).and_yield(x)#callthere

  6. ruby - Sinatra:运行 rspec 测试时记录噪音 - 2

    Sinatra新手；我正在运行一些rspec测试，但在日志中收到了一堆不需要的噪音。如何消除日志中过多的噪音？我仔细检查了环境是否设置为:test，这意味着记录器级别应设置为WARN而不是DEBUG。spec_helper:require"./app"require"sinatra"require"rspec"require"rack/test"require"database_cleaner"require"factory_girl"set:environment,:testFactoryGirl.definition_file_paths=%w{./factories./test/

  7. ruby-on-rails - 迷你测试错误 : "NameError: uninitialized constant" - 2

    我遵循MichaelHartl的“RubyonRails教程:学习Web开发”，并创建了检查用户名和电子邮件长度有效性的测试(名称最多50个字符，电子邮件最多255个字符)。test/helpers/application_helper_test.rb的内容是:require'test_helper'classApplicationHelperTest在运行bundleexecraketest时，所有测试都通过了，但我看到以下消息在最后被标记为错误:ERROR["test_full_title_helper",ApplicationHelperTest,1.820016791]test

  8. ruby - 即使失败也继续进行多主机测试 - 2

    我已经构建了一些serverspec代码来在多个主机上运行一组测试。问题是当任何测试失败时，测试会在当前主机停止。即使测试失败，我也希望它继续在所有主机上运行。Rakefile:namespace:specdotask:all=>hosts.map{|h|'spec:'+h.split('.')[0]}hosts.eachdo|host|begindesc"Runserverspecto#{host}"RSpec::Core::RakeTask.new(host)do|t|ENV['TARGET_HOST']=hostt.pattern="spec/cfengine3/*_spec.r

  9. ruby-on-rails - 如何使辅助方法在 Rails 集成测试中可用？ - 2

    我在app/helpers/sessions_helper.rb中有一个帮助程序文件，其中包含一个方法my_preference，它返回当前登录用户的首选项。我想在集成测试中访问该方法。例如，这样我就可以在测试中使用getuser_path(my_preference)。在其他帖子中，我读到这可以通过在测试文件中包含requiresessions_helper来实现，但我仍然收到错误NameError:undefinedlocalvariableormethod'my_preference'.我做错了什么？require'test_helper'require'sessions_hel

  10. ruby - Ruby 有 `Pair` 数据类型吗？ - 2

    有时我需要处理键/值数据。我不喜欢使用数组，因为它们在大小上没有限制(很容易不小心添加超过2个项目，而且您最终需要稍后验证大小)。此外，0和1的索引变成了魔数(MagicNumber)，并且在传达含义方面做得很差(“当我说0时，我的意思是head...”)。散列也不合适，因为可能会不小心添加额外的条目。我写了下面的类来解决这个问题:classPairattr_accessor:head,:taildefinitialize(h,t)@head,@tail=h,tendend它工作得很好并且解决了问题，但我很想知道:Ruby标准库是否已经带有这样一个类？ 最佳

随机推荐