jmeter 性能测试
在JMeter3.0之前,官方只提供在工具的UI上对测试结果部分维度的图形化展示,这对我带来了两方面的困扰:
本文讨论的新特性为这两个问题带来了较好的解决办法:
JMeter3.0提供一个用于生成HTML页面格式图形化报告的扩展模块。该模块支持通过两种方式生成多维度图形化测试报告:
其默认提供的度量维度包括:
Errors报告
响应时间变化曲线
数据吞吐量时间曲线
Latency time变化曲线
每秒点击数曲线
HTTP状态码时间分布曲线
事务吞吐量时间曲线(TPS)
平均响应时间与每秒请求数的关系图
Latency time与每秒请求数的关系图
响应时间百分位图
活动线程数变化曲线
平均响应时间与线程数的关系图
柱状响应时间分布图
注1:Latency time没有翻译成中文,这里对其计算方式做注解:
Latency time = 接收到响应的第一个字节的时间点 - 请求开始发送的时间点
from just before sending the request to just after the first response has been received
– Apache JMeter Glossary
响应时间(JMeter术语中的Elapsed time) = 接收完所有响应内容的时间点 - 请求开始发送的时间点
from just before sending the request to just after the last response has been received
– Apache JMeter Glossary
注2:Apdex 标准从用户的角度出发,将对应用响应时间的表现,转为用户对于应用性能的可量化为范围为 0-1 的满意度评价。。
Apdex (Application Performance Index) is an open standard developed by an alliance of companies. It defines a standard method for reporting and comparing the performance of software applications in computing.
– wikipedia
- jmeter.save.saveservice.bytes = true
- jmeter.save.saveservice.label = true
- jmeter.save.saveservice.latency = true
- jmeter.save.saveservice.response_code = true
- jmeter.save.saveservice.response_message = true
- jmeter.save.saveservice.successful = true
- jmeter.save.saveservice.thread_counts = true
- jmeter.save.saveservice.thread_name = true
- jmeter.save.saveservice.time = true
- # the timestamp format must include the time and should include the date.
- # For example the default, which is milliseconds since the epoch:
- jmeter.save.saveservice.timestamp_format = ms
- # Or the following would also be suitable
- jmeter.save.saveservice.timestamp_format = yyyy/MM/dd HH:mm:ss
- jmeter.save.saveservice.assertion_results_failure_message = true
a. 在压力测试结束时报告
- jmeter -n -t <test JMX file> -l <test log file> -e -o <Path to output folder>
- jmeter -n -t F:\PerformanceTest\TestCase\script\getToken.jmx -l testLogFile -e -o ./output
b. 使用已有的压力测试CSV日志文件生成报告
- jmeter -g <log file> -o <Path to output folder>
- jmeter -g D:\apache-jmeter-3.0\bin\testLogFile -o ./output
两个样例都会在\apache-jmeter-3.0\bin\output目录下产生如下文件(夹):
用浏览器打开index.html文件,即可查看各种图形化报告:
注:在3.0版本,由于字符编码问题,可能会遇到生成的报告中,中文标签展示为乱码的问题,因篇幅限制,解决办法请戳这里看我另一篇文章。
JMeter3.0在bin目录新增了
文件保存了所有关于图形化HTML报告生成模块的默认配置,要变更配置,建议不要直接编辑该文件,而是推荐在
- reportgenerator.properties
中去配置和覆盖。
- user.properties
总体配置都是以
为前缀。如:jmeter.reportgenerator.overall_granularity=60000
- jmeter.reportgenerator.
:定义采样点粒度,默认为60000ms,通常在稳定性以外的测试中,我们可能需要定义更细的粒度,比如1000ms,我们可以在
- overall_granularity
文件末尾添加如下配置:
- user.properties
- # Change this parameter
- if you want to change the granularity of over time graphs.jmeter.reportgenerator.overall_granularity = 6000
:定义报告的标题,我们可能需要将标题定义为实际测试项名称
- report_title
:定义Apdex评估中满意的阈值(单位ms)
- apdex_satisfied_threshold
: 定义Apdex评估中可容忍的阈值
- apdex_tolerated_threshold
- Apdext = (Satisfied Count + Tolerating Count / 2) / Total Samples
另外,在
中,有关于集合报告中的三个百分位的默认值:
- jmeter.properties
- aggregate_rpt_pct1 : Defaults to 90
- aggregate_rpt_pct2 : Defaults to 95
- aggregate_rpt_pct3 : Defaults to 99
可以在
中对其进行覆盖,如:
- user.properties
,效果如下:
- aggregate_rpt_pct1 = 70
每个图表配置都是以
为前缀。
- jmeter.reportgenerator.graph.<图表名称>.
图表的实现类,如果有自己定制的实现,将该配置的值写为自定义实现类的类名
- classname
图标标题,比如要汉化的时候,在这里配置中文标题
- title
设置图标的采样点粒度,不配置时默认使用总体配置中的粒度设置
- property.set_granularity
输出配置都以
为前缀。
- jmeter.reportgenerator.exporter
配置默认的报告输出路径。在命令行可以用-o选项来设置特定的路径覆盖该配置。
- property.output_dir
用于过滤展示内容。如在user.properties添加如下配置:
- html.series_filter
则最后的报告只展示名为Login这个取样器的数据。该配置包含两部分,
- jmeter.reportgenerator.exporter.html.series_filter=(^Login)(-success|-failure)?
是
- (-success|-failure)?
图表所依赖的配置。前面部分接受一个正则表达式用来过滤。
- Transactions per second
JMeter的HTML报告生成时是使用了固定的模板,模板文件路径为
。进入该目录可以看到报告的每个页面都有一个.fmkr模板文件,包括
- ./bin/report-template
和
- index.html.fmkr
路径下的几个文件。通过查看这些模板文件,就可以知道怎样去进行报告的轻度定制,比如将一些文本修改得更易懂,或者修改为中文等
- ./content/pages
中的
- reportgenerator.properties
来统一定义,这种方式就是所有页面的title都使用同一个。
- jmeter.reportgenerator.report_title
,这中方式可以为每个页面单独定义title
- <title>${reportTitle!"想要设置的title"}</title>
图表的名称,可以直接在
- Transactions Per Second
文件中修改,效果如下图
- ./content/pages/Throughput.html.fmkr
本次介绍的
特性本质上是Apache JMeter对于测试结果数据可视化方式的顺应时代的更新,虽然算是姗姗来迟,虽然并不酷炫,但至少,对于要需要基于它来执行性能测试的人来说,仍然是一个福音。最后,感谢Apache JMeter项目的各位贡献者对它的持续更新。
- Dashboard Report
自定制jmeter多维度报告-华山
来源: http://www.bubuko.com/infodetail-2330055.html