管理JMeter测试报告_云性能测试服务 CPTS_用户指南_JMeter测试工

测试报告说明

JMeter测试报告提供实时、离线两种类型的测试报告，供用户随时查看和分析测试数据。测试报告由各项指标总量、各项指标TPS、带宽、响应时间区间比例、TP最大响应时间五部分构成。

JMeter测试报告说明如表1所示。

本测试报告展现了测试过程中被测系统在模拟高并发用户的响应性能，为了更好的帮助您阅读测试报告，我们提供以下信息供您参考：

• 统计维度：本报告的TPS，响应时间、并发等统计维度均为单个线程组，如线程组中有请求多个报文，只有在多个请求报文均正常返回会认为成功，响应时间也是多个请求报文的求和值。
• 响应超时：出现该情况下是在设置的响应超时时间内（Jmx自定义），对应的TCP连接中没有响应数据返回，我们会将本次线程组请求统计为响应超时。出现原因一般是被测服务器繁忙、崩溃、网络带宽被占满等。
• 校验失败：从服务器返回的响应报文不符合预期（针对HTTP/HTTPS默认的预期响应码为200），比如服务器返回404、502等。出现原因一般为高并发情况下被测服务无法正常处理导致的，如分布式系统中数据库出现瓶颈、后端应用返回错误等。
• 带宽统计：本报告统计的是性能测试服务执行端的带宽，上行表示从性能测试服务发出的流量，下行表示接收到的流量。如果是外网压测场景，您需要关注执行机的EIP带宽是否可以满足上行带宽的要求。而下行带宽需要关注单台执行机是否超过1GB。
• TPS：TPS是指云性能测试服务在统计周期内每秒从被测服务器获取到的响应事务实时统计，TPS=统计周期内的正常返回数/统计周期。
• 如何判断被测应用优劣：根据应用本身的服务质量定义，理想状态是没有任何响应失败、校验失败的情况，如果有，需要在服务质量定义范围之内，通常情况下不超过1%，同时响应时间越低越好（2s内体验较好，5s内可以接受，超过5s则需要考虑优化），TP90、TP99指标可以客观反映出90%、99%用户的体验响应时间。

查看实时测试报告

压测过程中，可以通过实时报告查看压测过程中各项指标的监控数据。

前提条件

测试任务已启动。

操作步骤

1. 登录CPTS控制台，在左侧导航栏中选择“JMeter测试工程”，单击待操作工程后的“编辑测试计划”或“更多 > 查看实时报告”。
2. 在“实时报告”页签下选择需要查看测试报告的测试计划。

   单击“停止任务”，可以停止实时报告测试计划。

3. 选择测试计划下的线程组，查看报告。详细参数说明请参考表1。
   

   • 默认显示第一个线程组的报告，若下拉框中未选中线程组，则显示全部线程组的报告。
   • 您可以复选框选择该测试计划下的多个线程组，查看多个线程组的报告。
   • 您可以在“各项测试指标”下线程组名称前下拉选择该测试计划下线程组的一个或多个报文，查看报文的性能指标。

4. 您可以查看各项指标TPS、带宽、响应时间区间比例、TP最大响应时间以及并发数等的数据。
5. 您还可以查看该测试计划的监控指标、并对该测试计划进行调用分析。详细参数说明请参考表1。
   • 监控指标：支持监控CPU、内存、磁盘读取、磁盘写入指标。
   • 调用分析：支持失败调用链、拓扑关系分析的功能，用于定位测试过程中的问题。

查看离线测试报告

压测结束后，系统会生成离线测试结果报告。

前提条件

测试任务已结束。

操作步骤

1. 登录CPTS控制台，在左侧导航栏中选择“JMeter测试工程”，单击待操作工程后的“编辑测试计划”或“更多 > 查看离线报告”。
2. 在“离线报告”页签下，选择需要查看报告的测试计划。
3. （可选）单击报告名称前的，您可以查看到测试计划定义和线程组定义。
4. 单击需要查看报告后的“查看报告”，下拉框选择线程组，查看测试报告结果。详细参数说明请参考表1。
   

   • 默认显示第一个线程组的报告，若下拉框中未选中线程组，则显示全部线程组的报告。
   • 您可以复选框选择该测试计划下的多个线程组，查看多个线程组的报告。
   • 您可以在“各项测试指标”下线程组名称前下拉选择该测试计划下线程组的一个或多个报文，查看报文的性能指标。

5. 您可以查看各项指标TPS、带宽、响应时间区间比例、TP最大响应时间以及并发数等的数据。
   

   离线报告中的监控数据保存期限为30天，失败调用链、拓扑关系保存期限为7天。