在性能测试的整个流程当中,监控起着至关重要的作用。因为在性能测试开始执行之后,需要实时的去观察性能测试的各个指标是否正常,包括应用服务器、数据库、中间件等方面。一旦发现异常情况,及时修正,保证性能测试的顺利进行。而且在监控当中,也可以发现系统的瓶颈,适当制止性能测试的继续运行,保证避免重复的工作。

  个人认为,首先,广泛意义的性能测试监控,应该分阶段去做,其中包括执行前、执行中和执行后的监控。

  执行前:

  环境搭建的时候,监控确定性能测试环境的纯净性,没有其他资源在使用。CPU、MEM、LOA、I/O的初始值是否正常。

  执行中:

  监控内容包括虚拟用户执行情况、场景状态、事务响应时间、服务器资源使用、操作系统和硬件的监控,此外重要的还有测试机的运行情况,包括CPU、MEM等。是否满足当前性能测试种类的要求,比如性能测试、压力测试、负载测试等。

  除了LoadRunner等监控工具外,也可以借助于辅助工具,用来监控一些定时服务、夜间监控情况,写一些shell脚本。

  监控中可以分几大类去监控:工具的监控、测试用例的监控、测试方法的监控、进度、以及测试环境的监控。

  建议:创建监控点列表,确定监控目标。开启监控服务,监控同时要采集信息,以便之后的分析。确定监控信息,同时确定监控工具。

  执行后:

  监控资源释放是否正常、合理。

  监控指标:

  性能测试的监控指标主要包括以下几个部分:

  1、服务器:Linux应用服务器

  具体包括CPU、Memory、Load、I/O、Disk等。

  2、数据库:1.Mysql 2.Oracle

  具体包括缓存命中、索引、单条SQL性能、数据库线程数、数据池连接数等。

  3、中间件:1.Jboss 2. Apache

  具体包括线程数、连接数、日志输出等。

  4、网络

  具体包括防火墙、网卡、网线、吞吐量、吞吐率等。

  5、应用服务

  具体包括JVM内存使用和回收、JAVA内存使用、Full GC频率、JAVA类装入和卸载、日志、线程运行状态(阻塞、等待、正常运行)等。

  6、监控工具(LoadRunner)

  具体包括用户执行情况、场景状态、事务响应时间、TPS、Load、CPU分析图表等。

  7、测试机资源 具体包括CPU、Memory、网络、日志输出、磁盘空间、负载生成器评估等

  监控原则:

  1、确定监控目标

  2、确定监控和分析信息

  3、确定监控工具

  4、收集数据

  5、分析数据

  6、调优

  7、循环

  监控方法:

  包括Checklist法等。

  监控工具

  包括Profiler、Jstat、Jconsole、Jmap、Jprofiler、Nmon等。