图2网上视频点播系统使用情况图

  1、 确定用户使用系统情况的方法

  确定用户对系统的使用情况是设计用例具体数据的基础,后面并发用户数据设计、疲劳强度设计、以及各种场景设计都要依赖对用户使用系统情况的分析结果。分析用户使用情况经常采用现场调查和分析系统日志两种方法。

  ● 用户现场调查

  用户现场调查实际是通过和用户进行沟通,进而确定用户的人员组成情况。这类方法适用于用户群体固定且目标测试系统没有投产前的情况。

  ● 分析系统日志

  很多时候,通过和用户沟通不能掌握其使用系统的详细情况,尤其是诸如图2的网站业务系统,因为目标用户使用系统的情况是不确定的。当用户比较分散、现场调查比较困难时,可以采用对系统日志进行分析的方法,以此作为对用户现场调查信息的补充。

  大多数的系统都会对用户使用系统的情况进行日志管理,因此可以对日志进行分析,日志分析方法适用于已经投产或者试运行的系统。如果没有系统日志功能,可以和开发人员进行沟通,在测试过程中增加日志管理功能。通常分析系统日志可能要开发一些程序来对其进行统计分析。

  在具体设计过程中,一般是两种方法结合使用。图2的网上视频点播系统是通过两种方法得到的测试数据:通过和用户进行沟通得到各地维护人员使用系统的大概情况,然后通过对系统一个月的日志进行分析得出其它用户使用系统的情况,后综合在一起得到了系统的使用情况图。

  也许有人会问:为什么不通过日志分析得出全部的用户使用情况?主要原因有两个:一是日志分析不一定能得出全部的使用情况,可能产生偏差,例如用户反复登陆系统、注册多个帐号都会影响统计结果;二是日志分析往往较用户调研成本大,因为多会涉及开发工作。

  2、 并发用户数量设计

  并发用户尤其是大并发用户数量的设计一直是网上很多测试论坛津津乐道的话题。在前面文章中,已经介绍了并发用户和并发用户数量两个概念,下面将在其基础上讨论一下如何在性能测试用例中设计并发用户数量。

  在设计并发用户数量前,首先要了解确定系统大并发用户数量的方法。下面介绍根据系统的大使用人数或者大在线数量来评估大并发用户数量的方法(注:这里的大并发用户数量不是指系统支持的大并发用户数量,而是指系统在生存周期内可能达到的大并发用户数量)。

  ● 极限法。取大在线用户数作为大并发数,这种方法适用于系统已经投产或者目标用户群体不确定的门户网站,可以通过分析日志来得出结果;也可以使用系统已经注册的用户数量做为系统的用户数量,然后按照经验公式来估算大并发用户数量。

  ● 用户趋势分析。对软件生存周期内的用户未来走势进行分析,预测系统可能达到的大使用用户数目,从而估计系统的大并发用户数目,这种方法多用于系统用户数目逐渐增加的情况。

  ● 经验评估法。按照经验来评估系统可能的大并发用户数,这种方法多用于系统的使用用户数目相对稳定且比较明确的系统。
 完成大并发用户数量的评估后,接下来可以设计每个用例要模拟的用户数量。表1是上面OA系统的一个性能测试用例。