软件的性能测试是为了检验系统或系统部件是否达到需求规格说明中规定的各类性能指标,并满足一些性能相关的约束和限制条件,它必须对系统或系统部件具有的性能(例如,速度、精度、频率)做出规定的要求。
软件性能测试报告、软件确认测试报告是委托方(企业)委托第三方检测机构对组合测试的软件进行的软件产品性能测试,并出具的第三方测试检测报告。软件性能测试报告可以作为申报国家、省、市科技成果奖的技术鉴定依据;为软件企业全面度量产品质量并查找软件功能和性能缺陷,从而为软件企业技术成果提供证明。
软件性能测试报告中的性能测试指标要求:
1、响应时间
根据个人理解,响应时间指的是“系统响应时间”,定义为应用系统从发出请求开始到客户端接收到响应所消耗的时间。把它作为用户视角的软件性能的主要体现。它包括网络上的传输时间,web服务器上处理时间,APP服务器上处理时间,DB服务器上处理时间,但不包括浏览器上的内容显示时间,即“呈现时间”,这是由于呈现时间在很大程度上取决于客户端的表现,例如,一台内存不足的客户端机器在处理复杂页面的时候,其呈现时间可能就很长,而这并不能说明整个系统的性能。
2、并发用户数
一种是从业务的角度来模拟真实的用户访问,体现的是业务并发用户数,指在同一时间段内访问系统的用户数量。
另一种是从服务器端承受的压力来考虑,这里的“并发用户数”指的是向服务器端发出请求的客户数,该概念一般结合并发测试(ConcurrencyTesting)使用,体现的是服务端承受的并发访问数。
3、吞吐量
吞吐量是指“单位时间内系统处理的客户请求的数量”,直接体现软件系统的性能承载能力。一般来说,吞吐量用请求数/秒或是页面数/秒来衡量,从业务的角度,吞吐量也可以用访问人数/天或是处理的业务数/小时等单位来衡量。当然,从网络的角度来说,也可以用字节数/天来考察网络流量。对于交互式应用来说,吞吐量指标反映的是服务器承受的压力。
4、性能计数器
性能计数器(Counter)是描述服务器或操作系统性能的一些数据指标。例如,对Windows系统来说,使用内存数(Memory In Usage),进程时间(Total ProcessTime)等都是常见的计数器。