本标准界定了对基于计算机的软件系统(CBSS)面向用户的性能如何测量和评级。从用户(例如各种不同终端的用户,或者数据处理中心的操作用户和商业用户)角度看,CBSS就是一种数据处理系统。
CBSS包括硬件及其所有软件(系统软件和应用软件),这些是实施用户所需的数据处理功能所要求的,或可影响到 CBSS的时变行为。
本标准适用于测试所有受时间约束的系统或系统的一部分。同样,网络可以是某个系统的组成部分,或者可成为测试的主题。本标准所界定的方法不限于像经典的批处理或终端-宿主系统等特例,例如,也包括客户-服务器系统或按广义理解对“任务”界定的实时系统。但是就测试大环境所需花费来说,测试的实用性会受到限制。
本标准规定了面向用户的性能术语的关键指标,以及测量和评级这些性能值的方法。所规定的性能值描述了用户命令(任务)的执行速度的性能值,即如下“三位一体”的:
———执行时间;
———吞吐量;
———适时性。
用户命令,以下称为任务,在内部结构上可以很简单,也可以很复杂。一项任务可能是一项作业、事务、过程,或更为复杂的结构,但都根据评价者的需要界定一个启动时间和结束时间。进行性能评价时,除单个响应时间外,还可参考商务事务处理完成时间,使用本标准来测量系统的时变行为。
评级可根据用户需求来完成,或者通过与两个或更多的已测量系统(类型或版本)相比较来完成。
对于测量内部值,例如:
———利用值;
———平均指令速率;
———路径长度;
———高速缓存命中率;
———排队时间;
———服务时间。
特意不给出建议,原因是内部值的界定取决于在测系统的硬软件体系结构。与此相反,本标准界定的面向用户性能值则独立于体系结构。对内部性能值的界定,可独立于对面向用户性能值的界定。除面向用户的性能值外,这些内部性能值可以使用,也能测量。同样,产生面向用户值的效率的术语也能自由定义。另外,本标准对如何在数据处理系统中建立稳定、可再现的操作状态给出了指导,这些可再现状态可用来测量其他性能值,例如上面提到的内部值。
本标准重点在于:
———应用软件;
———系统软件;
———交钥匙系统(即由应用软件、系统软件以及为此设计的硬件所组成的系统);
———通用数据处理系统。
本标准规定了有关模拟[通过技术系统,即所谓远程终端模拟器(RTE)]用户与数据处理系统交互