ICS35.240.50 J07 中华人民共和国国家标准 GB/T25459—2010 面 向制造业信息化的ASP平台测评规范 SpecificationoftestingASPplatformfornetworkedmanufacturing 2010-12-01发布 2011-05-01实施 中华人民共和国国家质量监督检验检疫总局 中国国家标准化管理委员会发布目 次 前言 Ⅰ ………………………………………………………………………………………………………… 1 范围 1 ……………………………………………………………………………………………………… 2 术语、定义和缩略语 1 ……………………………………………………………………………………… 2.1 术语和定义 1 …………………………………………………………………………………………… 2.2 缩略语 2 ………………………………………………………………………………………………… 3 测评内容及测评指标 2 …………………………………………………………………………………… 3.1 概述 2 …………………………………………………………………………………………………… 3.2 系统管理测评 2 ………………………………………………………………………………………… 3.3 工作流程测评 5 ………………………………………………………………………………………… 3.4 专业服务测评 5 ………………………………………………………………………………………… 4 评定细则 6 ………………………………………………………………………………………………… 4.1 测评关键因素 6 ………………………………………………………………………………………… 4.2 测评结果评定 7 ………………………………………………………………………………………… 4.3 功能指标测评结果评定 7 ……………………………………………………………………………… 4.4 性能指标测评结果评定 7 ……………………………………………………………………………… 5 测评组织机构 8 …………………………………………………………………………………………… 5.1 总述 8 …………………………………………………………………………………………………… 5.2 组织管理机构 8 ………………………………………………………………………………………… 5.3 测评机构 8 ……………………………………………………………………………………………… 5.4 监督机构 8 ……………………………………………………………………………………………… 6 测评工作基本步骤 9 ……………………………………………………………………………………… 6.1 概述 9 …………………………………………………………………………………………………… 6.2 申请测评 9 ……………………………………………………………………………………………… 6.3 审查申请 9 ……………………………………………………………………………………………… 6.4 测评实施 9 ……………………………………………………………………………………………… 6.5 测评结果公布 10 ………………………………………………………………………………………… 附录A(资料性附录) 面向制造业信息化的ASP平台测评指标表 11 ………………………………… 参考文献 15 ……………………………………………………………………………………………………GB/T25459—2010 前 言 本标准的附录A为资料性附录。 本标准由中国机械工业联合会提出。 本标准由全国自动化系统与集成标准化技术委员会(SAC/TC159)归口。 本标准起草单位:北京机械工业自动化研究所。 本标准主要起草人:黎晓东、王思斯。 ⅠGB/T25459—2010 面向制造业信息化的ASP平台测评规范 1 范围 本标准规定了面向制造业信息化的ASP平台的测评内容及测评指标、评定细则、测评组织机构、测 评工作流程、测评申请、受理审查、测评实施、结果公告等方面的要求。其目的为面向制造业信息化的 ASP平台的测评工作提供技术指导和技术规范支持,实现对ASP平台的公平、公正、科学、客观的 评价。 本标准适用于我国面向制造业信息化的ASP平台的测评。 2 术语、定义和缩略语 2.1 术语和定义 下列术语和定义适用于本标准。 2.1.1 功能 function 程序中的一个算法的实现,利用该实现,用户或程序可以完成某一工作任务的全部或部分内容。 [GB/T17544—1998中2.1] 2.1.2 易用性 usability 在指定条件下使用时,软件产品被理解、学习、使用和吸引用户的能力。 注1:功能性、可靠性和效率的某些方面也会影响易用性。 注2:用户可能包括操作员、最终用户和受该软件的使用影响或依赖于该软件使用的间接用户。易用性必须针对软 件所影响的所有不同的用户环境,这可能包括对使用的准备和结果的评价。 [GB/T16260.1—2008中6.3] 2.1.3 可靠性 reliability 在给定时段和给定条件下,功能单元履行所要求功能的能力。 [GB/T5271.14—2008中14.01.03] 2.1.4 可扩展性 extendability 系统或部件能修订以增加它的存储或功能的情况。 参见:灵活性,可维护性 [GB/T11457—2006中2.594] 2.1.5 效率 efficiency 系统或部件以最小的计算资源消耗实现其预定功能的能力。 [GB/T11457—2006中2.535] 2.1.6 测试用例 testcase 测试者使用的文档化的细则,其规定如何对某项功能或功能组合进行测试。测试用例包括下列内 容的详细信息: 1GB/T25459—2010 ———测试目标; ———要测试的功能; ———测试数据; ———过程; ———系统的预期行为。 [GB/T17544—1998中2.6] 2.1.7 评定 verdict 相对于测评项,对被测实现的结果给出定性或定量等结论性陈述的行为。 2.2 缩略语 下列缩略语适用于本标准 ASP 应用服务提供商(ApplicationServiceProvider) SLA 服务品质协议(ServiceLevelAgreement) 3 测评内容及测评指标 3.1 概述 3.1.1 测评阶段 面向制造业信息化的ASP平台的测评过程分为三个阶段:系统管理测评、工作流程测评和专业服 务测评。 3.1.2 系统管理测评 系统管理测评的范围是ASP平台为保证平台本身正常运行而具备的系统管理的功能。 3.1.3 工作流程测评 工作流程测评对用户使用ASP平台的过程进行测评,以检验平台使用过程的合理性和科学性。 3.1.4 专业服务测评 专业服务测评以检验ASP平台为客户提供服务的能力和质量为目的,对专业服务的性能进行 测评。 3.2 系统管理测评 3.2.1 系统操作 a) 数据存储与输出管理; b) 软件分发管理; c) 作业和工作量管理; d) 业务连贯性管理。 3.2.2 系统监控和管理 a) 网络系统的监控和管理; b) 应用程序的监控和管理; c) Web的监控和管理: ———Web监控和管理提供的用户使用情况数据至少包括以下内容; ———总体响应时间; ———客户决策与浏览时间; ———网络交通; ———总服务器时间; ———单独应用和事务响应时间; ———页面查看频率; 2GB/T25459—2010 ———常用或最流行Web页的路径; ———查看一个单独页面所需时间。 d) 性能的监控和管理。 性能的监控和管理要向客户提供的报告客户系统结构中各个层次的性能和有效性报告,报告 中的监控和管理对象至少包括以下内容: ———网络部分:带宽使用的分布模式、客户或应用系统的带宽利用率、信息包丢失率、错误率、 延迟; ———服务器部分:处理器和内存利用情况、磁盘系统的性能、操作系统的性能(进程、服务、任务); ———应用系统部分:应用响应(包括平均响应时间和标准偏离量,由此预测用户期望值)、应用 程序自修复事件、日志以外的应用处理的原因; ———Web应用部分:响应时间、网络时间、浏览时间和服务时间; ———防火墙部分:安全性事件和例外事件、安全日志及状态。 3.2.3 客户支持 a) 更改与请求管理:系统能够在单用户环境和多用户环境中按用户要求进行更改操作环境的处 理活动; b) 问题管理:两个基本功能是呼叫跟踪和问题跟踪。呼叫跟踪解决客户(用户)通过电话、Web 等方式报告的服务协议范围内应当解决的问题。问题跟踪包括对被管理的设备、服务、应用系 统和客户的问题统计,以及相关性能检测的收集报告。 3.2.4 服务管理 a) 计量与会计:从客户的记账、性能报告检测客户对ASP的使用情况,并从客户资产和客户为未 来活动与升级所订的计划中收集有用数据。计量与会计过程应当获取以下六种数据用于 计算: 1) 应用系统事件: ———专用应用系统的用户,这类应用系统按客户或时间划分; ———共享应用系统的客户和最终用户; ———应用、客户机和服务器、时间段等事务计数; ———事务的货币价值和一个记账周期中的量; ———产品目录大小等。 2) 服务器使用日志: ———CPU负荷和时间分配; ———进程、线程的CPU时间使用率等。 3) 网络使用情况: ———带宽使用率(通信量); ———传输单元大小(