DB35∕T 2018-2021 信息化业务协同标准符合性测试(福建省).pdf

ICS 35.240 CCS L 67 35 福建省地方标准 DB35/T 20182021 信息化业务协同标准符合性测试 Test for informatization on business coordination of standard conformance 2021 - 09 - 28 发布 2021 - 12 - 28 实施福建省市场监督管理局 发 布DB35/T 20182021 I 目次 前言 . II 1 范围 . 1 2 规范性引用文件 . 1 3 术语和定义 . 1 4 缩略语 . 2 5 测试流程 . 2 6 测试指标 . 3 7 测试内容及方法 . 4 8 测试结果说明 . 6 附录 A（资料性） 关键技术文档模板示例 . 10 附录 B（规范性） 信息化业务协同标准符合性测试报告大纲 . 12 参考文献 . 13 DB35/T 20182021 II 前言 本文件按照GB/T 1.12020标准化工作导则 第1部分：标准化文件的结构和起草规则的规定起草。 请注意本文件的某些内容可能涉及专利。本文件的发布机构不承担识别专利的责任。 本文件由福建省数字福建建设领导小组办公室提出。 本文件由福建省信息化标准化技术委员会（SAFJ/TC 11）归口。 本文件起草单位：数字中国研究院（福建）、福建省计量科学研究院。 本文件主要起草人：郑培强、肖桂荣、卢毅敏、蔡圣准、陈苏、蒋锐、赖建华、杨波、王国乾。 DB35/T 20182021 1 信息化业务协同标准符合性测试 1 范围 本文件描述了信息化业务协同标准符合性测试的流程、指标、内容和方法、结果说明等内容。 本文件适用于财政投资的信息化项目的业务协同标准符合性数据流测试，其他信息化项目的业务协同标准符合性数据流测试参照使用。本文件规定的测试指标仅适用于数据流测试。 2 规范性引用文件 下列文件中的内容通过文中的规范性引用而构成本文件必不可少的条款。 其中， 注日期的引用文件，仅该日期对应的版本适用于本文件；不注日期的引用文件，其最新版本（包括所有的修改单）适用于本文件。 GB/T 33780.62017 基于云计算的电子政务公共平台技术规范 第6部分：服务测试 3 术语和定义 下列术语和定义适用于本文件。 3.1 业务协同 business coordination 不同系统之间按照一定的业务流程， 通过信息共享和交换， 及时高效处理一项或者多项业务的过程。 来源：GB/T 256472010，3.3.4，有修改 3.2 业务协同对象 business coordination object 业务协同涉及到的各相关系统。 3.3 标准符合性测试 standard conformance test 依据标准对软件产品进行的定性与定量测试， 以确认被测对象是否符合该标准， 或者在多大程度上符合标准的测试。 来源：WS/T 5022016，3.1，有修改 3.4 网络通 net connectivity 网络的传输连通性及传输质量。 3.5 业务通 business connectivity 在业务协同过程中数据交换和共享的符合程度。 3.6 数据通 data connectivity 在业务协同过程中数据交换和共享的符合程度。 DB35/T 20182021 2 4 缩略语 下列缩略语适用于本文件。 CPU：中央处理单元（Central Processing Unit） IP：互联网协议地址（Internet Protocol Address） QoS：服务品质（Quality of Service） SQL：结构化查询语言（Structured Query Language） 5 测试流程 5.1 测试流程图 信息化业务协同标准符合性测试流程图如图1所示。 图1 信息化业务协同标准符合性测试流程图 5.2 测试流程说明 5.2.1 委托单位流程 委托单位流程如下： DB35/T 20182021 3 a) 提交测试申请，提供被测试项目需求说明书、设计文档、接口规范（含数据元标识符、数据类型、值域等规范）、网络拓扑等用户文档以及接口调用关系表、软硬件环境列表、测试指标列表等关键技术文档，关键技术文档示例参见附录 A； b) 签订测试协议，对测试方案和测试计划进行确认以及配合测试； c) 提供测试环境以及技术支持，配合测试机构进行标准符合性测试，对缺陷进行整改。 5.2.2 测试机构流程 测试机构流程如下： a) 负责对委托单位的测试申请及材料进行审核； b) 进行测试对象调研、确认测试接口规范等测试准备； c) 编写测试方案与测试计划； d) 搭建测试环境； e) 执行标准符合性测试以及发布测试报告，信息化业务协同标准符合性测试测试报告大纲应符合附录 B 的规定。 6 测试指标 测试指标见表1。 表1 测试指标表 序号 一级指标 二级指标 1 网络通 网络连通性 网络延迟性 网络丢包率 2 业务通 业务协同成功率 业务协同充分率 业务协同正确性 业务协同实时性 3 数据通 数据元标识符符合性 数据类型符合性 值域符合性 数据重复率 数据缺失率 数据可理解率 数据可用率 4 接口性能 平均响应时间 CPU占用率 内存占用率 5 接口安全 接口调用可核查性 数据过滤安全性 接口访问频率 DB35/T 20182021 4 7 测试内容及方法 7.1 网络通测试 7.1.1 网络连通性 测试内容：网络的连通性。 测试方法：按照GB/T 33780.62017中的14.1.2的规定。 7.1.2 网络延迟性 测试内容：QoS等级为0级和1级的网络延迟和抖动，QoS等级1级时不做测试。 测试方法：按照GB/T 33780.62017中的14.1.2的规定。 7.1.3 网络丢包率 测试内容：网络端到端丢包率。 测试方法：按照GB/T 33780.62017中的14.1.2的规定。 7.2 业务通测试 7.2.1 业务协同充分率 测试内容：被测对象调用业务协同对象接口的充分性。 测试方法： 依据接口调用关系表等项目关键技术文档中对调用业务协同对象接口数量的要求， 查验接口调用的充分性。 7.2.2 业务协同成功率 测试内容：被测对象调用业务协同对象接口的成功率。 测试方法：依据接口调用关系表等项目关键技术文档，通过接口抓取数据包，依据接口返回信息判定调用接口是否成功。 7.2.3 业务协同正确性 测试内容：被测对象是否满足业务协同对象的业务流程一致性和业务流程完整性。 测试方法： 依据业务协同对象提供的关键技术文档， 测试被测对象的业务协同过程是否满足业务协同对象的要求。 7.2.4 业务协同实时性 测试内容：业务状态的实时性。 测试方法： 依据接口调用关系表等项目关键技术文档中对实时性的要求， 测试被测对象的业务状态是否实时更新。 7.3 数据通测试 7.3.1 数据元标识符符合性 测试内容：被测对象的数据元标识符是否符合业务协同对象数据元标识规范。 DB35/T 20182021 5 测试方法：依据业务协同对象提供的关键技术文档，对被测对象的数据元标识符进行比对分析，判定是否满足业务协同对象数据元标识规范。 7.3.2 数据类型符合性 测试内容：被测对象的数据类型是否符合业务协同对象数据类型规范。 测试方法：依据业务协同对象提供的关键技术文档，对被测对象的数据类型进行比对分析，判定是否满足业务协同对象数据类型规范。 7.3.3 值域符合性 测试内容：被测对象的数据值域是否符合业务协同对象值域规范。 测试方法：依据业务协同对象提供的关键技术文档，对被测对象的值域进行比对分析，判定是否满足业务协同对象的值域规范。 7.3.4 数据重复率 测试内容：被测对象的上传数据是否存在重复。 测试方法：对上传数据进行分析，测试数据的重复率。数据量小于等于1 000条时全部测试；数据量大于1 000条时，按数据量的10%进行抽检，最大抽检量不大于50 000条。 7.3.5 数据缺失率 测试内容：被测对象的上传数据是否存在缺失。 测试方法：对上传数据进行分析，测试数据的缺失率。数据量小于等于1 000条时全部测试；数据量大于1 000条时，按数据量的10%进行抽检，最大抽检量不大于50 000条。 7.3.6 数据可理解率 测试内容：被测对象的上传数据是否符合规范，是否存在乱码、乱序等。 测试方法：对上传数据进行分析，测试数据的可理解率。数据量小于等于1 000条时全部测试；数据量大于1 000条时，按数据量的10%进行抽检，最大抽检量不大于5 000条。 7.3.7 数据可用率 测试内容：被测对象上传的数据，可被业务协同对象利用的程度。 测试方法：对上传数据进行分析，测试数据的可用性。数据量小于等于1 000条时全部测试；数据量大于1 000条时，按数据量的10%进行抽检，最大抽检量不大于5 000条。 7.4 接口性能测试 7.4.1 平均响应时间 测试内容：被测对象在最大用户并发数时的平均响应时间。 测试方法： 通过测试工具测试被测对象在调用业务协同对象接口时， 在最大用户并发数下的平均响应时间。 DB35/T 20182021 6 7.4.2 CPU 占用率 测试内容：被测对象在最大用户并发数时的服务器CPU占用率。 测试方法：通过测试工具测试被测对象调用业务协同对象接口时，在最大用户并发数下的服务器CPU占用率。 7.4.3 内存占用率 测试内容：被测对象在最大用户并发数时的服务器内存占用率。 测试方法： 通过测试工具测试被测对象调用业务协同对象接口时， 在最大用户并发数下的服务器内存占用率。 7.5 接口安全测试 7.5.1 接口调用可核查性 测试内容：被测对象日志是否记录业务协同的用户名、时间、源IP地址、目标IP地址、接口名称、请求的参数和执行结果等内容。 测试方法：通过人工断言的方式。 7.5.2 数据过滤安全性 测试内容：被测对象是否对请求参数进行过滤。 测试方法：通过测试工具测试请求参数是否过滤请求攻击代码，如SQL注入、命令注入、远程代码执行等。 7.5.3 接口访问频率 测试内容：被测对象是否满足业务协同对象对单个用户访问频率的要求。 测试方法：通过测试工具或者调用业务协同对象返回的信息进行测试。 8 测试结果说明 8.1 网络通测试 网络通测试结果说明见表2。 DB35/T 20182021 7 表2 网络通测试结果说明 指标名称 指标说明 测试结果说明 网络连通性 通过 ping 等工具测试被测对象到业务协同对象之间的网络是否可连通。 测试结果为符合要求或者不符合要求。 网络延迟性 通过测试工具测试被测对象的网络延迟抖动，固定包长测试采用64字节、128字节、256字节、512字节、1024字节、1280字节、1518字节帧长，测试仪表产生端口速率50%、70%、90%的测试流量，测试两点间的时延、抖动，测试时长120s。当QoS等级为0级时，时延60 ms，抖动30 ms；当QoS等级为1级时，时延150 ms，抖动50 ms；当QoS等级1时，不做测试。 测试结果为符合要求或者不符合要求，QoS 等级1 时，测试结果为“/”。 网络丢包率 通过测试工具测试被测对象的网络丢包率，固定包长测试采用 64字节、128字节、256字节、512字节、1024字节、1280字节、1518字节帧长，测试仪表产生端口速率50%、70%、90%的测试流量，测试两点间的丢包率，测试时长120s。在70%流量512字节下的端到端丢包率应小于0.1%。 测试结果为符合要求或者不符合要求。 8.2 业务通测试 业务通测试结果说明见表3。 表3 业务通测试结果说明 指标名称 指标说明 测试结果说明 业务协同充分率 D=A/N 式中： D测试结果。 0D1 测试结果越接近1越好。 业务协同成功率 D=A/N 式中： D测试结果； A成功调用业务协同对象接口的次数； N总的业务协同对象接口次数。 0D1 测试结果越接近 1 越好。 业务协同正确性 根据业务协同对象的接口规范，测试被测对象的业务协同过程是否正确的满足业务协同对象的要求。 测试结果为符合要求或者不符合要求。 业务协同实时性 调用业务协同对象接口后，测试被测对象的业务状态是否实时更新,响应时间与请求时间相差的最大值在 1s 内为符合要求。 测试结果为符合要求或者不符合要求。 8.3 数据通测试 信息化业务协同标准符合性的数据通测试结果说明见表4。 DB35/T 20182021 8 表4 数据通测试结果说明 指标名称 指标说明 测试结果说明 数据元标识符符合性 D=A/N 式中： D测试结果； A符合数据元标识规范的数据元数； N应符合数据元标识规范的数据元数。 0D1 测试结果越接近 1 越好。 数据类型 符合性 D=A/N 式中： D测试结果； A符合数据类型规范的数据元数； N应符合数据类型规范的数据元数。 0D1 测试结果越接近 1 越好。 值域符合性 D=A/N 式中： D测试结果； A符合数据元值域规范的值域数； N应符合数据元值域规范的值域数。 0D1 测试结果越接近 1 越好。 数据重复率 D=A/N 式中： D测试结果； A被测对象上传数据重复的数据记录数； N总的测试数据记录数。 0D1 测试结果越接近 0 越好。 数据缺失率 D=A/N 式中： D测试结果； A被测对象上传数据缺失的数据记录数； N总的测试数据记录数。 0D1 测试结果越接近 0 越好。 数据可理解率 D=A/N 式中： D测试结果； A被测对象上传数据可理解的数据记录数； N总的测试数据记录数。 0D1 测试结果越接近 1 越好。 数据可用率 D=A/N 式中： D测试结果； A被测对象上传数据可被业务协同对象利用的数据纪录数； N总的测试数据记录数。 0D1 测试结果越接近 1 越好。 DB35/T 20182021 9 8.4 接口性能测试 信息化业务协同标准符合性的接口性能测试结果说明见表5。 表5 接口性能测试结果说明 指标名称 指标说明 测试结果说明 平均响应 时间 通过测试工具测试被测对象在调用业务协同对象接口时，在最大用户并发数时的平均响应时间。 测试结果越小越好。 CPU 占用率 通过测试工具测试被测对象调用业务协同对象接口时，在最大用户并发数下的服务器CPU占用率。 测试结果越小越好，CPU 不大于 85%。内存占用率 通过测试工具测试被测对象调用业务协同对象接口时，在最大用户并发数下的服务器内存占用率。 测试结果越小越好，内存不大于 85%。 8.5 接口安全测试 信息化业务协同标准符合性的接口安全测试结果说明见表6。 表6 接口安全测试结果说明 描述 指标说明 测试结果说明 接口调用 可核查性 人工测试日志是否记录业务协同的用户名、时间、源IP地址、目标IP地址、接口名称、请求的参数和执行结果等内容。 测试结果为符合要求或者不符合要求。 数据过滤 有效性 测试是否对常见攻击请求代码进行了过滤，如 SQL 注入、命令注入、远程代码执行等。 测试结果为符合要求或者不符合要求。 接口访问频率 测试接口访问频率是否过大或者过小、是否满足业务协同对象对单个用户访问频率的要求。 测试结果为符合要求或者不符合要求。 DB35/T 20182021 10 A A 附录A （资料性） 关键技术文档模板示例 A.1 接口调用关系表 接口调用关系表见表A.1。 表A.1 接口调用关系表 平台名称 接口名称 接口类型 接口地址 方法名 福建省政务数据汇聚共享平台 通过用户证件号获取失信被执行原因接口 WebAPI http:/10.100.10.170:8072/specialContrl/queryByUserIdentity queryByUserIdentity 福建省救助申请家庭经济状况核对平台 高级人民法院失信被执行人信息查询接口 WebService http:/10.6.88.64:9000/JjhdService.asmx gysxcx A.2 软硬件环境列表 硬件列表和软件列表见表A.2和表A.3。 表A.2 硬件列表 序号 名称 型号配置管理编号用途1 服务器 Dell PowerEdge R720 CPU：至强 3204/6 核； 内存：32 GB； 硬盘：1 TB。 YD0027 应用服务器 2 服务器 Dell PowerEdge R910 CPU：至强 6130/16 核； 内存：64 GB； 硬盘：3 TB。 YD0028 数据库服务器 注： 硬件为支持被测试对象正常运行的硬件设备。 表A.3 软件列表 序号 名称 版本号用途1 Windows Server 2012 R2 Standard (64 Bit) 6.1.7601 服务器操作系统 2 SQL Server 2012 10.0.1600.22 数据库 注： 软件为支持被测试对象正常运行的软件环境。 A.3 测试指标列表 测试指标列表见表A.4。 DB35/T 20182021 11 表A.4 测试指标列表 接口名称 技术指标 高级人民法院失信被执行人信息查询接口 最大并发数：200； 平均响应时间3s。 DB35/T 20182021 12 B B 附录B （规范性） 信息化业务协同标准符合性测试报告大纲 B.1 提纲 信息化标准业务协同符合测试报告大纲内容如下： a) 报告封面； b) 声明； c) 报告属性信息； d) 测试工具描述； e) 测试环境； f) 结论描述； g) 测试结果。 B.2 报告页 B.2.1 报告封面 封面包括报告编号、报告名称、项目名称、委托单位、报告时间和测试机构名称以及认定或认可标识等内容。 B.2.2 声明 对报告有效性及复制报告等相关声明。 B.2.3 报告属性信息 描述项目名称、测试地点、样品内容、测试日期、测试依据、审核人和批准人等信息。 B.2.4 测试工具描述 描述测试工具的名称、版本号以及校准信息（如有）等信息。 B.2.5 测试环境 描述测试的网络拓扑、接口信息、引用的标准规范以及完成测试工作所必需的计算机硬件、软件、网络设备等测试环境信息。 B.2.6 结论描述 以测试结果和结果判定原则作为依据，对每个测试项进行总体评价。 B.2.7 测试结果 测试结果包括每个测试项的测试内容、测试结果和结果判定等内容。 DB35/T 20182021 13 参考文献 1 GB/T 114572006 信息技术软件工程术语 2 GB/T 25000.12010 软件工程 软件产品质量要求与评价（SQuaRE） SQuaRE指南 3 GB/T 25000.102016 系统与软件工程 系统与软件质量要求和评价(SQuaRE) 第10部分：系统与软件质量模型 4 GB/T 25000.122017 系统与软件工程 系统与软件质量要求和评价(SQuaRE) 第12部分：数据质量模型 5 GB/T 25000.232019 系统与软件工程 系统与软件质量要求和评价(SQuaRE) 第23部分：系统与软件产品质量测量 6 GB/T 25000.242017 系统与软件工程 系统与软件质量要求和评价(SQuaRE) 第24部分： 数据质量测量 7 GB/T 25000.512016 系统与软件工程 系统与软件质量要求和评价(SQuaRE) 第51部分：就绪可用软件产品（RUSP）的质量要求和测试细则 8 GB/T 256472010 电子政务术语 9 WS/T 5022016 电子健康档案与区域卫生信息平台标准符合性测试规范