DB44_T 1561-2015 云计算服务质量评测方法(广东省).pdf

ICS.35.04。L 80 备黛号4洒922015DB44 广东标地方省准0844月1561-2015云计算服务质量评测方法The evaluation method for cloud computing service Quality 2015-03-26发布2015-06-26实施广东省质量技术监督局发布1 DB44/T 1561-2015 目次前言.,.,.111.111.,.111.111.Ill l 范围.112 规范性引用文件3 术语和定义.,.tI.伊而.I.品可也尸.4 5 6.5可维护7 评价指标使朋方洒._.111 .1-.1.8 7.1榄述.哥.，.-1.111.,.,.2二二二.,.111.,.1.8-四44月1561-2015目IJJ=I 本标准按照GB/T1.1-2009给出的规则起草。本标准由广东省质量技术监督局提出井归口。本标准起草单位:广州海格通信集团股份有限公司、广州通导信息技术服务有限公司、广州市标准化研究院、东莞中国科学院云计算产业技术创新与育成中心、国云科技股份有限公司、广州中熙信息科技有限公司。本标准主要起草人z骆启武、胡惶惶、苏晶、吴潇、贺高戈、谢学富、李利平、陈朝晖、杨建华、李勇华、吕小芳、伍敏、潘攀、王国华、李梅、付春燕、林金珍、马丽、张楠、谢志华。本标准为首改发布。皿3 回44月1561-2015云计算服务质量评测方法1 范围本标准规定了云计算服务服务质量评测方法的术语和定义、服务质量评价指标、指标评价方法、评价指标使用方法、评价结果应用。本标准适用于云计算服务质量评酬。日期的版本适用于本f牛。2 规范性引用文件3 术语和定义3.1 云计算II二种交付计量的方式在得l务。3.2 户窑k飞业议企协的组务等服务供服提约3.3 服务质量服务能够满足规定和潜在需求的3.4 服务提供商service provider 云计算服务的直接提供者D4 缩畸语下列缩略语适用于本文件。QoS:服务质量(Qualityof Service)4 0844/T 1561-2015 SLA:服务等级协议CServiceLevel Agreement)SP:服务提供商CServiceProvider)服务质量评价指标5 概述服务质量评价指标是指反映孟计算服务提供商所提供服务的准确性、有效性、响应性、安全性、可靠性和友好性的一组参数，云计算服务提供商和用户群或第三方机构可以用这些参数来对云计算服务的效果及用户的满意程度进行评价。5.1 评价指标体系5.2 云计算服务质量评价指标体系如图l所示。云讨算服务质量评价指标服务可维护性服务效率性服务可靠性服务安全性服务，叫用性云计算服务质量评价指标体系固固1评价指标说明5.3 云计算服务质量评价指标硝尊提及指标说明如l表i所示。式计算服务质量评价指悻说明一级指标二级指栋指标说明服务实现的完备性应能按照SLA提供柑合赛在的所有服务服务提供商通过来用适合于某种服j-，型的合理一致的标准进行计量的能力，服务的可度量性适合于服务类型如存储、进程、荷艇、精ltH户账户等)的计量能力来自动地统计、睦制和优化资捕的使用，贵掘的胆的，l每通过对服务提供商和用户都造明的方式被监控、控制和l报告可用性业务弹性服务提供商所提供的服务叮满足用户随时申请、释放、调将14计算服务费酒使用要求的能力应用可配置性应允许用户根据自己的情况对界面配置、应用数据、应用业务规则、业务流程、内容配置、功能配置、性能配置和安全配置进行配置服务提供商根据SLA的约定满足用户在启用或弃用云计算服务时对自有数据进数据可迁移性仔迁入、迁出的能力。应该对迁入迁出的数据进行明确定义，防止嚣意数据污染云平台和防止敏感数据泄露2 表1画、品hd四44月1561-2015囊1云计算服务质量评价指标i昆明(续一组指挥=组拮据指挥说明性能持合性服务提供商承诺提供的服务的具体业务功能凶且为用户提供的包括计算暨据、存储资源、网络暨洒的功能和性能的持合性可用性服务提供商应该提供用户自助管理服务功能，使用户能够定制暨据英型和配服务可管理性置、暨据使用的时间和请问方式、在结完成费用支付、查询黄据使用情况服务的保密性服务提供商应承诺用户应有拥密或隔离等手段保证同一直掘地用户盘据直不可见服务提供商店承诺数据中心具备完善的物理安全防植技术，限制可审问数据中物理安全心的人员、解决高业务影响力盘据的需求、集中进行物理费产的访问管理，服务提供商应保障构成云计算平台的各类基础设施的圭全主机安全服务提供商应保障包括服务器、终端/工作站等在内的计算机设备在操作系统及数据库系统层面的安全网络安全服务提供商应为云计算平台网络环塌的主全运行提供支持应用安全服务提供商应保护云计算平台中的各种业务应用程序去全运行安全性数据安全服务提供商要保障云计算平台中运行的各种数据(用户数据、系统数据、业务数据等的安全服务提供商应向用户提供安全监管的渠道，使用户能够透明地罪恶云计算JIl安全保障造明性务目前所采取的安全措施和安全策略，及时反映目前发生的安全事件;安全监营渠道应国经过严格捏扭，不能泄露用户敏感信息盘据的可销盟性服务提供商承诺在用户要求删除数据或设备在弃置、转售前必缅将其所有数据制1高删除，井无措草原数据的知情权服务提供商应向用户提供数据存储的区域和使用日志的能力虚拟机隔离性服务提供商应保证虚拟机不能突破虚拟机管理进程的暨摞限制，虚拟机迁移后两者是一致的服务可拓、古性发生服务中断时，应在SLA约定的时间内恢复服务数据备份的可4悟性服务提供商承诺在合同期内进行现有平台数据的备份，保证在数据丢失时能够有我;找回数据容灭的可靠性务挝供tl承i若在遇到不可抗拒力(如拱水、地霞、火灾等)造成数据丢失后，能够商效a叶恒的战回数据操作系辑运行的可靠性操作系统产品要求f3t;乡长时间运抒、具备备份恢复功能、能提供可靠性可靠性数据库系统运行的可靠性数据库系统产品要求胎够长时1可运行、具备备份恢复功能、能提供可靠性数据库系统运行的可靠性数据库管理系统能够有姓监摘自身的i主f枕态，自功发现数据库实例，能够对己设置的数据库性能阀值进行监控和报警，tl:l碰撞据库的可靠性中间II运行的可靠性中间件产品应具有高可用性，具有状态恢复机悦和自动植障切换功能网络、设施及链路可靠性服务提供商内部应具备网络、设施链路的备份机制，保证用户在捐费时不会因此而影响服务质量和强果宽备系统的可靠性究备系统在日常情况下的可靠性服务的及时响应性能按照SLA在要求的时间内及时响应用户的服务请求敢率性服务互动向通机制对服务供右的互动向迪机制的建立与实施情且进行瞌查服务投诉解决率统计井比较得到有强处理的投诉数量和收到的投诉数量计算萤拥配置及时性在规定时间内完成物理/虚副主机的分配，在配置完成后能够对之进行管理3 6 7 DB44月1561-2015表1云计算服务质量评价指标说明(续一级指标二纽指标指标说明虚拟机迁移时间服务提供商承诺用户完成虚拟机迁移的时间应用迁移时间服务提供商承诺用户完成应用迁移的时间，根据不同的应用迁移场景，服务提供商应在承诺事件内完成应用迁移而不会影响到用户业务的正常使用效率性业务资源配置及时性能够在规定时间内及时响应用户对业务资源的要求部署服务请求的强.$性对于部署服务的请求在规定的时间内予以响应业务开通效率性能够在规定时间内开通业务平均故障修复时间平均故障修复时间能够符合SLA中的时间要求系统易扩展性系统的架构、设备、软件功能模块等要易于扩展可维护性系统模块应该符合低棋合的设计原则.棋块间的依赖程度应该足够低，从而降模块化低模块的维护成本兼容性系统所采用的标准或规范应兼容相关国际通用标准或规范L一6 指标评价方法6.1 可用性6.1.1 服务实现的完备性用己实现的功能服务与SLA中要求实现的服务进行比较，以检查SLA巾所规定的所有业务功能服务是否都已经在服务交付后完全实现。6.1.2 服务的可度量性通过调整资源检查系统是否能按照用户意愿调整资源、是否能正确记录并如实反映资据调整情况。检查资源使用的监控、拉;叫和报告的方式是否对服务提供商和用户都透明。6.1.3 业务弹性检查扩展和缩减单位计算、存储E飞网络资间的实践是否能达到服务提供商所承诺的时间要求。检查最大扩展容量是否能达到服务提供商所承诺的容是悟。6.1.4 应用可配置性检查云计算服务平台是否具有应用可配置性，用户可根据白身需求在许可的范围内对应用的配置进行调整:检查配置项是否包括界面配置、庇用数据、应用业务姐则、4k:-6-流程、内容配置、功能配置、性能配置和安全配置等内容。6.1.5 数据可迁移性当用户新启用-一个云计算服务时，用户数据应该能安全有敢地迁入数据中心1当用户弃用云计算服务时，用户数据应该能安全有效地迁出数据中心:在数据迁入时，应该检查用户数据是否涉及恶意病毒文件和恶意脚本，检查是否存在不符合标准的数据格式:在数据迁出肘，应嵌检查用户数据是否涉及云计算平台中的敏感信息或者其他云计算租户的敏感信息。6.1.6 功能符合性4 D剧4/T1561-2015 依据云计算服务提供商的业务使用手册，对各项业务功能进行操作，检查是否符合提供商承诺的业务功能。通过第三方权威软件对计算资源、存储资激、网络资源的功能和性能进行测试，以检查是否符合提供商承诺的功能、性能;网络设备应该根据RFC1242/2544进行网络基准性能检测，确保网络设备满足性能要求。6.1.1 服务可管理性检查云计算服务平台是否布自助服务功能，使用户在许可范围内，自由调整云资洒的类型、数量、使用时间和访问方式，并且能在线完成费用支付、查询资源使用情况。6.2 安全性6.2.1 服务的保密性发布的指定商用密码算、6.2.2 物理安全检查云计算数据可管理进入数等级业务的管理6.2.3 主机安使用相关检测防范、网络设备防6.2.5 应用安全6.2.6颤据安全,标记、询问控制、可债陆镇、，-$:.拿审计、剩余信息保护i入侵睹范、罪意代码.，.-:-1._.1 方面肘包括服务器L终端/工作站等内d的计算机设备在操作系盘及数据库系统计、剩余信息保护、通应用程序进行安全检测。检查云计算服务提供商是否按照己设的备在贺电?定期备份和测试估息、软件及系统镜像。通过用嗅探工具获取系统传输数据包，查看其是否采用了加密或其他有效措施实现数据传输、处理和存储过程中的完整性和保密性。检查云计算服务提供商是否具备有制定服务保密策略的能力:检查云计算服务提供商现膏的保密策略是否能够满足云计算用户的保密需求。6.2.7 安全保障最明性检查服务提供商是否已经向用户提供安全监管的渠道，使用户能够透明地在恶云服务目前所采取5 8 DB44/T 1561-2015 的安全措施和安全策略，及时反映目前发生的安全事件:检查安全监管的渠道是否已经过严格的授权，只开放给必要的人员:检查公开的信息是否涉及用户敏感信息。6.2.8 数据的可销毁性用户数据彻底删除的场景不包括云服务商为未及时续费用户的数据保留一定时间的情况，以防止用户由于某些原因无法及时续费导致重要数据被删除，在用户要求删除数据或设备在弃置、转售前服务商将采取高级情零操作彻底删除用户所有数据，井无法复原，硬盘报废时将消磁。6.2.9 数据的知情极服务提供商应该提供用户数据存储位置视图，描述用户数据所存储的物理机柜、物理服务器、虚拟机、数据库和数据库表的位置等。云计算服务应该向用户提供用户数据被调用的程序或进程列衰。6.2.10 虚拟肌隔离性检查多租户虚拟机间隔离具体监管措施和报告机制，并验证在隔离破坏时是否产生告警:查看虚拟机物理资荫分配原则，是否能保证每个虚拟机都能获得相对独立的物理资源，并保证同一物理主机上不同虚拟机间逻辑隔离:验证在单个虚拟机异常时，虚拟机管理软件及其他虚拟机是否能够正常运行。验证虚拟机是否不能突破虚拟机管理进程的资源限制，井且虚拟机迁移后两者是一致的。6.3 可靠性6.3.1 服务可恢复性检查云计算服务提供商是否有关于服务恢复的相关管理制度和灾难恢复策略，确保云计算服务中断时能采取相应的应急措施:检查是否有定期执行恢复程序，确保服务恢复应急措施的有般性。6.3.2 数据备份的可靠性检查服务提供商是否再数据各份的相关制度，对备份信息的各份方式、备份额度、存储介质和保存期等进行规范:检责怪计策略是否符合数据备份的相关制度规定，确保用户数据在合同期内正常备份。6.3.3 数据喜灾的可靠性检查服务提供商是否有数据容究的相夫fhl豆，井建立明确、有放的灾难恢复策略:检查是否定期执行恢复程序，检查和测试备份介质的有效性6.3.4 操作系统运行的可靠性检查云计算服务提供商是否有操作系统产品运行稳定方面的制天制度要求、系统配置指南啡，确保操作系统稳定运行:检查操作系统是否遵循相关制度和系统配置指南35卡。6.3.5 撒据库系统运行的可靠性检查云计算服务提供商是否有数据库系统产品运行稳定方面的相关制度要求、数据库系统配置指南等，确保数据库系统稳定运行;检查数据库系统是否遵循相关制度和系统配置指南要求。6.3.6 数据库系统运行的可靠性检查数据库管理系统是否有监控自身运行状态的功能，能自动发现数据库实例，对数据库性能阀6 n3 值进行监控和报膏。6.3.7 中闰件运行的可靠性检查中间件产品是否具有状态恢复机制和自动故障切换功能，6.3.8 罔缩、设施及链路可靠性四44月1561-2015检查数据中心网络拓扑，网络结构的重要部分应该有冗余的设施及链路，应该以现话或主备的方式部署网辑:应该定期进行设施及链路的主备切换测试，确保可靠性措施的有效性。6.3.9 究备系统的可靠性检查服务提供商是否有关于云计算服务灾备系统相关制度规定，定义灾备系统的运仔维护方法，确保灾备系统可靠:检查服务提供商是否有定期进行系统主备切换测试，确保灾备系统能正常运作、检查灾备系统的工作日志，6.4敢率性6.4.1 服务的及时晌应性检查用户的正常服务请求是否在SLA规定的时间内及时得到响应和处理，或统计并比较及时响应的服务请求的数量与总的服务请求数量。6.4.2 服务互动沟通机制检查云计算服务是否有提供信息发布机制、反惯机制和问题解决情况等沟通互动机制，保证服务提供机构和用户信息畅通、现向互动:应调查沟通互动机制是否满足友好性，能主动监控服务情况和分析服务趋势，及时感知和预删用户问题:服务提供机构的沟通互动主体应该服务态度友好、服务行为规范。6.4.3 服务投诉解决率统计井比较得到有效址理的投诉数量和收到的投诉数量。6.4.4计算资源配置及时性检查用户的正常的计算资源配置请求是否在LA规定的时间内及时得到响应和处理，或统计井比较及时响应的服务请求的数量与总的服务请求数量。6.4.5 虚扭l舰迁移时间从服务提供商开始实施虚拟机的在结迁移，到虚拟机完成在统江:悖井可再次对云平台提供服务，其时间应不超过SLA规定的时间。从服务提供商开始实施虚拟机的高线辽蓓，到虚拟机完成离钝迁移井可再次对云平台提供服务，其时间应不超过SLA规定的时间。6.4.6 应用迁移时间从服务提供商开始实施应用的迁移，到应用完成迁移井可再次对用户提供服务，其时间应不超过服务提供商所承诺的完成时间。6.4.7 业务资漂配置及时性7 I 0.11 DB44/T 1561-2015 检查用户的正常的业务资源配置请求是否在SLA规定的时间内及时得到响应和处理，或统计井比较及时响应的服务请求的数量与总的服务请求数量。6.4.8 部署服务请求的鼓率性检查用户的正常的部署服务请求是否在SLA规定的时间内及时得到响应和处理，或统计并比较及时响应的服务请求的数量与总的服务请求数量。6.4.9 业务开通妓率性检查用户的正常的业务开通请求是否在SLA服务等级协议规定的时间内及时得到响应和处理，或统计并比较及时响应的业务开通服务请求的数量与总的服务请求数量。6.5 可维妒性6.5.1 平均故障修复时间平均故障修复时间的定义见D844/T1343-2014中的5.2.2.1.通过查看云平台的系统日志，统计系统的平均故障修复时间，平均故障修复时间应该符合SLA中所提出的要求。6.5.2 系统可扩展性系统可扩展性检查分为网络系统架构、设备、软件功能模块等三部分:a)检查网络架构是否采用易于扩展的互联方式，例如是否按照星型拓扑分多个层次进行网络拓扑的布局:b)检查设备是否留有足够的兀余端口、是否能够易于通过增加同类设备从而提高性能:c)检查软件系统是否留有可扩展的系统接口，使系统能够方便开发新的功能模块。6.5.3 模块化检查系统模块间的控制关系、调用关系和数据传递关系，确定系统模块间的稿合程度。6.5.4 兼容性检查系统所采用的标准或划施是岳来寄相关国际通用标准或规范。兼容性从以下两方面进行检查za)软件标准兼容性:检查软件议讨文当中关于标准遵循方面的描述是否为通用标准或规范;b)硬件设备生产标准兼容性:检查硬件岐备4占百具备产品说明书、产品的资质证书、销售许可等文档，检查文挡中所描述的标准和规范牧括是否边循通用标准或规范。7 评价指标使用方法7.1 概述依据服务质量指标，对云平台的服务质量进行综合评估，并基于评价结果形成质量评价等级，使服务提供商、服务使用者之间达成统一的服务质量认知。评价步骤包括:确定服务质量评价指标集合，确定各评价指标权重，依据评价结果形成质量等级评价。7.2 评估指标权重值及评价值在对云计算服务质量进行评价时，服务提供商应与服务使用者之间依据协议约定或实际需要确定8 084411 1561-2015 对各项指标权重值，各级别权重值之和汇为100.通过对每项指标进行客观评价并给出评价值，评价值为0至1.越接近1越好。另针对每个二级指标的评价值为X.实际评估值为X.则两者之间的计算公式为X=!:*x.质量评估值如表2所示，各项指标的参考值参见附录A。表2匮量评估值表一摄指标权重二辑指标权重评价值区间服务实现的完备性(,)11 0-1 的可二殷勤、也)12。-1/业务弹性飞、也)13。-1可用性也I 1/作用可配置性飞14。-1/明迂雪飞J 出主。-1/4性F飞扎。-1服务斗管理扣飞17飞。-1服务咖啡一飞。-1功理安全。-1空tJL安全也)23。-1网络安全也)24。-0-1./古可直f量于x(,)25 去全性(Q2/3据省2fi。-1/卢全保障透明性 0-1 数据的可销毁性件l。-1I JT数据翩翩户/。-1 LLJd百与二1h1叮;a-s鸭MI:隔离性/J。-1 阳的时/r-。-1k 蛐毒盐的可报如/坦。-1?据容究的可靠性/也)33o-操作系统运行的可靠性也)34。-可靠性WJ 数据库系统运行的可靠性35 0-1 数据库系统运行的可靠性36。-1中间件运行的可靠性W37。-1网络、设施及链路可靠性也)38 0-1 究备系统的可靠性W39。-19-12 13:,DB44.月1561-2015表2质量评估值表(续)-辑指标极重二级指标权重评价值区同服务的及时响应性W41 01 服务互动沟通机制也)42 0-1 服务投诉解决率b且43。-1计算资源配置及时性也)41。-1效率性也)4 虚拟机迁移时间W 45 0-1 应用迁移时间也)16。-1业务资源配置及时性W 47。-1部署服务请求的效率性)48。-1业务开通效率性。)49 0-1 平均故障修复时间W51。-1系统可扩展性W 5l。-1nf维护性也)5模块化W53。-1兼容性也)510-1 7.3 服务质量级别划分本标准建议依据表2中的质量评估值表，将服务质量划分为五个级别，其中五级为最高级级为最低值，如表3所示。表3服务质量级别表属务质量级别对应实际评估值区间评价结果描述及表示方法一级0X60 一星级*二，级6Q:oX 了70二星级食*三级70马X80二星级食舍*四级80王三X90四且级食食食食五级90:5;X 1.县级食，传食*食j主x为按照服务质量评价指标体系进行评价而在取的评价结果值。8 评价结果应用云计算服务提供商应在运营过程中通过自我评测或邀请第三方公认检测机构定期对服务质量指标体系进行评估，并依据评估结果形成服务质量等级评价，此评价应对服务使用者进行公开，作为服务使用者选择购买服务的参考依据囚10。B44月1561-2015附录A(资料性附录质量评价值-扭重番考值A.l 质量评价值-扭重参考值质量评价值-权重参考值表见表A.1.表A.l质量评价值-扭重参考值表一组指标担重二辑指标扭重参考噩说值服务实现的完备性Wu 4%服务的可度量性W 12 4%业务弹性Wl3 5%可用性也】1应用可配置性也)14 5%数据可迁移性Wl5 4%功能带合性。)16 4 服务可管理性WI1 4%服务的保密性W21 2%物理安全W22 2%主机安全W23 2%网络安全24 2%应用安全也)25 2%安全性W2 数据安全也)26 2%安全保障透明性也】212%盘据的可销毁性Ul28 2%散据的知情扭也)29 2%应在(机隔离性也J210 2%服务的恢性也)1 3%数据备份的可靠性也)32 3%数据容史的可靠性W33 2%操作系统运行的可靠性W34 2%可靠性3 数据库系辑运行的可靠性也)36 2%数据库系统运行的可靠性也)362%中间件运行的可靠性WJ7 2%网络、设施及链路可靠性也)382%究备系统的可靠性也)39 2%敢率性服务的及时响应性也)41 2%也).服务直动向迪机制也422 11 34 DB44/T 1561-2015 表1届量评价值-权重参考值衰(续-纽指标权重二级指标权重评价值区间服务投诉解决率W43 2%计算资源配置及时性Wf4 3%虚拟机迁移时间也且452%效率性也】4应用迁移时间也)46 m 业务资源配置及时性也)47 3%部署服务请求的效率性也)482%业务开通效率性也咀2%平均故障修复时间W 51 3%系统可扩展性W 52 3%可维护性Ws 模块化W53 2%兼容性也)51 2%12 15 的FON-F由国F户咕咕己广东省地方标准云讨算服务质量评测方法D44/T 1fil-2015*广东省标准化研究院组织印刷广州市海珠区南田路563号1104室邮政编码510220同址www.bz360.org电话[phone]南方医科大学广州广卫印刷厂1.6