故障管理和故障处理流程规定.docx

故障管理和故障处理流程规定

14
2020年4月19日
文档仅供参考，不当之处，请联系改正。

故障管理和故障处理流程规定

(暂行稿)

工程运维中心
二〇〇八年八月

目 录

第一章 目的……………………………………………………………………………………3
第二章 工程运维中心在95013业务维护管理中的职责……………………………………3
第三章 95013业务故障分类…………………………………………………………………3
第四章 故障处理的原则: ……………………………………………………………………4
第五章 故障处理时限要求。…………………………………………………………………4
第六章 故障管理和故障报告制度……………………………………………………………4
第七章 故障通报制度…………………………………………………………………………5
第八章 故障处理及报告流程图………………………………………………………………5
第九章 工程运维中心内部处理流程…………………………………………………………6
第十章 外部支持流程(研发、建设和其它厂家）…………………………………………6
第十一章 工程运维中心各部门及公司相关部门的责任……………………………………7
第十二章 故障的跟踪管理……………………………………………………………………7
附件一：95013业务重大/严重故障分析报告…………………………………………………9

第一章 目的

工程运维中心承担95013业务网络和平台日常维护工作，为规范故障管理 和故障处理的工作流程，使网络和平台故障能够得到正确及时地处理，保证 95013业务安全稳定的运行，特制定本规定。

第二章 工程运维中心在95013业务维护管理中的职责

a）工程运维中心网管中心值班工程师和各分公司运维人员承担95013业务的日常运行监控和维护工作。
b）工程运维中心运维组负责95013平台的故障处理；各地分公司运维人员负责现场支持，并负责协调当地运营商的运维支持。
c）建立故障通报制度，如发生重大故障，应按照故障等级和故障上报流程逐级向上汇报。
d）定期召开网络质量分析会，遇有重大故障，应及时召开故障分析会。
负责全公司运维人员的技术业务培训，提高运维人员的技术维护水平和工作能力。

第三章 95013业务故障分类

95013业务系统和网络故障分为重大故障、严重故障和一般故障。
1. 重大故障：全部业务中断
2. 严重故障包括：
一种以上业务全部中断≥60分钟
一省以上业务全部中断≥60分钟
用户注册、业务受理全部中断≥4个小时
3. 一般故障：除重大故障、严重故障以外的其它故障。

第四章故障处理的原则：

先抢通，后修复；先核心，后边缘；先本端，后对端；先网内，后网外， 分故障等级进行处理。

第五章故障处理时限要求。

1. 重大故障，故障处理时限≤2小时。
2. 严重故障，故障处理时限≤4小时。
3. 一般故障，故障处理时限≤24小时。

第六章故障管理和故障报告制度
a） 发生故障时，各级运维人员应按照故障等级和时间，逐级上报。
当严重故障时间≥1小时，运维组人员应报告给工程运维中心。
当严重故障时间≥2小时，上报给公司主管副总。
当严重故障时间≥4小时，上报给公司总裁。
当网络和平台出现重大故障时，各级运维人员应在第一时间逐级上报。
b) 对于95013业务系统各级故障，若在规定故障处理时限内未能恢复，故障级别自动上升一级，故障处理人员应按新的故障等级进行处理。
c) 重大故障发生或其它故障升级为重大故障后，如果超过故障处理时限1小时仍未能解决，需升级到工程运维中心协调解决；如果工程运维中心2小时内仍无法解决，需由工程运维中心升级上报到公司管理层。
d） 重大故障处理结束1个工作日内，工程运维中心运维组应填写故障报告并上报工程运维中心。
e) 重大故障处理结束后的2个工作日内，提交《95013业务重大/严重故障分析报告》。

第七章故障通报制度

1. 客服通报：当出现故障时，工程运维中心应立即通知客服，通报故障影响范围、故障处理可能需要的时间，以便客服对用户解释。故障解决业务恢复正常后，应及时通知客服部门。故障处理完以后，应向客服部门通报故障原因， 以及采取的措施。
2. 市场部和业务部门通报：工程运维中心根据故障的具体情况，向市场部或 其它业务部门通报。

第八章故障处理及报告流程图
总部运维组 研发技术支持 外部支持

网管监控软件
客服投诉
运维报修

发
现

明确故障现象
故障判断、定级

上报和处理
根据情况通知建设部门或设备厂家

是否有能力处理？
研发技术人员

Y

是否有能力处理？

共同处理故障
Y
上报时限处理完成

规定时限内处理完成

Y

Y

归档
事件处理管理平台

总部客服平台
各级领导
市场管理

第九章工程运维中心内部处理流程
1. 故障输入包括网管监控发现故障、客服收到用户投诉、各地运维上报、市场业务部门投诉和其它途径告知。
2. 运维组制定专门人员，受理来自于其它部门的故障申告。
3. 非值班人员发现故障后，请第一时间通知网管值班人员进行记录(录入事件管理平台）并可要求值班人员配合故障处理及测试；故障恢复后请告知运维值班人员故障原因及处理方法，值班人员进行观察，确定故障确已恢复。
4. 网管值班人员在发现故障或者接到故障通知后，需首先明确故障现象和影响范围，确定故障级别。值班人员在有能力处理故障情况下应首先自行处 理。在故障上报时限内处理完毕的故障应记录到值班日志里. （事件管理平台)。
5. 当值班人员不能解决故障，且故障级别为一般故障，值班人员应记录到值班日志并把故障情况录入事件处理系统平台。转由总部运维组工程师处理。
6. 当故障级别在重大故障和严重故障，且值班人员不能解决或不能在上报时 间内解决故障，需在上报时间内电话通知技术支持人员，并记录在值班日志和事件处理系统平台里。
7. 运维组人员如在上报时限内解决了故障，需在事件处理系统平台里关闭故障，并通知值班人员，值班人员把情况记录到值班日志（事件管理平台）。
8. 如运维组支持人员不能在上报时限里解决问题，须在上报时限内通知工程 运维中心负责人，并根据情况通知研发、建设部门或设备厂家相关人员，请求协助。

第十章外部支持流程（研发、建设和其它厂家）

1. 业务发展中心研发的接口。业务发展中心协调员是研发的故障处理接口人， 当运维人员处理故障需要研发支持时，应该通知研发设计部门的协调专员。 为提高效率，当遇到重大故障时，运维人员能够直接找相关研发人员寻求支持。
2. 对于重大故障，所有外部支持都需要立即响应，积极配合，不得推诿。
3. 故障处理人在故障处理完后需在事件处理系统平台里关闭故障，并通知值 班人员，值班人员把情况记录到值班日志（事件管理平台）。

第十一章 工程运维中心各部门及公司相关部门的责任

1. 工程运维中心的网管值班工程师负责网络日常监控，对于网管系统能够监 控的故障，网管中心必须在规定的故障发现时限内发现故障。运维组直接受理客服和其它途径报告的故障网管中心值班工程师必须在规定时间对故障 进行响应和上报。
2. 运维组运维工程师负责处理网管值班工程师上报的故障，必须在规定时间对故障进行响应和上报。运维工程师遇到自身不能处理的故障时，在上报时限内通知外部支持，可能是研发、建设、第三方设备厂家或运营商机房的值班工程师。
3. 各地分公运维工程师负责本地平台的日常监控和维护，协助工程运维中心网管值班工程师或者运维组运维工程师处理故障，提供现场技术支持。
4. 业务发展中心技术支持人员负责处理自行开发设备的故障，在必要时也需要配合第三方设备厂家定位问题。业务中心的技术支持人员必须在规定时间对故障进行响应。
5. 任何部门都必须在规定的时间对故障响应，不得推诿。对于重大故障不及时响应，导致故障不能及时恢复的，上报公司领导，根据情节严重做相应处罚。 一般故障不能按规定时间响应的，上报工程运维中心。

第十二章故障的跟踪管理

1. 值班日志
值班日志用于记录特定时间内所有重要的网络事件，故障是其中最重要内容之一。网管值班人员需要在值班日志里详细记录故障及故障处理情况，以便接班人员能清楚情况，并方便以后査询。所有故障都需要录入值班日志。

2. 事件处理管理平台
事件处理管理平台主要用于故障的跟踪。故障的负责人要及时处理故障， 如果不能解决，则应该及时把故障转给更合适的人员。严重级别为重大故障和 严重故障的故障录入时需要抄送给工程运维中心负责人。当故障不能马上解决 且会造成用户使用不正常时，需要抄送给客服部门、和市场管理部。
原则上所有故障都应录入事件处理管理平台，以下故障不需要录入事件处理管理平台：
立即解决，而且原因清楚的故障，
重复出现，不需要再收集数据的故障

补充：本管理规定自发布之日起执行。
本管理规定解释权归总部工程运维中心。

附件一：95013业务重大7严重故障分析报告

故障编号

故障地点

提交时间

提交者\电话

故障级别

故障发现时间

故 障 描 述

故障解决过程

研发故障
解决人员

运维故障
解决人员

继续跟踪问题

故障解决结果

故障解决
时间

说明：
故障编号：定义GZBJ各地节点汉语拼音第一个字母）xxxx年xx月XX日
如:GZBJ 1201