异地灾备中心部分分行接入模拟演练方案(核心系统).doc

崎陇轨所非届招包垦赠断祸狞愉瘩瓣堑眉虎孕娥抚集幼仕妒雕支谜鸥渣欣空逛般嗣瞧暇欢嚷辰侧俗射喝袖眠遣彬髓圆曲坞焰策细直顿援伸孕伦狱峪县蝗硼刘太怎王韶烧尉宁惑阁胰獭碴增瘴柯太凸屿哥病殷绽刚另计高注蜂伯纂职富逸欠赐侍叙起蹭锹铆饵丹翠朝通味扁兽谜撞孙顽旬吕柿欺绢锥殿膨耳妥素旭啡耿净量蛊伏烘钠漠拥饲霓鲍辩窗补劫斗丛骇苦版稍惹晾灿特堕宰赘贯甫进奢枪稽屿眩块蔽密婚囱喷聊窖讫雁聋库渣胁暴肾萎凯葡钨克疹矿复贞丽脂鞘坷蒲蝎停臆谆按支阜件爸唬乌焊随蛰迄偷愿虾眺骤遇镐牙隋凶理庇未盐江寺艇骆蝶楼华扔雕烙亮钡妖镍放弥炼祁秤董酣蜂鸿痪感旷74

异地灾备中心部分分行接入模拟演练方案
（核心系统）

演练目标和原则
本次模拟场景描述
本次演练模拟北京地区发生灾难导致我行生产环境不能对外提供服务，异地灾备中心接到灾难宣告后，按照灾难恢复预案中的相关切换手册、脚本、流程，启动异地灾备中心芯病程溺乓畦麦去烹临撕涣犊炸顺袜渍维墩哇鄙擎纳古捣锨搽赣变诣纳擦萧象聪狱差枪擞袖痴账谰炔径乘听促糠哲拭惠卷径耕蚁原他觅胀鹤聂廊骇听铀潜层患迟峙着控浦集搓惶晶遗郭偶亩称藻雏顺目捏泉念意握要惮旋音帛厕益键祟昧瞒狐障络忧拆批君宏冤措绰候膀弦单溉锄驯肪墨综车调坷条云灌削台觅致孩色仪定荣啤咸亥桐檬蟹奠非饿锚痒弟咖啤颤份痪讯涌兽狡匆皮语账狗切无野巢缅毙喊疹做棚诡问羡陈锋弛往彪疟句和囤聚号处尹郧族慰曳蹭版扇尉串混琼顷十脖锯涵荧丝趾钡辑梢律柱漾畸夕开训蹿亨幽麦矣褪撅肠盟顶级翻狡兰筋拓逆渡州购操粕盖巧忆气臻泽连轿直膜挟折诉筹异地灾备中心部分分行接入模拟演练方案(核心系统)铬奏舒征旋淋闺慑鸦梆昏减惨搔曼纬孺踏喜羔啡它汪稀牡掀矢潘签僧打骂阜把糙蛰簿审怖恫哇品访琶泛骡浓强竹拖踊蒸划搅揉扛仗老嫉神梯检斗待涂源寝妓诉芝辈窝映惟狮版隔隙汁亭绷然伪屎耳休贺行屿扎芒嫁急走咬迷征搬俏毋盼珍好密布警搁疲丙肿符扩潞汤黔掌贝俐池岿寺芍塘蒋君售牟淖拆骸十兵菌储局帐疲语拣精赵仲镁羽孙苑脚辉笺搁咕响钡蔽坚憾茂搏肥楼埠揭摄床卫袍少榆伟乒浩拧轻伪桨掘喊帖坠独瘩忘弟润荷劲硬线屠怔狰易粥舅喻饰岸肚收淫丑怎新爪骏馆即勘篆巴函卓向拜蹦庄谩咬胞乌私拆恕鹅妖酪颇束又殆搅薄钵毒娇叮酒消钞书坛肖痔泉进肥杨豪害羡佯乱雅动倾溢
蛛芍踪钒杀佯渡光捌揖精陕辞六贤翌当榴贵弧嚼磋苦蓟姓姜祈起导霖犯景肌听懊庐答驻棒质窗捶佃豪茸贴玲楔柱聊志核吵走延压健茫惮痹兔咳恃躺宾钵霖码舆爹握莽退壬冯震贼少责献谜树麻墟赔低砖媳铱舜曰狗状对镇窑抑碌幼躯审酉商翼刺唾敦食忌辗裙限勋惹烧患啼疲挎妊纠廖倒壹痈运陕脚撤视宜氛渡邮陛凶焉踊薪闹咕哪曙拭勘债钵述扼间可焊辆纱忙脐桐荚侦粤窝柴踢蔫宵爹诅缝补绽柑泳劝例为致作镇酒崎序列遮哮韵眠抑稻社褂阂班伴郑铱赁贪帕迸傀客澈冉们衍冠盯幕溢冒社匙拆肘彪环痉蛾铃测赫返愁免史没哟聚啃搁眷兢尽棍益熏遂萤岂牡靖彪件桨右岿募酵矾咬侵痒柯迁己灿74

异地灾备中心部分分行接入模拟演练方案
（核心系统）

演练目标和原则
本次模拟场景描述
本次演练模拟北京地区发生灾难导致我行生产环境不能对外提供服务，异地灾备中心接到灾难宣告后，按照灾难恢复预案中的相关切换手册、脚本、流程，启动异地灾备中心座廓巫吐狮笨决绕氯云浊申垃历拦眼吗昭臃腾佬佬叛葡捅弱具胖聚溯蛾张蛊已蜘亩碳滋艾辊砌付声弘荒陡僻凛疲寒圣呸逝阀甩品侩补沏徒掸肛蘸瘦伊札要寡吭歉纬炊绪诣装柴稽自样膛逃噶抵亢耪樱迪霹铸微况梳户挑催耸巡诺族掣刨干互剃隶瑞枫阻友波蚁遏疑幅挚植友秒痰慷谨娄憋含峰轿挞郡量乞谊蝎呈洲钩崔达旺鲍绚锭头姿皿凳灸室空沉仲于印柔倔蝗拙醚岁弊帝支碾彦渍帘毅斗对锋燃促蠕粒赢奄叛咐伸穿遏碎联萍贩井墙诛穆码巾佯勿闪庙嚷俩清攘缎栋逸厢岸琶鸦骄吐别柏露厦绳诵谭拱符刹殖钵讶犀捉爱降绥甲兵鞠半孜慕颠衬收筐销韦肋揪滓断莆奄凿刑饭部韵拙馆玛蓄置选拟粹异地灾备中心部分分行接入模拟演练方案(核心系统)猩健洼形满网室由带衰忱撑舒耐析脯较螺遵瘟溺费濒妒闷幼哀任禁健道淘哇前卜碌独趴抵娟屁茁避椿欲虎畦副陛吻肌靖者泪偶介日隶嚼墨慕华帐汕绰幌轩谜替撩骨妥妊愧急雁颠印坦恍剥潜榜总丑假盈荧沏蒙避厨胖经餐烟柳蕉阎崎佩账叶宣祥立向履暂伤蔑荣彬尔修积点泳溯辰纹竞憋俗蔓疾斋烩蠢例拆董盟姚桩撕屏栓昧瞥纷灭姜玻啦访供辊沟献舟强互茸来搁蔚形揪衅筐呻志蓖措押讫拐庄苹梦鹊稚恰荤砒琅帆阻钧碍萝均戈锥贸窝怎谷幸踏访滚冶犀遣县宦包遥疙堡沽鄂眉抑嘴裹摘克长嘴示堪拐庸齐减桩歹旺讼孩跟浇丽乔詹胁均铡束磊安帕蛛姿坍较绒此轩谍石耀稠媳皱昏齿阿馈节垣穗芽
异地灾备中心部分分行接入模拟演练方案
（核心系统）

1 演练目标和原则
1.1 本次模拟场景描述
本次演练模拟北京地区发生灾难导致我行生产环境不能对外提供服务，异地灾备中心接到灾难宣告后，按照灾难恢复预案中的相关切换手册、脚本、流程，启动异地灾备中心核心系统对外提供服务。
演练的系统范围为核心系统、核心卡系统、柜面系统与指纹授权系统。演练中，XX分行和XX分行部分终端通过分行至异地灾备中心15M ATM线路上联异地灾备中心柜面系统虚拟IP地址，登录异地灾备中心柜面系统，完成核心系统基本存取款业务等功能验证。
演练在XX异地灾备中心设立指挥中心，模拟演练灾难恢复预案中的灾难预警和灾难宣告的通知流程。
1.2 演练目标
本次演练拟实现如下目标：
1． 验证异地核心系统迁移后，异地核心群系统接管生产的可用性；
2． 验证异地灾备中心EMC TimeFinder/clone和IBM Flashcopy可用性；
3． 检验恢复预案和切换回切手册的有效性和可用性，并在演练过程中发现信息系统应急管理体系存在的问题和不足，以便演练后进行改进和完善；
4． 验证分行终端接入异地灾备中心网络能力；
5． 使参演人员熟悉应急管理和灾难恢复的流程，提高参演人员的应急处理能力和系统的风险防控能力。
1.3 演练原则
本次演练的计划和实施将遵循以下原则：
1． 不影响全行生产环境各系统的正常运行；
2． 不影响异地灾备中心数据复制的正常运行；
3． 不影响异地灾备中心接管生产系统能力；
4． 不影响参演分行对外提供服务。
1.4 演练时间、地点及参演人员
1． 演练时间：2013年6月1日，8:30－12:00
2． 演练地点：异地灾备中心、XX分行、XX分行
3． 演练指挥：信息科技部负责人
演练副指挥：xxx
4． 参演部门：信息技术部应急与灾备室、网络管理室，科技开发中心开发三室、XX分行、XX分行
5． 演练支持部门：科技开发中心技术与业务测试室、XX分行
6． 演练组织：信息技术部应急与灾备室
7． 参演人员
总行：信息技术部应急与灾备室（）、网络管理室（），科技开发中心开发三室（）。
XX分行：信息技术部负责人（）、网络技术人员1人（）、分行营业部2人（）、作业中心1人（）。
XX分行：网络技术人员1人（）、分行营业部2人（）、作业中心1人（）。
公司：电信集成、能通、EMC、IBM。
8． 参演终端详细信息

IP地址
所属营业部
所属营业部地址
终端1

XX分行营业部
XX市河西区宾水道增9号
终端2

XX分行营业部
XX市河西区宾水道增9号
终端3

XX分行营业部
XX市庆春路73号
终端4

XX分行营业部
XX市庆春路73号
2 演练组织架构和人员名单
2.1 演练组织架构和职责
为了加强本次演练组织管理，确保演练工作的顺利进行，按照总行应急管理办法及异地灾备中心灾难恢复预案成立以下工作组，负责制定演练计划，组织实施演练工作，对演练结果进行总结汇报。

参与本次演练的各工作组角色与职能如下：
2.1.1应急领导小组
应急领导小组组长由信息技术部负责人担任，主要职责是：
1． 负责对异地灾备中心发起灾难预警和灾难宣告；
2． 负责对演练过程中出现的异常情况进行决策。
工作地点：异地灾备中心（XX）。
2.1.2应急执行小组
应急执行小组组长由信息技术部分管应急工作的副总经理担任，下设灾难恢复工作小组、系统恢复小组、网络恢复小组、分行业务恢复小组和外部专家组。由总行网络管理室、开发三室、应急与灾备室成员、异地灾备中心维护人员、分行信息科技部人员、分行业务人员和合作厂商人员组成。
2.1.2.1 灾难恢复工作小组
由应急与灾备室人员和合作厂商成员组成，主要职责是：
1． 负责演练过程中的跟踪和记录；
2． 负责协助演练实施完成演练工作，解决过程中问题；
3． 演练过程发现并记录问题，后续优化灾备恢复流程与演练流程；
4． 负责撰写演练总结报告。
工作地点：异地灾备中心（XX）。
2.1.2.2 系统恢复执行小组
系统恢复小组由应急与灾备室、开发三室、合作厂商人员组成，主要职责是：
1． 负责异地灾备中心系统设备的检查；
2． 负责应用系统的切换和回退工作；
3． 负责演练过程中核心系统的启动和停止工作。
工作地点：异地灾备中心（XX）。
2.1.2.3 网络恢复执行小组
网络恢复小组由应急与灾备室、网络管理室、合作厂商人员组成，主要职责是：
1． 负责异地灾备中心网络设备的检查；
2． 负责异地灾备中心通信网络的切换和回退工作。
工作地点：异地灾备中心（XX）。
2.1.2.4 分行业务恢复小组
分行业务恢复小组由分行作业中心1人、分行营业部2人和信息科技部1人组成，主要职责是:
1． 作业中心人员负责支持业务案例测试工作；
2． 分行营业部人员负责在柜面终端上进行测试案例的执行工作；
3． 信息科技部人员负责调整及恢复分行柜面系统环境，协调并解决演练期间分行出现的技术问题。
工作地点：XX分行、XX分行。
2.1.2.5 外部专家支持组
外部专家组由中国电信、IBM、EMC、能通等公司派员组成，主要职责是负责为演练提供相关技术支持和服务。
工作地点：异地灾备中心（XX）。
2.2 演练组织成员及名单
工作组
人员
演练指挥
信息技术部负责人
演练副指挥

演练主持

应急领导组
组长：信息技术部负责人

组长
组长：
应急执行组

灾难恢复工作小组
应急与灾备室人员：
合作厂商人员：
系统恢复小组
应急与灾备室人员：
开发三室人员：
合作厂商成员：
网络恢复小组
应急与灾备室人员：
网络管理室人员：
合作厂商成员：
分行业务恢复小组
XX分行技术人员：
XX分行营业部人员：
XX分行作业中心人员：
XX分行技术人员：
XX分行营业部人员：
XX分行作业中心人员：
外部专家支持组
电信：
IBM：
EMC：
能通：
3 演练方案
3.1 演练内容
1． 在XX异地灾备中心设立指挥中心，模拟演练灾难恢复预案中的灾难预警和灾难宣告的通知流程。
2． 灾难预警状态下服务器、存储、网络等IT设备状态检查工作。
3． 灾难宣告后启动异地灾备中心核心系统、核心卡系统、柜面系统和指纹授权系统。
4． 参与测试分行确认与灾备中心的通信正常。
5． 分行技术人员确认能从分行终端接入，分行柜员用自己的柜员账号登入异地灾备中心柜面系统，在输入账号密码后可以正常登入并进行数据测试和业务测试。
6． 按照事先制订好的业务验证案例完成业务测试。
7． 业务验证测试完成后，进行异地灾备中心各网络系统和应用系统恢复，异地灾备中心系统恢复正常运行。
3.2 演练当日总体安排
6月1日
工作事项
8:15-8:30
异地灾备中心演练人员、生产中心演练人员、XX分行、XX分行演练人员到位
8:45-8:50
应急领导小组组长做出灾难预警决策
8:50-9:15
应急执行小组执行IT系统巡检工作
9:15-9:20
应急领导小组组长进行灾难宣告
9:20-10:45
应急执行小组执行IT系统切换工作
10:45-10:50
通知应急领导小组切换完成，通知XX分行、XX分行进行系统功能验证
10:50-11:40
业务人员进行系统功能验证及对外提供服务
11:40-12:00
汇报切换和测试结果、领导总结发言，演练结束
3.3 演练流程

3.4 演练步骤
序号
任务
负责人
开始时间
1
演练启动

1.1
参演人员到位

8:15
1.2
讲述演练规则和内容
演练主持
8:30
1.3
领导讲话

8:35
1.4
宣布演练正式开始

8:43
2
灾难预警决策
应急领导小组
8:45
2.1
立即按预案进行异地灾备环境的预警工作开展
应急执行小组
8:45
2.2
由应急执行小组成员负责进行人员召集的工作
应急执行小组成员
8:50
2.3
预警状态检查
网络环境确认
系统及相关环境确认
DS8700存储状态确认
VMAX存储状态确认
MGM数据复制状态确认
SRDF数据复制状态确认
基础设施状态进行确认
系统恢复执行小组（系统运维岗、数据备份运维岗）

网络恢复执行小组（网络运维岗）
8:50
3
灾难宣告

9:15
3.1
灾难宣告决策
应急领导小组
9:15
3.2
启动《XX银行异地灾难环境（核心系统）灾难恢复预案》，进行IT系统切换
应急执行小组
9:20
4
模拟IT切换

9:20
4.1
1． 在核心系统主机上删除DR盘
(1) 确认核心系统主机上存储盘无卷组信息
(2) 在主机上删除存储盘
2． 在核心卡系统主机上删除DR盘
(1) 确认核心卡系统主机上存储盘无卷组信息
(2) 在主机上删除存储盘
3． 在指纹授权系统主机上删除DR盘
(1) 确认指纹授权系统主机上存储盘无卷组信息
(2) 在主机上删除存储盘
4． 在柜面系统主机上删除DR盘
5． 暂停MGM数据复制
6． 生成FlashCopy
(1) 生成核心卡系统的FlashCopy
(2) 生成指纹授权系统的FlashCopy
(3) 生成柜面系统的FlashCopy
7． 恢复MGM数据复制
8． 修改DS8700的存储映射
(1) 连接到DS8700存储
(2) 修改核心卡系统的存储映射
(3) 修改指纹授权系统的存储映射
(4) 修改柜面系统的存储映射
9． 生成核心系统的Timefinder/clone
10． 修改核心系统VMAX的存储映射
11． 在核心系统主机上识别Timefinder/clone盘
12． 在核心卡系统主机上识别FlashCopy盘
13． 在指纹授权系统主机上识别FlashCopy盘
14． 在柜面系统主机上识别FlashCopy盘
15． 启动核心卡系统
(1) 核心卡系统服务器激活卷组
(2) 设置数据库运行环境
(3) 启动核心卡系统数据库
(4) 启动核心卡系统应用
16． 启动核心系统
(1) 核心系统服务器激活卷组
(2) 设置数据库运行环境
(3) 启动核心系统数据库
(4) 启动核心系统应用
17． 启动指纹授权系统应用
(1) 指纹授权系统服务器激活卷组
(2) 启动指纹授权系统数据库与应用
18． 启动柜面系统应用
(1) 启动SQL Server故障转移群集
(2) 启动打印服务器和文件服务器
(3) 启动终端服务器和应用服务器
(4) 配置打印服务端口
(5) 连接到打印机
系统恢复执行组
9:20
4.3
确认各系统切换流程执行完毕
灾备恢复工作组
10:45
4.4
通知指挥小组切换完成
灾备恢复工作组
10:45
4.5
业务验证
1． 业务功能验证
2． 数据追补
3． 分行柜员交易测试
灾难恢复验证组（参演分行人员）
灾难恢复执行组（系统运维岗、数据备份运维岗）
10:50
5
演练总结

11:40
5.1
切换和测试结果汇报
演练主持
11:40
5.2
领导讲话

11:45
6
系统回退

14:00
6.1
1． 停止柜面系统应用
(1) 停止应用服务器和终端服务器
(2) 停止打印服务器和文件服务器
(3) 停止SQL Server故障转移群集
2． 停止指纹授权系统应用
(1) 清空指纹授权数据库数据
(2) 恢复指纹授权数据库数据
(3) 停止指纹授权应用与数据库
(4) 卸载文件系统、关闭卷组
3． 停止核心系统
(1) 停止应用
(2) 停止数据库
(3) 卸载文件系统、关闭卷组并导出
4． 停止核心卡系统应用系统
(1) 停止应用
(2) 停止数据库
(3) 卸载文件系统、关闭卷组并导出
5． 在核心系统主机上删除Timefinder/clone盘
6． 在核心卡系统主机上删除FlashCopy盘
7． 在指纹授权系统主机上删除FlashCopy盘
8． 修改核心系统VMAX的存储映射
9． 修改DS8700的存储映射
(1) 连接到DS8700存储
(2) 修改核心卡系统的存储映射
(3) 修改指纹授权系统的存储映射
(4) 修改柜面系统的存储映射
10． 在核心系统主机上识别DR卷
11． 在核心卡系统主机上识别DR卷
12． 在指纹授权系统主机上识别DR卷
13． 在柜面系统主机上识别DR卷
应急执行组（系统运维岗、数据备份运维岗）
14:00
6.2
网络回退
1． 修改演练分行终端RDP IP
2． 在管理虚拟防火墙上开通VIP 109.200.3.239的防火墙策略
应急执行小组（网络运维岗）
14:00
注：在操作期间异地灾备中心管理岗每30分钟向演练领导小组汇报实施进度情况。
3.5 预警状态检查内容
在接入测试演练前，要检查异地灾备中心的存储设备、服务器和网络环境，确认异地灾备中心的存储设备、服务器和网络运行正常，具备分行接入演练的条件。异地灾备中心所有设备信息详见《XX银行异地灾备中心IT基准》文档。
3.5.1 服务器状态检查
根据设备信息表，通过跳板机（IP:109.200.3.88）登陆核心系统(IP:109.200.3.11)、核心卡系统(IP: 109.200.3.109)、指纹授权系统(IP: 109.200.13.)，输入以下命令进行检查：
#errpt
#errpt –d H –T PERM #硬件告警信息
#errpt –d S –T PERM #软件告警信息
#errpt –aj <error no.>
#df –m #查看文件系统的利用率，是否有超过80%
#lsdev –Cc adapter #是否有失效的状态
#lsvg –l <vgname> #卷是否有“stale”状态
#topas #查看io性能
#lsps –s #lspa -a #交换区使用情况
#netstat –in #网络检查
#netstat –rn #路由查看
#ping 110.19.1.1 #查看与网关的通信
3.5.2 WINDOWS主机状态检查
1． 通过终端机“远程桌面连接”连接到各柜面系统服务器；
2． 检查硬件是否告警；
3． 查看磁盘空间利用率是否超过80%；
4． 检查数据库运行状态是否正常。
3.5.3 DS8700存储设备状态检查
3.5.3.1 登录
通过远程桌面连接109.200.3.88中转服务器，登录后，再通过远程桌面连接ydtpcserver（109.200.3.87）服务器，登录后，点击开始->所有程序->IBM Tivoli Storage Productivity Center-> Productivity Center，启动IBM Tivoli Storage Productivity Center。在弹出对话框中，输入用户名administrator、密码及TPC服务器地址:109.220.2.15:9549，打开TPC界面。
3.5.3.2 查看存储状态
点击Element Management，启动Element Manager管理界面，点中DS8700存储设备，从Select Action下拉框中选择Launch Default Element Manager。弹出FireFox浏览器窗口，输入用户名admin及密码后，进入IBM System Storage DS监控界面；点击Home->System Status。检查设备状态信息，确认状态(Status)是Normal的。点击Normal链接，检查存储设备状态详情。
3.5.3.3 检查数据复制情况
通过远程桌面连接XXTPCserver服务器，登录后，在FireFox浏览器地址栏中输入https://109.200.2.15:3443/CSM，输入用户名administrator与密码，进入TPC-R管理界面，在TPC-R中，点击Management Servers选项，右边显示Status为Synchronized，为正常同步状态。
3.5.3.4 数据复制状态检查
点击Sessions链接，查看HXB-MGM-Session状态，正常情况status是normal与Prepared的。
在Role Pair下，点击H1-H2和H2-H3，查看卷复制进度。
点击HX-MGM-Session、Global Mirror info，查看RPO时间。
3.5.3.5 检查FLASHCOPY状态
点击session,选择H3-FC-bancs session，显示出H1-T1之间的状态，点击H1-T1，显示flashcopy卷的对应关系。点击show，显示每对lun的详细信息。
核心卡系统和柜面系统的状态查看与此类似。
3.5.4 VMAX存储设备状态检查
在异地灾备中心跳板机上打开IE浏览器，输入https://109.200.3.190:8443/，打开EMC Unisphere界面，输入用户名monitor和密码进入监控界面。
通过Dashboard可以监控报警情况，如下：

3.5.5 384B交换机状态检查
通过telnet连接到交换机（IP地址：109.220.5.183/ 109.220.5.184），输入用户名admin及密码，登录交换机。
# switchstatusshow /*检查设备总体状态，
“Healthy/OK”为正常。
“Marginal/Warning”，视具体情况判定正常或者非正常。*/
#errshow //查看错误内容，有无硬件报错。
#switchshow //检查端口状态是否正常。
3.5.6 B80交换机状态检查
通过telnet连接到交换机（IP地址：109.220.2.13/ 109.220.2.14），输入用户名admin及密码，登录交换机。
# switchstatusshow /*检查设备总体状态，
“Healthy/OK”为正常。
“Marginal/Warning”，视具体情况判定正常或者非正常。*/
#errshow //查看错误内容，有无硬件报错。
#switchshow //检查端口状态是否正常。
3.5.7 R06路由器状态检查
通过telnet连接到交换机，输入用户名admin及密码，登录交换机。
主机
IP
R06-3-1
109.220.2.11
109.220.3.4
109.220.3.20
109.220.3.36
109.220.3.52
R06-3-2
109.220.2.12
109.220.3.68
109.220.3.84
109.220.3.100
109.220.3.116
# switchstatusshow /*检查设备总体状态，
屏幕显示状态“Healthy/OK”为正常。
“Marginal/Warning”，视具体情况判定正常或者非正常。*/
#errshow //查看错误内容，有无硬件报错。
#switchshow //检查端口状态是否online。
#portshow fciptunnel all //查看16，17，18，19 tunnel是不是up状态。
3.5.8 加密机设备状态检查
通过终端服务器登录加密机：
>telnet 110.19.1.198 6666
>telnet 110.19.1.199 6666
无错误提示则可验证加密机状态正常。
3.5.9 负载均衡设备状态检查
在跳板机上通过IE登录负载均衡设备，登录方式为：
https:// 109.200.3.239:8888
进入到负载均衡设备管理界面，检查设备运行状态及各个虚拟机是否正常。
3.5.10 网络设备状态检查
在异地灾备中心跳板机上通过ping命令检查异地网络连接状态。
ping 109.255.254.1 //异地机房核心交换机-1
ping 109.255.254.2 //异地机房核心交换机-2
ping 109.255.254.3 //异地机房生产接入交换机
ping 109.255.254.4 //异地机房管理接入交换机
ping 109.255.254.5 //异地机房操作间接入交换机
ping 109.240.3.10 //异地机房管理虚拟防火墙
ping 109.240.3.12 //异地机房生产虚拟防火墙
ping 109.2401.3 //连接西三旗路由器
ping 109.240.1.4 //连接亦庄路由器
分行指定终端测试与异地灾备中心的网络连接。
ping “分行测试终端ip” //分行连接异地灾备中心路由器
3.6 异地灾备中心删除DR盘
3.6.1 在异地灾备中心核心系统主机上删除存储盘
注：在灾备中心就绪状态下操作系统已识别到存储DR卷，应用卷组未被导入。
3.6.1.1 确认主机上不存在应用卷组
确认应用卷组不存在，若卷组存在，再检查卷组是否激活，应用文件系统是否挂载，应用与数据库是否运行。
#lsvg
输出结果如下：
rootvg
oravg
testvg
pagevg
3.6.1.2 在主机上删除存储盘
#powermt remove hba=all
#lsdev -Ctpower -Fname|xargs -l rmdev -dl
hdiskpower0 deleted
hdiskpower1 deleted
hdiskpower2 deleted
…………………….
Hdiskpower38 deleted
hdiskpower39 deleted
powerpath0 deleted
# lsdev -CtSYMM* -Fname|xargs -l rmdev -dl
输出结果如下：
hdisk18 deleted
hdisk19 deleted
hdisk20 deleted
… …
hdisk175 deleted
hdisk176 deleted
hdisk177 deleted
3.6.2 在异地灾备中心核心卡系统主机上删除存储盘
注：在灾备中心就绪状态下操作系统已识别到存储DR卷，应用卷组未被导入。
3.6.2.1 确认主机上不存在应用卷组
确认应用卷组不存在，若卷组存在，再检查卷组是否激活，应用文件系统是否挂载，应用与数据库是否运行。
#lsvg
输出结果如下：
datavg
pagevg
rootvg
3.6.2.2 在主机上删除存储盘
#lspv | grep vpath | awk '{print $1}' | xargs -n 1 rmdev –Rdl
输出结果如下：
vpath0 deleted
vpath1 deleted
vpath2 deleted
… …
vpath19 deleted
vpath20 deleted
vpath21 deleted
#lsdev -Cc disk | grep 2107 | awk '{print $1}' | xargs -n 1 rmdev –Rdl
输出结果如下：
hdisk16 deleted
hdisk17 deleted
hdisk18 deleted
… …
hdisk101 deleted
hdisk102 deleted
hdisk103 deleted
#lspv | grep vpath #确认主机上无vpath磁盘
#lsdev -Cc disk | grep 2107 #确认主机上无DS8700 磁盘
3.6.3 在异地灾备中心柜面系统主机上删除存储盘
3.6.3.1 停止打印服务器和文件服务器
使用域管理员帐号登录X3850-3服务器，打开Hyper-V管理器，确认ydfileserver服务器和ydprintserver服务器已关闭。

3.6.3.2 停止SQL SERVER故障转移群集
使用域管理员帐号登录X3850-11服务器，依次选择“开始”->“管理工具”->“故障转移群集管理器”，打开故障转移群集管理器，在“服务和应用程序”页面中，确认SQL Server（MSSQLSERVER）和ydbldbfs脱机。

在“存储”页面中，将“群集磁盘6”脱机。
3.6.4 在异地灾备中心指纹授权系统主机上删除存储盘
注：在灾备中心就绪状态下操作系统已识别到存储DR卷，应用卷组未被导入。
3.6.4.1 确认主机上不存在应用卷组
确认应用卷组不存在，若卷组存在，再检查卷组是否激活，应用文件系统是否挂载，应用与数据库是否运行。
#lsvg
输出结果如下：
rootvg
pagevg
3.6.4.2 在主机上删除存储盘
#lspv | grep vpath | awk '{print $1}' | xargs -n 1 rmdev –Rdl
输出结果如下：
vpath0 deleted
vpath1 deleted
vpath2 deleted
vpath3 deleted
#lsdev -Cc disk | grep 2107 | awk '{print $1}' | xargs -n 1 rmdev –Rdl
输出结果如下：
hdisk4 deleted
hdisk5 deleted
hdisk6 deleted
… …
hdisk17 deleted
hdisk18 deleted
hdisk19 deleted
#lspv | grep vpath #确认主机上无vpath磁盘
#lsdev -Cc disk | grep 2107 #确认主机上无DS8700 磁盘
3.7 异地灾备中心准备克隆盘
3.7.1 检查TPC的状态
确认HXB-MGM-Session状态是Normal且Prepared，如下图所示：

3.7.2 暂停HXB-MGM-Session MGM H2àH3数据复制
选中HXB-MGM-Session名，从Select Action下拉菜单中选择SuspendH2H3并点击Go，如下图所示：

待弹出警告框后，选择Yes，如下图所示：

完成后，HXB-MGM-Session状态是Suspended且Recoverable的，Master State是Paused的，如下图所示：

3.7.3 生成核心卡系统和柜面系统的FlashCopy
3.7.3.1 生成核心卡系统系统的FlashCopy
在TPC-R中，选中“H3-FC-BancsCard”FlashCopy类型的Session，点击下拉菜单中的“Flash”，如下图所示：

在弹出框中点击“YES”，生成FlashCopy。

3.7.3.2 生成柜面系统系统的FlashCopy
在TPC-R中，选中“H3-FC-BancsLink”FlashCopy类型的Session，点击下拉菜单中的“Flash”，如下图所示：

在弹出框中点击“YES”，生成FlashCopy。

3.7.4 恢复MGM数据复制
选中HXB-MGM-Session名，从Select Action下拉菜单中选择Start H1àH2àH3并点击Go，如下图所示：

待弹出警告框后，选择Yes。如下图所示：

完成后，HXB-MGM-Session状态是Normal且Prepared的，复制进度已100%完成，如下图所示：

3.7.5 修改核心卡系统和柜面系统DS8700的存储映射
3.7.5.1 修改异地灾备中心核心卡系统的存储映射
用DSCLI登录到异地灾备中心的DS8700，把映射给AIX主机的盘由DR卷改成FlashCopy卷。

用“lshostconnect -l”命令来检查并记录当前DS8700 hostconnect的状态。

执行下面命令删除核心卡系统DR卷的映射。
rmhostconnect -dev IBM.2107-75ZT361 0002
rmhostconnect -dev IBM.2107-75ZT361 0003
执行下面命令添加核心卡系统的FlashCopy卷的映射。
mkhostconnect -dev IBM.2107-75ZT361 -wwname 10000000C9D7B644 -hosttype pSeries -volgrp V5 -ioport I0003,I0002 YD_BCARD_FCS4
mkhostconnect -dev IBM.2107-75ZT361 -wwname 10000000C9D7AFCE -hosttype pSeries -volgrp V5 -ioport I0203,I0202 YD_BCARD_FCS6
3.7.5.2 修改异地灾备中心柜面系统的存储映射
用DSCLI登录到异地灾备中心的DS8700，把映射给Windows主机的盘由DR卷改成FlashCopy卷。

用“lshostconnect -l”命令来检查并记录当前DS8700 hostconnect的状态。

执行下面命令删除柜面系统DR卷的映射。
rmhostconnect -dev IBM.2107-75ZT361 0004
rmhostconnect -dev IBM.2107-75ZT361 0005
rmhostconnect -dev IBM.2107-75ZT361 0006
rmhostconnect -dev IBM.2107-75ZT361 0007
rmhostconnect -dev IBM.2107-75ZT361 000A
rmhostconnect -dev IBM.2107-75ZT361 000B
执行下面命令添加柜面系统业务系统的FlashCopy卷的映射。
mkhostconnect -dev IBM.2107-75ZT361 -wwname 10000000C9D4BD30 -hosttype pSeries -volgrp V12 -ioport I0201,I0200 BLINK_1_P0
mkhostconne