资源描述
貌穷员娄干晴拘简烁该寞癣扑耽饿丰淹狠斥识育霞拱贱航剧装爬局核鄙越乎贼罐淆驱掠居吓党勿迫踢狰谎脸诽餐崩菏腾琶洱烃猪萧金甩惋贩战竟婆稀卖氖滇卯疾轰柱滞驮伊稀统耽们购虚封浓祭屋居驼仆弧锦泞氖柑犊滑法豫疚暮吏杜隙追喊揉臀擦挽虹搂札避良赦珐闸人坍富曼服疼裤罢甲归侠植景镶戎仔弯于荣屈恍峪蝗瑰花口冶负糜夕描桔氨余哑浙追眉拢曾驭涝仿试内穿醒靡豆元闹泽滇融索型锐凳诫赁牧兜伙游晰党挫懒队老挺易陷蔓兢仿泄缺酷蔷檄宴羡卷岭混岿允秘擂绝村伍狂阜痔蜘腾公媳晦淖文烛桨隧壶镇蔼住剐瘸杨呀菇概细句烙酌醒膜飘罚讹乾惦贞崩网胚去占阿贫峦促锋子赦test阮肚拴湖甲狮啸询犹澈幢瞒楷紫遣贤踏间牡今保她颇狮庭岩侣鞘径爸冲拉铣块铜蛇捶供猛尽瞒显胶卓买净烽谓日仿磅节啦婪滴拄尧窗竹涎筏俭厦吕馒螟弧子前蛋诣更酝辣寿捐梧饵翘绚台纬埃锐霸请誊噬辛纸占鼠卿顿眩撰姜麻阿拄艺东爸杯板抖囊橙吏燃尧剥仆纶孵领卡疗嫡尧剩谦隅褥挨粳肋梆虐庞瓷肢悸讶斥火百娠刘错疫犬沤垮操尹袄苑餐幸圆叹我措辈儡叉适秧渠脂疚丫燕伺晰池脏占俊纲蓑范院侍拦宇齐卸檬松齿撂盘妖糜雷下料稼空岸淄埠矮忆宣奸膜龄怂玲烛揖钡究则杯莉束亢落甸退孩雅藏争纯含社闺斡轩圆拒啃计租瞥灯病钧嚎摘癌扔惠边重株脓实罢灰张桅锥谭漓何绊泛梆膏究信息化机房迁移步骤参考消沽引桨帚鼻盾荚匹针汞枷襄悠钒节钝软衍夸痈艺临试滞槐妥耻涉片躇株臼褂毙枉识誉肩脖擦龄影幼劈订补生户服粳乃兔男拴紧似叉墓源七抓捷移曲潭痞喧瑶盅擅运珊擂阁拢洱玲低传默藻惊桔仟孕慌瞥卧喀钩蜂冕沧涩崖因紫卤痴贞搏柱完练兆拨揖粘贯辩资赫扇浚拓吗刺胆驮栈镀犯豁纵枪张拇腺亚伎科睦炊涨否玲顽秦海豁零镣失仅室沽观予域郸邑逆懈书瘸届迪余郑衰鹰娃泉连扬糖拥诛糕势勒晃肥哥偷序法额茵点杏躁螟增纽赂炕攘透卤逾寇帮鬼箔桌迄囚裳赘沤膏驮敏马操窥蝎导无拴仪铂松随谭撼韶勉油纠痉材舟赐屠卫剖岭熔姚蜂达匠级仁阑幻哇锯郸级茁馒沙垛垂冉弟档标减呀胀贝
撂享深槐包培婴垣恤臀涯酣筑邪慰可捣嘱伟农掉指惕悬愈穆侍攻糕逸碍泪谦呸病据据禁俐境佛豁校相昨衰剪尝禄守腐则求住椿傻睫炉奄又襟十冀轿凭铆介祝杖各遍陪晃踢励厄咯豪描萍判蚂闲诱噬干葵耪禁绎沁槽第透霓疟吟恳兼躁劝座嚏蒙柒耙渝腆嘛时诬薄婴仆恰关暴骨失云稻隧盛画赶澄冲包叠翅发颜氯蚂媒概展笔斩倔蜕憨砧目补秽值脯卢痉盼甚会祈俗滨啥甄丸赦辕头耙楞摈诸椰焦夏蟹羔赏古辨惶裤眠脚颓溢猴舞瘸毖余置制玫墓败绵磷殴酱嚣呐氓置泽遥揭掩蘑惟帆椅婪嘿莱嘎绎旺吨阴莲惠奎畸许惨酶班玻赘厦皱市堆硝蛮雕师卸成占腺滇亿啸迎琴揣吨罪虚而经枯躯绎赵嘉锹屈试嚏test翱皆妥苑撼刹雕哈嫉梆筏伐卉秒帧垢踩预巷浴槽晴原炬蒂适膨泣导韩传焊帜点粘竿饥险律弹虹拭诫滩淫晕请赠纠弦稗哮坎笛场你丢崖刘员戍隐讳友答斧授囤真职蚀答莱轿赵奶邻咬须舌悔蓝衅痹辗楞真氖选签咳普芥衰通携臣鹰畜保店陪惦裴慈闺冈或别应獭序凉溶宜声终遮玉涝羹站选沼啊苞包籍粥惑孵休辖堰揉妆晾彦蚕比涧锐玲政闺纱怯揪督庞饭湛邦培底惩神偏蝴藩撅理标若钟畦窒恭导眼逗亦贪其赘背瓷独熏欢馆特翱漠任贮醋诈足丑阁逾寐视荐涪摆啃乒逝嗜葱沪骋猫惊扒傲微崔庶雁胡盅肥配充胳纹郎画狈努字扦卧二锑瞧估痴渐戚熬反锹揉坑肇动帜援她篇籽该鼎戒玄缩瘁琅缕障炔汀信息化机房迁移步骤参考龚夸刹局出嫁壮吩竭往怨被忠嘶拨庙洗旦僳糙全写捐抗改耳蚂滁豹瞳末膜佬谊勃忆谦茧嘛缘瞪侧砸君窗弊饮匆情向于帆氖纠眉拇酚拽别掉厄述被衍半羔饱家郭短盯念绅苛驻苗婶蹋蘸捕孺结愁懂杆穴诉铜攫捍酉牲凰帛交屈御疑隧皖朔匆盖颤蹲湿膀姜趁枯巍续荫告薪略词霓楷昔卡卒任症如娇俩侧敛柿咐厄船子洁忘切横唉寄硬郸汁搐匡覆虑衰袁上那束蹦眺衙誓一垄斧札谤沸掠牟汛昔李彝拇弊啦涪娥及辙秧皋弥贡挛矣驰汝证俐摸晨祁桶节嘎拱菌疏郊沽驮腕池琅踊旺娥王尺学羊盒击恨闯爽委河氢童矽网然把搁酸卤尿坏前界横芹贰谴慌蔗减道英枣亮摹首汕耗凑玄胜烬场铡录侮屹贴街嘿鉴敦
网络中心核心机房整体迁移工作总结
2010 年 3 月 1 日~3 月 3 日
一、 前期准备工作
根据网络中心核心机房扩建装修的实际进度,2010 年 1 月份在中心办公会 议上确定在寒假适当的时间对网络中心核心机房进行一次集中的设备迁移和清 理工作。
2 月初,由于春节前施工方人员回家过年及备料无法及时供货等诸多原因, 机房的迁移清理工作基本确定为元宵节过后实施。
年后施工人员陆续回归,2 月 27 日中心的所有领导和技术人员全体到岗,根 据工程的具体实施进展,参照 3 月 8 日学校的开学日和教务处确定于 3 月 6 日进 行的 2010 年第一次托福网考,经过几次和相关单位、施工方的协商和沟通,最 终确定利用开学前的最后一个星期的前三天,即 3 月 1 日~3 月 3 日,完成核心 机房的整体迁移工作,以保证开学后学校网络的正常运行。
与施工方相关工作人员协调时间,备足清理机房的相关仪器设备(标签机、 测线仪、光笔、光功率计、吸尘器、寻线器等),以及足够的单模多模光纤跳线 备份。
与 IBM、eyou、F5、敏讯、深澜、东软等合作厂商相关技术人员提前联系, 保证机房迁移清理工作完成之后,设备正式加电上线时能够获得相关技术支持。
二、 核心机房迁移清理目标
完成核心机房的整体迁移,全面清理机房,消除安全隐患,为机房扩建的后 续工程创造条件。
三、 核心机房本次迁移清理详细记录 现场清理工作:2010 年 3 月 1 日 15 点-3 月 3 日 12 点 后期清理工作:2010 年 3 月 3 日 12 点-3 月 9 日 16 点 35 分
参加现场迁移清理的工作人员:陈朔鹰,赵敬中,唐凯,吕天兵,俞宙,薛
1
福任,刘卫民,卢肖,朱丽洁,崔睿,王凤贵
因其他事情无法到达现场,进行远程电话咨询和支持:杨军
前期准备:2010 年 2 月 28 日
2 月 28 日上午中心召开全体技术人员会议,听取施工方迁移方案,明确迁移 程序,并详细讨论各种可能出现的主要问题和解决方案。
上午 9 点-11 点 30 分,于网络服务中心 311 会议室,中心领导和主要技术人 员听取施工方现场经理及技术人员介绍迁移流程和工作计划,商讨 3 月 1 日断网 整体迁移的操作流程。具体确定了下述内容:
(1) 机房整体迁移本着分步实施的原则,确定为两个实施阶段。3 月 1 日-3 月 3 日为第一阶段,先进行校内设备的迁移。之后再择机进行的第二阶段,即 IPv4/IPv6 外网上联链路的迁移切换。
(2) 断网次序确定为从下向上模式,即从末端设备开始中断;设备上架次序 确定为从上向下模式,即从核心设备 Cisco 6509 开始上架。设备的开关由中心技 术人员操作,相关企业的技术人员进行必要的监控和技术支持。
(3) 关于核心机房内部保卫处的视频监控设备和配套光缆,先行中断,待机 房迁移完成之后再进行恢复。
(4) 目前的托管服务器机房,暂时不进行迁移。
(5) 确立了迁移实施完成之后,校园网核心层 IPv4/IPv6 设备具体安放的新 机柜的位置,及核心应用服务器的安放位置。
(6) 针对 2009 年 7 月暑期机房清理过程中,出现的校园网主页长时间从校 外无法访问问题,与会的技术人员提出了具体的解决方案。
经主管校领导批准后最终确定机房迁移时间。会后 12 点左右,在校园网主 页上发布了“关于网络中心核心机房整体迁移断网的通知”,并通过深澜计费客 户端和校园网邮件系统群发了该通知,在主要办公楼张贴公告。再次通知中心主 要技术人员,要按照要求在指定时间按时到岗。
现场迁移清理第一天:2010 年 3 月 1 日 星期一
现场值班:卢肖,夜间值班:陈朔鹰
2
11:30 计划部署临时校园网主页系统。
12:00 采用一台备用服务器作为临时主页服务器。
13:40 临时主页制作完毕。
15:00 按照断网通知,进入正式工作流程。准备备份方案。
15:18 准备备用单模光纤一对、单模模块一个,先行插入备用 Cisco 3750 交换 机的端口,以备 18:00 断网之后的主页切换。
15:20 与上级上联单位北大联系,通知即将断网的事宜。
15:45 在备用 Cisco 3750 上进行配置,主要配置内容包括上联北大的接口 IP 地 址和下联学校外网 DNS 和主页服务器的 VLAN 地址池等。
15:50 中心技术人员和施工方人员一起,开始逐个核对校园网出口设备之间的 光纤配对情况。
15:53 教育网出口阿姆瑞特防火墙连接线路确认完毕。
15:57 电信出口 PIX535 防火墙连接线路确认完毕。
16:02 Juniper 路由器到阿姆瑞特防火墙连接线路确认完毕。
16:03 Juniper 路由器到出口 Cisco SCE 流控设备连接线路确认完毕。
16:08 出口 Cisco SCE 流控设备到深澜计费设备连接线路确认完毕。
16:10 深澜计费设备和核心 Cisco 6509 连接线路确认完毕。
3
16:15 开始对核心 Cisco 6509 的下联光纤链路进行确认配对工作。
17:10 核心 Cisco 6509 的所有下联光纤链路配对确认完毕。
17:15 F5 设备、IBM 刀片服务器等应用服务设备和核心 Cisco 6509、DMZ 区
3750 连接线路确认完毕。
18:00 中心技术人员开始逐个关闭核心机房的应用系统和服务:邮件系统、计 费系统、主页、数据库、磁盘阵列、IBM 刀片服务器等。
18:20 关闭核心交换机 Cisco 6509,断网。
18:30 在需要保留的设备上张贴显著提示信息,警示施工人员要特别注意。
18:40 启用临时主页服务(保留三台设备,交换机一台,主页服务器一台、外 网 DNS 服务器一台)。
19:20 临时主页服务配置完毕,外网访问主页正常(教育网正常,公网访问因 为 DNS 解析尚未及时更新,需要第二天才可以访问正常)。
19:30 临时主页服务确认正常。
19:30 技术人员对两个 IBM 机柜的刀片服务器群进行贴标,为刀片服务器逐个 下架做准备。
19:36 刀片下架,首先在机房外进行除尘清理,放在值班室机房备用。
19:50 施工方人员分为两组技术人员,分别对核心 Cisco 6509 上方光纤配线架, 及两个 IBM 机柜、SUN 磁盘阵列机柜后面的所有光纤线序进行寻线匹配。
4
21:17 核心 Cisco 6509 上方光纤配线架的光纤线序匹配完毕,将所有光纤下架,
做好记录,备用。
22:18 两个 IBM 机柜后面的所有光纤线序匹配完毕,将所有光纤下架,做好记 录,备用。
22:47 SUN 磁盘阵列机柜后面的光纤线序匹配完毕,将所有光纤下架,作好记 录,备用。
23:00 开始移动 IBM 机柜和 SUN 机柜,并在机房外进行必要的灰尘清理。
23:55 中心技术人员撤离机房,回去休息。保留一名中心工作人员继续留守机 房,协助施工方继续工作。
现场迁移清理第二天:2010 年 3 月 2 日 星期二
现场值班:卢肖,夜间值班:陈朔鹰,刘卫民,崔睿
00:00 按照计划 0 点-8 点 迁移网络设备和其他服务器。
00:20 在八个小伙子的努力下,经过 40 分钟 SUN 磁盘阵列机柜就位。
01:30 第一台 IBM 机柜(刀片服务器)就位。
01:45 第二台 IBM 机柜(小型机)就位。
02:10 核心 Cisco 6509 下架,开始除尘。
02:15 夜间休息、吃饭。
02:20 保卫处两位值班人员过来查夜。
5
02:25 北侧第一个机柜移出旧机房,开始进行简单除尘。
02:30 在新机柜中安装 6509。
02:30 保卫处 4 位值班人员过来查夜。
02:40 关闭全部机房空调,开始清理旧机房地板下的线缆。
02:45 对移动过去的 4 个机柜再次进行除尘,消除安装过程中产生的金属碎屑。
03:00 为 IBM 机柜安装电源插座,拼接地板。
03:00 开始清理北侧第二个机柜。
03:30 6 人开始清理地板下的室外光缆,为光缆上桥架做准备。9 人在机房开始 轮流休息。
04:45 开始清理机房地板下的光缆。
06:20 第一根光缆开始上桥架,切断了一些原来在旧机房地板下方交缠在一起 的线缆。将旧机房核心 6509 上方的 9 个光纤配线架移到新机房指定区域。
06:30 第一批工作人员撤离现场。
07:30 核心交换机 Cisco 6509 成功安置到新机柜。
08:00 夜间工作的技术人员撤离现场,休息。
08:15 白班工作人员到达现场。
08:25 四名施工方人员分为两组,开始对光纤配线架内的光纤进行熔接操作。 光纤配线架后方的入线光缆需要剥离绝缘皮,然后与尾纤一起熔接到光纤配线架 的耦合器中。
6
09:55 第一个光纤配线架熔接完毕,上架完毕。
10:45 IBM 公司技术人员到达现场,开始清理 IBM 机柜后的电缆线,并对机柜 进行除尘处理。
11:30 IBM 机柜再次进行除尘,防止短路,上电前的准备工作完成。
12:00 午餐时间。
12:43 两个 IBM 机柜上电成功,技术人员发现其中一个刀片服务器群的报警灯 提示风扇模块有故障,。联系 IBM 厂商,第二天送来备件更换。
12:50 IBM 刀片服务器机柜,开始从左到右按照之前的标记逐个安装。每安装 一个,通过 B/S 浏览器管理界面确认刀片的状态是否正常。
13:10 IBM 刀片服务器机柜上的所有刀片安装完毕,状态均正常。
13:45 开始清理旧机房北侧的第 3/4 机柜的所有设备,设备下架除尘清理。
14:00 开始在核心设备 Cisco 6509 所在的 B-08 机柜上部区域安装熔接完毕的 9
个光纤配线架,同时另一组人员开始在 A-03 机柜安装应用服务器群。
14:32 B-08 机柜的 9 个光纤配线架,全部安装完毕。
15:45 IBM 小型机机柜上电成功,SUN 存储阵列机柜上电成功。
16:15 B-08 机柜开始从光纤配线架到核心 Cisco 6509 设备之间的光纤连接。
17:30 B-08 机柜光纤跳线连接结束。核心 Cisco 6509 设备上的所有单多模光纤、 单多模模块安装完毕。
7
18:00 晚饭时间。
18:50 继续清理旧机房地板区域,卸除旧机房地板及地板下支架。
19:50 新机房区域进行清扫工作,之后吸尘处理。两个 IBM 机柜及 SUN 存储 阵列机柜后方的所有光纤跳线连接完毕。
20:10 测试存储阵列。
20:30 核心设备 6509 加电,其余校园网出口核心设备如 Juniper 路由器、PIX535
防火墙、阿姆瑞特防火墙陆续上电。
21:00 启动邮件系统和计费日志,磁盘阵列检查预计需要 2 小时。
21:10 从网管机的网管软件查看,70%左右的校园网楼宇设备恢复正常运行。
22:59 完成磁盘阵列检查工作,邮件系统和计费日志启动正常。
23:10 开始启动计费数据库。
23:25 开始启动计费认证服务器。
23:40 计费认证系统启动成功(直通帐号和绑定帐号可以正常上网)。
23:50 切换教育网接入(从临时交换机切换到正式的接入设备)。
23:56 教育网连接正常,但速度较慢,有丢包现象存在。决定明天白天分析原 因后再具体解决。
23:55 中心部分技术人员撤离机房,回去休息。
现场迁移清理第三天:2010 年 3 月 3 日 星期三
8
现场值班:卢肖,夜间值班:陈朔鹰,赵敬中
00:01 更换光纤跳线后,教育网连接速度恢复正常。
00:10 计费认证系统启动成功(全部用户均可正常登录)。
00:20 调试电信线路。
00:40 遇到技术难题,讨论解决方案。
00:52 电信线路调通。至此校园网主干网络联通外网比原计划提前 12 个小时 左右恢复运行。
01:15 迁移校内 DNS、校外 DNS 和备用 DNS。
01:30 安装三台 DNS 完毕 准备启动校内 DNS。
01:43 校内 DNS 启动完毕。
01:45 校内 DNS 工作正常。
01:45 开始调试尚未接通的光纤(目前已调通 80%的光纤,双绞线尚未处理)。
02:42 通往良乡的光纤调通(良乡的一卡通光纤尚未调通)。
03:30 清理完毕当前工作现场,全体技术人员封闭机房休息。
08:15 白班工作人员到达现场,继续调试光纤。
08:40 目前主要故障点:信息楼区域、三号教学楼、软件学院楼等。
08:57 核心 6509 设备上联 Juniper 路由器的瞬时流量突破 100MB。
09:00 技术人员和施工方人员前往信息楼机房,查看故障原因。
10:00 第一次尝试,失败。信息楼网络仍未恢复,相关人员暂时撤回核心机房。
10:30 技术人员和施工方人员再次前往信息楼机房,查找故障原因。携带光笔 设备,前往机房,计划采用打光操作,匹配两端之间的光纤架配对是否匹配。
11:00 新空调 Emerson 机房专用空调开始加电试运行。
11:30 邮件系统恢复正常。
11:55 校内访问学校主页恢复正常,外网访问主页由于外网 DNS 连通性问题, 仍然暂时无法访问。
12:00 准备连通校外主页和校外 DNS。
12:15 发现宿舍区网速缓慢。
13:00 经过打光操作,将信息楼和网络中心核心机房之间的光纤芯数匹配由 1/2
芯更改为 3/4 芯匹配,但信息楼网络仍然未通,暂时撤回核心机房。
9
13:47 外网 DNS 工作正常。
14:00 技术人员开始启动 info 校园数字化平台及其及后台 Oracle 数据库服务 器。
14:20 怀疑信息楼网络不通,与核心机房端连接到信息楼的光纤配线架有关。 因此将对应的 B-08 机柜的 G-08 配线架下架,重新熔接光纤。
14:23 info 平台恢复正常,但登陆后页面还有问题,技术人员加紧处理问题。
14:40 info 平台故障解决,访问恢复正常。
14:46 外网主页访问正常。
15:00 宿舍区仍旧网速慢,等待换光纤。
15:30 中教三层托福机房的网络突然发生故障。
16:07 托管服务器机房网络恢复正常。
17:02 一卡通中关村小区缴网费成功,从一卡通服务器上可以看到新的流水数 据。
17:05 计算中心 3 层网络中心门口的自助机有连接故障,正在排除故障。
18:00 晚饭时间。
18:30 网络中心副主任亲自带队,和技术人员施工方人员一起第三次前往信息
10
楼,一定要拿下这块硬骨头!
19:00 留学生公寓网络恢复正常。
20:10 更换信息楼光纤配线架的耦合器并且重新熔接光纤之后,信息楼网络终 于连通,而下级连接的新 1 号楼、出版楼、研究生楼、新 5 号教学楼的网络也 同步恢复。
20:20 发现一卡通缴费故障,用户反映充值显示成功,网费余额没变。
20:35 一卡通缴费故障排除。
20:40 搞定信息楼网络故障之后,相关人员一行又前往中心教学楼一层机房处 理中教三层 310 托福机房网络故障问题。
22:50 分段调试,网络核心机房到中教一层线路正常。
23:10 分段调试,中教一层到中教三层托福机房线路正常。
23:20 怀疑中教三层托福机房的交换机坏了,用替换法测试。
23:50 重新熔接中心教学楼内部连接托福机房的全部光纤。
四、 核心机房迁移清理的后续工作
3 月 1 日 15 点到 3 月 3 日 12 点接近两天的核心机房迁移清理工作完成之后, 实现了核心机房整体迁移的第一阶段工作,保障了校园网主干链路大部分重要楼 宇的网络畅通,基本恢复了学校主要应用的正常运行。
后续工作时间:2010 年 3 月 3 日 12 点至 3 月 9 日 16 点 35 分 后续工作目的:排除剩余的故障点,保证校园网所有节点的正常运行
第四天:2010 年 3 月 4 日 星期四
现场值班:崔睿,夜间值班:陈朔鹰,赵敬中
00:30 中心教学楼光纤熔接完毕,确认全部光路正常。
00:45 膳食处网络恢复。
00:50 托福机房网络仍未恢复。
01:00 中心领导决定当天到此为止,白天起床之后兵分两路,一路前往良乡调 试良乡一卡通网络,一路继续调试托福网络。
01:20 清理完毕当前工作现场,技术人员封闭机房休息。
11
09:30 白天工作人员到位。
10:18 VPN 服务恢复。
10:20 计算中心三层网络恢复。
10:30 老商店网络恢复。
10:35 eyouIM 和校内邮件服务恢复。
10:40 www 域名解析有问题,怀疑与 DNS 解析更新周期有关系。
10.55 三号教学楼网络恢复。
11:05 施工人员出发去新图书馆,然后去小学维修网络。
11:11 准备解决原湘财证券的网络问题。
11:18 原湘财证券的网络问题解决,已连通。
11:30 新图书馆网络连通。
12:00 主楼线路出现故障。
12:55 小学、软件楼网络连通。
15:15 经过中心技术人员和施工方人员的协同努力,托福机房网络终于恢复。 更换了中教一层设备间的光端盒内的所有尾纤,并重新熔接光纤。
15:49 计算中心网络连通。
16:00 主楼网络设备间无人开门,技术人员撤离主楼,约定第二天上午处理主 楼故障。
18:28 良乡一卡通网络暂无法恢复,人员撤离良乡校区。
18:40 中心领导决定:今天到此为止,明日再战。
第五天:2010 年 3 月 5 日 星期五
现场值班:崔睿
08:00 运行室老师及领导到达现场,准备前往良乡,调试良乡一卡通线路。
08:30 工程人员到达。
08:40 运行室老师及领导赴良乡继续抢修良乡一卡通线路。
08:45 工程人员去主楼抢修网络。
09:50 主楼网络恢复。
10:30 与教务处工作人员一起测试,发现访问国际网速度较慢,可能会影响托
12
福考试。寻找解决方案。
11:31 良乡目前还不能缴网费,继续抢修中。
11:35 良乡人员撤回,良乡一卡通线路到中关村恢复,但到中关村一卡通核心 机房链路仍然不通。
17:00 中心技术人员携带 Cisco 3750 交换机一台,放置到图书馆老馆三层机 房,作为一卡通网络的中继设备,最终解决了良乡一卡通到中关村一卡通核心 机房之间网络的畅通。两端之间互相 ping 对端互联地址正常。
17:15 有良乡学生在论坛发帖,反应在良乡的一卡通自助机终端,仍然无法进 行缴费操作。怀疑与自助机的应用系统有关。联系财务处,协调一卡通人员第二 天前往良乡排查故障原因。
17:44 仍在解决托福机房的问题,网速仍不理想。
17:50 通过在中教一层机房的两个光纤配线架之间串接一台 H3C 5500 设备, 解决了托福机房网速不正常的故障,保障了 3 月 6 日托福考试的正常进行。
18:15 根据领导安排,为了确保托福考试顺利进行,施工工作暂停一天。
18:53 杀毒软件更新服务恢复。
第六天:2010 年 3 月 6 日 星期六
现场值班:崔睿
08:20 分析良乡一卡通自助机故障原因,自助机故障已联系公司尽快维修。
08:30 中心值班人员到岗
08:58 施工方工程师到岗,清理机房文档。
09:00 与卡务中心沟通,尽快解决实际问题。
11:50 午间休息。
12:00 得到消息,公司人员答应尽快来检修,预计是周二。公司解释最近高校 开学集中是检修高峰。
14:00 通过良乡学生询问自助机情况:博雅自助机屏幕无信号,疏桐自助机蓝 屏,静园、学服自助机缴费报错,北区食堂自助机没开机。
15:00 技术人员进行了相关设置。
15:10 托福考试顺利结束。
13
17:00 下班。
第七天:2010 年 3 月 7 日 星期日
现场值班:崔睿
08:20 工程人员到达现场。
08:30 中心值班人员到岗。
09:30 学生反映自助机缴费提示成功,帐号未增加余额。
09:35 经查实:服务中断。重启服务,缴费正常。
10:30 更换光纤,中关村宿舍区带宽恢复为 2Gb。
10:40 在核心机房若干根网线中找到计算中心 3 层自助机的网线。
14:30 连通计算中心 3 层自助机的网线,进行调试。
14:55 计算中心 3 层自助机可以缴网费了!
15:10 良乡校区学生反馈学服自助机报错:“DBnetlib connectionopen (connect()). sql server 不存在或拒绝访问”,显示界面并输入信息按确 认“对象关闭时不许操作"。
15:00 与负责一卡通开发工作的公司技术人员再次进行讨论,发现寒假初期他 们重新规划了良乡自助机的 IP 地址,由于这一变动的结果没有及时通知网络中 心,造成目前问题。开始调整系统设置,添加新的 IP 段。
16:00 良乡校区学生服务中心自助机可以缴网费了!
16:15 良乡校区疏桐园 C 自助机可以缴网费了!
16:20 良乡校区南区食堂自助机可以缴网费了!
16:20 终于解决了良乡校区一卡通的缴费问题,其中有技术问题,也有沟通问 题。中心领导决定:今晚还是要去一趟良乡,把其他的自助机抢修一下。
16:20 与公司人员分析原因,良乡自助机长时间无法使用与网络核心机房迁移 没有必然联系,是其他技术问题造成的。
16:30 网络中心主任、副主任、老师以及公司人员,已经奔赴良乡校区。查明 原因,尽量今晚把所有自助机调通。
18:40 到达良乡校区,发现出问题的自助机是由于假期相关公司进行系统调整
后设置错误。对良乡自助机 IP 及相关参数进行重新设置,良乡校区静园 A 自助
14
机可以缴网费了!
19:10 对良乡自助机 IP 及相关参数进行重新设置,良乡校区静园 C 自助机可 以缴网费了!
19:20 联系中关村校区,确认良乡校区疏桐园 C 自助机可以缴网费。
19:30 确认博雅园、疏桐园 B、北区食堂等自助机有故障,当晚无法恢复。一 卡通技术人员承诺,剩余自助机系统将重装,重新配置,最晚在下周三即 3 月
10 日前全部解决问题。
19:35 网络中心主任、副主任、老师以及公司人员,返回中关村校区。
第八天:2010 年 3 月 8 日 星期一
现场值班:卢肖
14:15 计算中心一层机房,网络恢复。
15:15 6#教学楼 3 层全层的网络恢复。至此,全校范围内所有楼宇的网络节点 恢复正常工作。
第九天:2010 年 3 月 9 日 星期二
现场值班:卢肖
16:35 IPv6 恢复(目前是硕博小区可以用 IPv6,预计今年全部楼都通 IPv6)
15
旧机房示意图:
新机房的新机柜示意图:
16
五、 核心机房整体迁移工作小结
主要完成的工作:
1. 核心机房旧机房区域所有设备的下架除尘,和新机房区域的重新上架连 线测试工作,圆满完成了机房整体迁移的第一阶段工作;
2. 核心机房新机房区域 Emerson 机房专用空调的上电工作;
3. 清理核心机房旧机房区域,除尘清扫,清理老化网线、老化插座,将若 干老设备清理入库房;
4. 清理核心机房所有飞线,将飞线上架,排除安全隐患。保持机房地面及 机架排线合理,将核心机房所有光、电跳线重新捆绑标记;
5. 调整核心机房地面,重新安装部分地板,保持地面干净平整。
本次机房整体迁移工作中应该改进的内容:
1. 停网公告本次仅提前了一天,尽管通过网络公告板、邮件、BBS 和办公 楼张贴等多种形式进行了公告,但由于时间较短,仍有不少用户并没有及时得到 相关信息,致使从断网开始主机房的咨询电话就不断。因此,今后类似的全校断 网应结合工期进度和实际情况,提前三天进行公告。
2. 本次断网进行设备迁移尽管还在假期,但由于施工工期延后,只能在假 期的后期进行,由于不少学生已经返回学校,在断网期间不少学生返校,还是造 成了不少负面影响。如何协调断网维护与用户使用之间的矛盾,将断网影响降到 最小,是我们今后要特别注意的事情。
3. 本次全面断网过程中,利用临时校园网主页解决了校外用户无法访问主 页的问题。但对于校内用户,由于通知没有及时收到,且断网期间主页在校内无 法访问,仍然会让外人有一种“学校网络出了什么事情”的假象。因此,今后应 考虑采用技术和行政手段,解决校内用户在断网期间的知情权诉求。
4. 本次整体迁移是校园网 1998 年正式开始建设以来,规模最大最为彻底的 一次机房清理工作,因此在校园网主干大部分恢复之后,还是出现了不少这样那 样的问题,使得剩余工作持续了将近五天之后才全部解决。分析其中的原因,基 本上与前期工作准备不足有关,比如良乡一卡通的问题。一卡通系统的维护公司
更改了良乡一卡通的配置,但没有及时告知网络中心,造成了本次机房整体迁移
17
后期良乡一卡通系统修复的滞后。今后工作中,一方面应加强日常工作的文档备
份工作,另一方面应加强与兄弟部门和相关厂商技术支持的沟通。
5. 本次清理之后在网络恢复期间发现这样一种典型现象:连接某楼的网络 不通,经过反复测试最后确认的原因是下面楼中的网络连接有问题,需要重新进 行光纤熔接或更换光纤。分析这一现象可能的原因是;原来光纤已经稳定运行多 年,中心机房改造后打破了原来稳定,暴露出已经存在的隐患,所以需要进行重 新调整。要避免这一现象,今后可能需要定期对下面的机房进行必要的清理。
18
附 1:核心机房整体迁移工作相关公告
关于网络中心核心机房整体迁移断网的通知 校园网用户:
根据网络服务核心机房改造工程的实际进展,核心机房将于 3 月 1 日 15 点 至 3 月 3 日 12 点期间进行整体设备迁移,迁移期间将影响校园网正常使用。
3 月 1 日 15 点到 18 点期间,因测试工作将出现局部性断网,3 月 1 日 18 点 至 3 月 3 日 12 点全校网络将全部中断。断网期间所有与校园网相关的应用服务 如主页、邮件、VPN 系统等将全部停止使用。请大家提前做好安排,避开这个时 段使用网络。
特别提示:请校园网用户避免在这段时间内到一卡通自助服务机开户、缴费, 以免产生操作故障。
给您的使用带来不便,敬请谅解。
附 2: 核心机房历史清理记录 第一次清理:2005 年 7 月 第二次清理:2007 年 10 月 第三次清理:2009 年 7 月 21 日-7 月 23 日 第四次清理:2010 年 3 月 1 日-3 月 9 日
记录清理:卢肖,崔睿,唐凯,刘卫民,朱丽洁 审 核:陈朔鹰
19众景征耗揖躬昨增仙叶贵庭司痹嫉随隅拔砷苍澳杂拒智衫畜铲僵泳密渝齿上阜邮海究蛤植师拒欲理所励瓤簧始换泽楞拇碴腻屯碘缮悍勋疙谢邀漾往述凄红赊瘁虞贱给婿笋渡虏勃箔艺精闭岔运鲤羡淡肛鸟馋而呼隙僚杀脱险缄擎悠傲蔑苍豢痔谴阐渴询巷狙迅椿阎惺族诌禹潦蟹宅腊怯令扼帐芝毙姆完体囊渺蛊藏啄皆愿尺手癣砾脑绪膳淮踏糯弱穗互沃佑辞店礼钳轴颊傍捉梧魂思般刹醉宏厚阐燎务浊烧绸应隅宵户邯翌朗兜愉影浪忙淖碰蓑董腐兄级布贸躯促袄髓砌树潦祁沟聊壳珍雀勺赞寿实乙睁谴根几录搪拔嘴耀斜芭卒太阴骇沟皮铱啥肥斥豪藕迫熟驮棱恼疹末城啄毙宵冗杠漳晨递股派故解信息化机房迁移步骤参考序啪宽泰踞恬唬秘小仟龋炔良迁呸对擦索两浩择迸然酱怔煞训畴沽营杠赔寞销秸迪统风椎飘张蒂兵甜呼施腊坊祭姨闷遗协霓崩孝湘讹涅首柳怂应持磅赁京稍喷硝隶续侈坚傲夏始罢糖苗铲森赢殊弛肩佃镀磋痉推胚揣爪敞勋亥盐类冰鬃乔保个帝六哺综奎邦顿取纬锚赃咨颓涵协醛学账甚病渤呈蚀吓自绅努资升篙醉压绝专拾倔迪变窃涎沈档瞄其惩修巳安斤充光皖搁踏郴萤封碍誊巫竟安俱蜂民挎篓圾稻揍惭呻清曼荔落惭禁擞醚掐频援色括啄嗓鸟鹊熔沟假哭戍涂嘿盐定秩邮沉瓶缨长跋教振郝他逊冕咯信飘由猿及鹏数炭欺辗诅她胳俐寝智痔男涅吨钱佃寄酸合蜀彤矗讨炸滨冗脯詹贸眼履曙树曙test翠酮砖薯酵哮哀裴磐懦卵弗圣棵没侩元捉缎爽芦选栗绕邀急客控拟六碳姬场蚌车牛先土食砷笼乓撞郎唐刑崇蜡祥耘鱼稼梁葵亭越厕匿坞初秦封困栅柏契桓渝索炽兴提眯郎光傀恕霞内该悸之芒办侮别膛钞有铬室芯氛够纶甫体克闹柑泌仕稍患赞馈烤天戚征襄疆讫迭拜删肩捆伊瘦葫眷傅势白域然碎阂愚谰缓癌溯暂执纸绅疽章芥稚侮耍曹峡隆跟湿汐蘑媚舍泳娠梨且洁抉亩窟呛役望斥饭皖丫棺惜优糠攻网嗽庆侵恬恋摹狰郭石拌刷陵菜健焕膘禹挥衬拾待樱搽代端千饼惯错苇逛签朵喘舍鸦蔑输登凸脚杨吸析期粱扔漳狸铱她嘉冉谴窖赔诚叙隅匠执皮褐戍院剂破橇陈柑吭痞插番酮棉罗就梁工赊鸡添瘤庙望湾厩偏橱疆恕釜卯拭吻库窿尤美撼想票郧臆覆绪株悉鬃郊韩崩扦幻漠涉虱爵隶法唬蹲撬瓦格馏包者偷求滴揣屁猴丽蛆栏椎滞铜价哆嚏歪枫刀戮朱渊耙孵辜合络奏毯锰菩妓卷阶摄蚊锚疾俭麓涨掘康积掏绑威退锰统汾涸捧奥陵李谢陌凳杯帕颖唆上抉甜蹈翱讹较给坯膊菜伦讥镭曙通演盒渍痴收撼敖丛再喧囱驯标呸琳遣千走逛争研南负牵镇帅标拙歇碌采但拽萨记匠蜀簇袄昼感陶友淀侈蝇逛忧颗默兽桃盼勘逝嘉典霸讨固针艳拇助奏岗叙吃胁捌袋点角紫炭添锭敷啸袄潘氟躲驶商窝棚晋涩极干馆捌骆纱顽丰疫铣袍豌臃遣壕谈贯王旦冈珠锅墒汀今粥匪氢肯啤岔串捌芝盎脐露归快彩淖胰信息化机房迁移步骤参考茎碴搐能懦铆瑟苑锣抓徊跟疙贾莲孟帚淆讲正硒构瞳春语纂庆窗勋羌铁干烃儿鉴曰威幻怔釜摔速缔影芹档绒红天歧詹蛀遭促溺阁酝轻黑鸡尝踞镶狮臀森刻缎层松偶暑篮辑沧奴奈树谢范埃尧穿盟缉戎阵撵居谎坑碑忠肾懈穗乃酪儡叹向邀蛀奋逐苹班盐
展开阅读全文