设备配置安装手册模板.doc

分行IT基础设施资源整合项目文档编号CCBSFB001密级分行IT基础设施资源整合项目Cisco MDS 9513设备配置安装手册VER 1.0中国建设银行信息技术管理部SFB项目组 7月文档信息文挡名称初稿作者审核建立日期Cisco MDS 9513 installation guide.docAlex FengJuly 26, 文档修订统计章节编号章节名称修订内容简述修订日期修订前版本号目录第1章功效概述31.1Cisco MDS 9513 构建存放网络方案31.2Cisco MDS 9513 设备介绍6第2章场地要求152.1电源和冷却装置152.2机房环境要求152.3物理规格152.4设备承关键求15第3章组件说明163.1Cisco MDS 9513资源列表163.2Cisco MDS 9513端口列表183.3Blade server 连接18第4章组件安装214.1Cisco MDS 9513安装配置标准214.2Cisco MDS 9513 配置操作步骤2221第5章运行维护38375.1Cisco MDS 9513 软件版本升级38375.2电源和风扇状态说明38375.3线卡工作状态说明38375.4引擎工作状态说明39385.5Cisco MDS 9513 常见功效排错39385.6Cisco MDS 9513排错工具排错4039第1章 功效概述1.1 Cisco MDS 9513 构建存放网络方案数据中心SAN网络采取Cisco MDS 9513交换机构架存放网络，连接后端存放盘阵和主机、服务器及磁带库系统。Cisco企业MDS9513设备为模块化、高密度、高性价比智能多层存放网络光纤交换机，每台交换机提供可依据需要配置24端口或48端口1/2/4Gb FC板卡，MDS9513单机箱最达提供528个模块化配置FC端口。极具竞争力经济性：Cisco MDS 9513 设备采取优化端口连接设计，可提供4G 2G、1G 速率自适应FC端口。Cisco MDS 9513多层光纤通道交换机所提供优异管理工具能够最大程度地降低总体拥有成本（TCO）。Cisco MDS 9513采取了虚拟SAN（VSAN）技术，这种技术能够在一个单一物理结构中建立多个基于硬件独立环境，方便安全地共享物理基础设施，从而深入降低TCO。智能化网络服务：Cisco MDS 9513采取了VSAN技术，用于基于硬件智能化帧处理访问控制列表（ACL），和多种优异流量管理功效，比如转发拥塞控制（FCC）等和覆盖整个交换结构QoS，从而让用户能够方便地从各个独立SAN孤岛移植到覆盖整个企业存放网络。全方面安全框架：Cisco MDS 9513支持RADIUS身份认证、SNMPv3、角色访问控制、SSH、SFTP、FC-SP、VSAN、硬件分区、LUN分区和ACL。完善诊疗功效：提供了业界第一套智能化诊疗、协议解码和网络分析工具，和集成“Call Home”（自动通报）功效，从而能够提升可靠性，加紧处理问题速度，降低服务成本。统一存放管理：Cisco MDS 9513内置了丰富存放网络管理功效，全部功效全部能够经过CLI命令行界面或图形界面Cisco Fabric Manager取得。Cisco Fabric Manager是一个集中式管理工具，能够简化多个光纤通道交换机管理。业界性能最高交换机间链路（ISL）：Cisco MDS 9513在一个PortChannel端口通道中能够支持多达16个链路链路逻辑捆绑，从而能够提升可扩展性和恢复能力。在数据中心配置2组Cisco MDS 9513 交换机。服务器和提供存放磁盘阵列，分别以双链路冗余方法交叉连接到2组交换机 FC端口，同时若需要和现有系统中光纤交换机互连，可经过ISL链路和MDS9500以互连模式进行互连。设计示意图以下：利用Cisco光纤交换机独有VSAN技术能够将一个物理交换矩阵分割成不一样逻辑交换矩阵而达成不一样应用在交换矩阵上相互隔离,保障不一样应用安全，同时由两台交换机双冗余设计替换多个物理交换矩阵即多交换机结构，可极大降低运维成本。具体设计可依据具体应用环境进行考虑，仅举例以下图：在VSAN1和VSAN2 通信上还可采取inter-VSAN Routing(IVR)，类似于广域网上，VLAN和VLAN之间采取路由协议进行互通。在各自不一样应用不一样VSAN中可再采取分区（Zoning）方法来确定主机对存放访问。依据实际应用环境可采取硬件或软件分区，即硬分区和软分区。分区能够根据以下方法来进行设置，而且是能够以混合方法进行设置：- 依据终端设备WWN来设置；- 依据终端设备FC-ID来设置；- 依据交换机端口F_Port来设置；- 依据所发觉存放空间所定义SCSI LUN来设置。MDS9500在安装过程中或故障诊疗时可采取FCPing 和FC Trace来确定FC光纤交换机主机和存放所连接FC端口是否连通1.2 Cisco MDS 9513 设备介绍作为Cisco MDS 9500系列旗舰产品， Cisco MDS 9513多层导向器 (图 1)提升了导向器级交换机标准。凭借业界领先可用性、可扩展性、安全和管理功效，Cisco MDS 9513能够以极低总拥有成本(TCO)布署高性能存放局域网(SAN)。Cisco MDS 9513将丰富智能特征集成到一个高性能、独立于协议交换阵列中，所以能够满足大型数据中心存放环境严格要求：出色高可用性、安全性、可扩展性、易管理性，并能透明集成新技术，从而构建一个极其灵活数据中心SAN处理方案。因为和第一、二代Cisco MDS 9000系列交换模块兼容，Cisco MDS 9513能够提供优异功效和前所未有投资保护，任何Cisco MDS 9000系列交换模块全部能在这一高度可扩展系统中使用。关键特征和优势Cisco MDS 9513多层导向器提供了下列特征：业界领先可扩展性和可用性Cisco MDS 9513把无中止软件升级、状态化进程重启/故障切换和全部关键组件完全冗余性结合在一起，提供了出色高可用性。每个机箱能支持多达528个光纤通道端口，每个机架最多能支持1584个光纤通道端口，系统带宽2.2Tbps，Cisco MDS 9513在可扩展性方面居业界领先地位，能够满足最大型数据中心存放环境要求。 1/2/4-Gbps和10-Gbps光纤通道交换，带全带宽冗余提供了具最高可用性光纤通道性能和全冗余带宽。每个交叉矩阵模块全部提供了完整系统带宽，所以，丢失或拆卸一个交叉矩阵模块不会影响系统性能。即使发生交叉矩阵模块故障，也能确保100%系统吞吐量。 灵活性和投资保护Cisco MDS 9513多层导向器能够支持第一、二代Cisco MDS 9000系列交换模块任意组合，提供了向后兼容性和前所未有投资保护功效。 基于TCO设计提供了优异管理工具，能最大程度降低TCO。它采取了思科虚拟SAN（VSAN）技术，这种技术能在一个单一物理阵列中建立多个基于硬件独立环境，方便安全地共享物理基础设施，从而深入降低TCO。 多协议和多传输架构Cisco MDS 9000系列多层架构能在一个独立于协议交换阵列上提供一套统一功效集。Cisco MDS 9513能够在一个系统中透明地集成光纤通道、FICON 、iSCSI和FCIP。 智能化网络服务提供了对于VSAN技术集成支持、用于基于硬件智能化帧处理访问控制列表（ACL），和多种优异流量管理功效，比如光纤通道拥塞控制（FCC）和阵列级服务质量QoS，从而让用户能方便地从各个独立SAN孤岛迁移到覆盖整个企业存放网络。 用于智能化存放服务开放式平台为主导和/或加速多种存放应用（比如基于网络卷管理、数据迁移和备份）提供必需智能服务。 集成化基于硬件VSAN和VSAN间路由(IVR)支持大规模多站点和异构SAN拓扑布署。因为集成入端口级硬件，所以，系统或阵列中任意端口全部能划分到任意VSAN。集成基于硬件VSAN间路由技术提供了系统或阵列内任意端口间线速路由功效，无需外部路由设备。 高级FICON服务支持1/2/4-Gbps和10-Gbps FICON环境，包含级联FICON阵列、支持VSAN大型机和开放式系统混合环境，和用于大型机Linux分区N端口ID虚拟化。CUP (控制单元端口)支持使用户能从大型机管理控制台对Cisco MDS 9000系列交换机进行带内管理。 全方面安全框架支持RADIUS和TACACS+、FC-SP、SFTP、SSH协议和SNMPv3，它们采取了高级加密标准（AES）、VSAN、硬件分区、ACL和能够和VSAN关联基于角色访问控制功效。 优异诊疗提供了智能诊疗、协议解码、网络分析工具，和集成call-home功效，能够提升可靠性，加速问题处理，并降低服务成本。 统一SAN管理Cisco MDS 9000系列包含内置存放网络管理功效，其全部特征全部是经过命令行界面(CLI)或思科光纤阵列管理器提供，思科光纤阵列管理器是一个集中管理工具，能够简化多个交换机和阵列管理。经过和第三方存放管理平台集成，实现了和现有管理工具无缝集成。 产品规格表1列举了Cisco MDS 9000系列4-Gbps光纤通道交换模块产品规格。表1. 技术规格特征说明产品兼容性Cisco MDS 9000系列 软件兼容性 Cisco MDS SAN-OS版本3.0(1)或更高版本 协议 光纤通道标准 FC-PH, Revision 4.3 (ANSI/INCITS 230-1994) FC-PH, Amendment 1 (ANSI/INCITS 230-1994/AM1 1996) FC-PH, Amendment 2 (ANSI/INCITS 230-1994/AM2-1999) FC-PH-2, Revision 7.4 (ANSI/INCITS 297-1997) FC-PH-3, Revision 9.4 (ANSI/INCITS 303-1998) FC-PI, Revision 13 (ANSI/INCITS 352-) FC-PI-2, Revision 10 (ANSI/INCITS 404-) FC-FS, Revision 1.9 (ANSI/INCITS 373-) FC-FS-2, Revision 0.91 FC-LS, Revision 1.2 FC-AL, Revision 4.5 (ANSI/INCITS 272-1996) FC-AL-2, Revision 7.0 (ANSI/INCITS 332-1999) FC-AL-2, Amendment 1 (ANSI/INCITS 332-1999/AM1-) FC-AL-2, Amendment 2 (ANSI/INCITS 332-1999/AM2-) FC-SW-2, Revision 5.3 (ANSI/INCITS 355-) FC-SW-3, Revision 6.6 (ANSI/INCITS 384-) FC-SW-4, Revision 7.5 (ANSI/INCITS 418-) FC-GS-3, Revision 7.01 (ANSI/INCITS 348-) FC-GS-4, Revision 7.91 (ANSI/INCITS 387-) FC-GS-5, Revision 8.2 FC-BB, Revision 4.7 (ANSI/INCITS 342-) FC-BB-2, Revision 6.0 (ANSI/INCITS 372-) FC-BB-3, Revision 6.8 (ANSI/INCITS 414-) FCP, Revision 12 (ANSI/INCITS 269-1996) FCP-2, Revision 8 (ANSI/INCITS 350-) FCP-3, Revision 4 (ANSI/INCITS 416-) FC-SB-2, Revision 2.1 (ANSI/INCITS 349-) FC-SB-3, Revision 1.6 (ANSI/INCITS 374-) FC-VI, Revision 1.84 (ANSI/INCITS 357-) FC-FLA, Revision 2.7 (INCITS TR-20-1998) FC-PLDA, Revision 2.1 (INCITS TR-19-1998) FC-Tape, Revision 1.17 (INCITS TR-24-1999) FC-MI, Revision 1.92 (INCITS TR-30-) FC-MI-2, Revision 2.6 (INCITS TR-39-) FC-SP, Revision 1.6 FC-DA, Revision 3.1 (INCITS TR-36-) FAIS, Revision 0.7 IP over 光纤通道(RFC 2625) IPv6, IPv4和ARP over FC (RFC 4338) 广泛基于IETF标准TCP/IP、SNMPv3和RMON MIB 服务类别：Class 2, Class 3, Class F 光纤通道标准端口类型：E, F, FL, B 光纤通道增强端口类型：SD, ST, TE 机箱插槽配置 线卡插槽：11个 控制引擎插槽：2个 交叉矩阵交换阵列插槽：2个 风扇架：前端风扇架，后端风扇架 电源架：2个 时钟模块插槽：2个 性能可扩展性 2.2-Tbps内部交换带宽 支持光纤通道端口速度 1/2-Gbps自检测，可有选择地配置 1/2/4-Gbps自检测，可有选择地配置 10-Gbps固定速率 支持以太网端口速度 Gbps固定速率 缓存信用点：16端口和32端口模块 每端口最多255个 缓存信用点：多协议服务模块 每个标准光纤通道端口最多255个 可选企业许可证激活端口最多3500个 缓存信用点：12端口、24端口和48端口模块 每个标准端口最多250个 可选企业许可证激活端口最多4095个 每个机箱端口数 12到528个1/2/4-Gbps光纤通道端口 4到44个10-Gbps光纤通道端口 4到60个1-Gbps以太网端口 每个机架端口数 最多1584个1/2/4-Gbps光纤通道端口 最多132个10-Gbps光纤通道端口 最多180个1-Gbps以太网端口 PortChannel：最多16个端口（通道能够使用机箱中任何模块上任何速度匹配端口） 特征和功效阵列服务 Name Server 注册状态变更通知（RSCN） Login service Fabric Configuration Server(FCS) Public Loop 广播 In-order delivery 高级功效 VSAN IVR PortChannel，带多路径负载均衡 QoS基于流量、基于分区 光纤通道拥塞控制(FCC) N端口ID虚拟 诊疗和排障工具 POST诊疗 在线诊疗 内部端口回环 SPAN和RSPAN 光纤通道路由跟踪 Traceroute 光纤通道 Ping 光纤通道调试（debug） 思科光纤阵列分析工具 系统日志 在线系统健康状态 端口级统计 实时协议调试 网络安全 VSAN ACL 每VSAN基于角色访问控制 光纤通道分区 N端口WWN N端口FC-ID Fx端口WWN Fx端口WWN和接口索引 Fx端口域ID和接口索引 Fx端口域ID和端口号 LUN 只读 广播 FC-SP DH-CHAP交换机间验证 DH-CHAP主机-交换机验证 端口安全和阵列捆绑 管理访问 实施AESSSHv2 实施AESSNMPv3 SFTP FICON 符合FC-SB-3 级联FICON阵列 FICON和光纤通道FCP流量混合 CUP管理界面 可维护性 配置文件管理 光纤通道接口无中止软件升级 Call home 电源管理LED Port beaconing 系统LED SNMP报警捕捉 网络开启 可用性和可靠性 在线无中止软件升级 状态化无中止控制引擎模块故障切换 可热插拔冗余控制引擎模块 可热插拔冗余交叉矩阵模块 可热插拔冗余时钟模块 可热插拔1+1冗余电源 可热插拔风扇架，集成了温度和电源管理功效 可热插拔小型可插拔(SFP)光纤(1/2/4 Gbps) 可热插拔小型可插拔(X2)光纤(10 Gbps) 可热插拔交换模块 状态化进程重启 在任何模块、任何端口上配置PortChannel 基于阵列多路径 针对每个VSAN阵列服务 联机诊疗 端口跟踪 用于管理虚拟路由冗余协议(VRRP) 网络管理 经由Cisco MDS 9500系列Supervisor-2模块访问方法 带外10/100/1000以太网端口 RS-232串行控制台端口 带内光纤通道IP端口 DB-9 COM端口 经由Cisco MDS 9000系列光纤通道交换模块访问方法 带内光纤通道FICON CUP 访问协议 CLI经过控制台和以太网端口 SNMPv3经过以太网端口和带内光纤通道IP访问 SNIA SMI-S FICON CUP 分布式设备别名服务 网络安全 利用基于RADIUS和TACACS+验证、授权和记帐（AAA）功效，提供基于角色每VSAN访问控制 SFTP 实施AESSSHv2 实施AESSNMPv3 管理应用 Cisco MDS 9000系列CLI 思科光纤阵列管理器 思科设备管理器 CiscoWorks Resource Manager Essentials (RME)和设备故障管理器 (DFM第2章 场地要求2.1 电源和冷却装置电源 (6000W AC) 输入：额定电压100-240VAC（范围10%）；最大电流 16A；额定频率 50-60Hz（范围3Hz） 输出：2900W (100V AC16A); 6000W (200V AC16A) 气流 300lfm，经过系统风扇组件 思科提议您在墙壁和机箱气孔之间保留最少2.5英寸（6.4厘米）空隙，并在两个机箱之间保留最少6英寸（15.2厘米）间距，以预防过热。 2.2 机房环境要求周围环境工作温度：32到104F (0到40C) 周围环境非工作和存放温度：40到167F (40到75C) 周围环境（非冷凝）工作湿度：10到90% 周围环境（非冷凝）非工作和存放湿度：10到95% 工作高度：197到6500英尺 (60到米)2.3 物理规格尺寸（高宽长）： 24.5 x 17.37 x 28.0英寸 (62.3 x 44.1 x 71.1厘米)14 RU2.4 设备承关键求机箱(包含风扇和时钟模块)：100.0磅 (45.4千克) 电源(6000W AC)：32.5磅 (14.7千克) 阵列模块：5.75磅(2.6千克) Supervisor-2模块：7.2磅 (3.3 千克)MDS95133块板卡配置总重89.2千克。第3章 组件说明3.1 Cisco MDS 9513资源列表端口资源划分初步标准： 绿色区域分配给磁盘阵列，黄色区域分配给磁带库，粉色区域分配给主机服务器，蓝色区域分配作为ISL连接。3.1.1 Cisco MDS 9513 144 端口配置资源表 3.1.2 Cisco MDS 9513 192端口配置资源表3.3.3 Cisco MDS 9513 256端口配置资源表设备名称MDS 9513 01槽位/端口VSAN Zone/Zoneset端口描述物理端口类型FC端口类型主机连接存放连接WWN1/11Test/testsetport description .LC/MME portYes/xxx.xxx.xxx.xxx1/21Test/testsetport description .LC/SMF_portYes/xxx.xxx.xxx.xxx1/31/41/51/63.2 Cisco MDS 9513端口列表3.3 Blade server 连接 图所表示： 因为Blade Server 内部也是SAN switch， 在连接时候要考虑采取ISL，E_port连接到MDS9513交换机，配置interop mode，配置指定domain ID,在MDS 9513上配置zone和zoneset，zone member采取Blade Server内部独立blade PWWN地址，依据应用需求将不一样Blade分配到不一样zone，Activezoneset会传输到Blade server内部SAN switch上，实现zone划分。 因为此次采购Blade Server缺省配置为Brocade SAN 模块，实现和Cisco MDS9513互联要注意以下限制：: Brocade SAN module 微码版本应该在 Fabric OS 2.4 或之上。 Interop 模式会影响Brocade SAN module，所以Brocade SAN module 因该配置interop mode enabled. Brocade SAN module 配置interop mode enable会reboot以后配置生效. Zoning 划分只能采取pWWN作为 zone member. 不能采取端口号或nWWN. Domain IDs 限制在97 到 127 之间。 只有Active zoneset会传输从CiscoMDS9513传输到Brocade SAN module中。 在实现Blade server Brocade SAN module 和Cisco MDS 9513互联后，以下Fabric service 不被支持： The Alias Server Secure Fabric OS Management Server以下服务被严禁： Virtual Channels Quickloop QuickLoop Fabric Assist zones以下服务不生效： Broadcast zones Domain/port representation in zones Trunking第4章 组件安装4.1 Cisco MDS 9513安装配置标准 采取WWN作为zone member ，便于统一业界标准，便于不一样厂商互操作,问题在于后续系统维护相对复杂，如不考虑不一样厂商互联则推荐采取基于端口zone member划分标准，了解简单，维护简单。 端口划分分区（zone）标准，划清主机接入区，和存放接入区，便于未来管理。 因为采取dual fabric 结构设计，充足考虑两个独立fabric中存放交换机端口zoning和VSAN划分对称性。 推荐采取基于HTTP界面OOB 管理方法，OOB以太网连接和ip地址计划要求符合Dual Fabric 冗余特征。 配置FCID persistent 在每台交换机上， 预防HP-UX主机在更换HBA或交换机换端口，重新开启时候需要重新扫描磁盘。 4.2 Cisco MDS 9513 光纤布线配置操作步骤不一样模块在不一样层面汇聚到Cable Giude支架，相互不交叉；换模块不会影响其它模块；FC光纤、管理以太网线和电源线相互分开从不一样方向分布，避免相互干扰。 Cisco MDS 9513 配置操作步骤 在这一章里，具体介绍了思科MDS9000存放交换机相关VSAN和zone配置方法，用户能够经过对VSAN和zone配置增强SAN环境下存放资源安全访问能力，灵活访问控制能力，充足满足用户需求。 经过配置，用户能够建立VSAN，zones，zoneset ，建立zone和VSAN之间联络。4.2.1 设备安装 Cisco MDS 9513 安装过程以下： Step 1 安装MDS9513机架托件 Step 2 将MDS9513机框安置在架托架上，并安装线缆管理器。 Step 3 将MDS9513板卡安装在对应位置。4.2.2 配置前准备工作Step 1 将console电缆连接到MDS9513console口，设置终端参数为（9600 Bits， 数据位8， 效验 none ，停止位 1，流控none）Step 2 将Console 另一端连接到PC机串口，并开启终端软件。Step 3将PC机以太口和MDS 9513管理端口连接在网络中，提议在同一子网。 准备加电进行初始化配置。 4.2.3 初始化配置 经过Console接入MDS9513，加电，CLI配置以下:- Basic System Configuration Dialog -This setup utility will guide you through the basic configuration of the system. Setup configures only enough connectivity for management of the system.Press Enter in case you want to skip any dialog. Use ctrl-c at anytime to skip away remaining dialogs.Would you like to enter the basic configuration dialog (yes/no): yEnter the password for admin : adminCreate another login account (yes/no) n: nConfigure SNMPv3 Management parameters (yes/no) y: ySNMPv3 user name admin: adminSNMPv3 user authentication password : admin123 admin口令，在开启Fabric Manager时需要。The same password will be used for SNMPv3 privacy as well.Configure read-only SNMP community string (yes/no) n: Configure read-write SNMP community string (yes/no) n: Enter the switch name: mds9NNN- MDS9513主机名Continue with Out-of-band (mgmt0) management configuration? (yes/no) y: yMgmt0 IP address : 10.0.X.Y Mgmt0 IP netmask : 255.255.255.0 提议该地址和管理PC机在同一网段；Continue with In-band (vsan1) management configuration? (yes/no) n: Enable the ip routing capabilities? (yes/no) y: yConfigure static route? (yes/no) y: nConfigure the default network? (yes/no) y: nConfigure the default gateway? (yes/no) y: IP address of the default gateway : 10.0.X.254 Configure the DNS IP address? (yes/no) n: Configure the default domain name? (yes/no) n: Enable the telnet service? (yes/no) y: Enable the ssh service? (yes/no) n: Configure the ntp server? (yes/no) n: Configure default switchport interface state (shut/noshut) shut: Configure default switchport trunk mode (on/off/auto) on: Configure default zone policy (permit/deny) deny: Enable full zoneset distribution (yes/no) n: Enable FCID Persistence globally (yes/no) n: y FCID绑定WWNA summary of the configuration will be displayed:The following configuration will be applied:username admin password admin role network-adminsnmp-server user admin network-admin auth md5 admin123 priv admin123switchname mds9216-16interface mgmt0ip address 10.0.16.3 255.255.255.0no shutdownip default-gateway 10.0.16.254telnet server enableno ssh server enablesystem default switchport shutdownsystem default switchport trunk mode onno zone default-zone permit vsan 1-4093no zoneset distribute full vsan 1-4093Press Enter twice to save the configuration.Would you like to edit the configuration? (yes/no) n: Use this configuration and save it? (yes/no) y: After the configuration is saved, hit 4.2.3 安装Fabric Manager和Device ManagerStep 1开启Internet Explorer.Step 2键入MDS 9000IP 地址。Cisco Fabric Manager界面将出现Step 3点击Cisco Fabric Manager 进行安装Step 4点击Fabric Manager，开启Fabric ManagerStep 5点击Open4.2.4 创建和配置zones 和 zonesets 经过这一节配置，用户能够 创建 zone sets 和 zones 将zone组员加入到 zones 激活 zone sets