IDC数据中心项目割接方案

IDC数据中心项目割接方案IDC数据中心项目割接方案目录1.割接工作概述 52. 准备阶段 52.1. 内部分工 52.2. 文档编制交付物 73. 中秋假期阶段工作 83.1. 割接工作流程图 83.2. 应急资源准备 103.3. 数据备份、配置导出 103.4. 关机临检 123.5. 设备关机 133.6. 安全检查 133.7. 设备开机 143.8. APC英飞UPS电池电量测试 143.9. 网络恢复测试 143.10. 应用恢复测试 154. 国庆假期阶段工作 164.1. 安防临时环境搭建 164.2. 应急资源准备 164.3. 数据备份、配置导出 174.4. 关机临检 184.5. 设备关机 194.6. 设备下架迁出 204.7. 设备迁回上架 204.8. 通讯线缆恢复 214.9. 动力线缆恢复 214.10. 安全检查 224.11. 设备开机 224.12. 网络恢复测试 234.13. 应用恢复测试 235. 需注意事项 255.1. 机柜使用展望 255.2. 弱电布线展望 275.2.1. IDC内部机柜互通 275.2.2. 外部光缆接入 275.3. APC英飞UPS电池电量测试 285.4. 下架设备堆放 285.5. ***配合事项 295.6. ***配合事项 295.7. 国庆期间IDC停电 305.8. 国庆期间园区BA环控响应暂停 305.9. 国庆期间园区安防系统保障 306. 应急预案 316.1. 网络设备开机故障 316.2. 安全设备开机故障 316.3. x86服务器开机故障 336.4. 应用恢复故障 336.4.1. ***应用 336.4.2. ***应用 368/35割接工作概述***IDC机房将于***I年***I月底至***I月中旬进行改造，涉及IDC内所有设备断电停机两次，并由于强弱电布线施工及地板更换，在第二次停机需将所有信息化设备迁移至机房外部，工作量巨大，且时间严格范围限定，要求信息化设备的割接工作精细缜密，确保割接全过程顺利完成。割接大体时间安排如下：阶段具体日期工作概述准备阶段9月6信息收集、改造后规划、文档准备、客户沟通中秋假期9月21为配合UPS间改造及UPS负载合并，所有信息设备关机开机测试。国庆假期9月30为配合IDC强弱电改造及地板更换，所有信息设备关机下架、移位迁出迁回、上架开机测试。本文档仅关注整个IDC改造期间的信息化设备割接工作，对于其它强弱电及环境监控类工作未有涉及，上述时间安排表也仅代表信息化设备的工作安排，非整个项目的时间安排。准备阶段内部分工本次改造项目中IT相关工作团队由***信息运维服务部驻***团队成员及技术服务部成员组成，主要成员分工如下表：岗位成员职责割接团队负责人负责整个割接工作的计划制定、分工制定、需求控制、进度控制、风险控制；协助网络组及服务器组工作；负责2次停机中网络组的应急资源审核、数据备份以及与项目其它干系方的沟通接口。网络组网络组负责人，负责割接前的信息收集、应急资源准备、配置导出，割接后的网络部属规划、相关图表制作，割接过程中的所有网络设备/安全设备开关机/上下架、通讯线缆拆除/连接、测试验证，应急预案的制定，网络类突发事件的处置，与IT团队负责人的沟通接口。协助网络组负责人完成工作。协助网络组负责人完成工作。服务器组服务器组负责人，负责割接前的信息收集、应急资源准备、数据备份与配置导出，割接后的服务器部属规划、相关图表制作，割接过程中的所有服务器/存储设备开关机/上下架、动力线缆拆除/连接、测试验证，应急预案的制定，与IT团队负责人的沟通接口。协助服务器组负责人完成工作。协助服务器组负责人完成工作（侧重BA网中的服务器）。辅助组根据现场实际情况协助网络组与服务器组的工作，尤其在物理设备上下架过程中进行协助安全员负责信息化设备上下架、开关机期间的安全监管（电、火、水），英飞UPS电池放电测试，负责信息化设备室外堆放期间的设备看管。应用保障支持负责2次停机中服务器组的应急资源审核、数据备份审核、配置导出审核，负责各应用系统应急预案的审核，负责服务器及应用类突发事件的处置，负责验证各类业务应用的恢复。外部支持人员：网络相关：数据库相关：BA相关：消费相关：文档编制交付物在准备阶段，所有文档的编制工作由割接团队负责人、网络组负责人、服务器组负责人完成，具体分工如下表：文档交付物负责人内部审核时间内部审核人定稿时间割接计划书物理链路连接表（新旧两份）网络设备密钥表网络设备规划机柜图服务器清单服务器设备密钥表服务器设备规划机柜图中秋假期阶段工作割接工作流程图应急资源准备时间节点团队工作描述责任人审核人9月20网络组核心、汇聚交换机备机准备接入交换机备机准备9月20服务器组X86服务器备机准备服务器开机光盘准备Windows操作系统光盘准备Oracle安装光盘准备SQLServer安装文件准备Exchange安装文件安准备Sharepoint安装文件准备Insight安装文件准备备用磁盘驱动器、内存条准备数据备份、配置导出时间节点团队工作描述责任人审核人9月21日网络组所有交换机的配置信息以copy方式导出为txt文档，存放于Laptop中所有安全设备的配置信息以截屏形式导出为png图片，存放于Laptop中917:30~24:009月服务器组***Exchange数据库由于数据量较大，备份时间较长，故提前在20日晚间即以Ntbackup方式备份至异机***、***所有DC、Exchange服务器提前在20日晚间备份Windows状态信息***外网AD数据库、Exchange数据库以Ntbackup方式备份至异机***BA网AD数据库以Ntbackup方式备份至异机***BAInsight、InfoCenter服务器Ghost备份至异机；Insight、InfoCenter服务器数据库导出备份***消费服务器SQL数据库导出备份至异机***门禁服务器Ghost备份，SQL数据库导出备份至异机***OA服务器Ghost备份至异机，SQL数据库导出备份至异机***外网AD数据库以Ntbackup方式备份至异机***内网AD数据库以Ntbackup方式备份至异机***内网LIMS系统Oracle数据库以Exp方式备份至异机***信息AD数据库、Exchange数据库以Ntbackup方式备份至异机对于上述需要异机存放备份数据的情况，分别在***与***服务器群中选择专用服务器，作为备份数据存放的目的服务器，规划如下表：类别系统备份数据目的服务器外网AD、Exchange、BA网AD、BAInsight、BAInfoCenter、消费、门禁、OA系统备份数据***闲置DellR900外网AD、ExchangeNas-head（172.19.21.11）内网AD、LIMS系统备份数据LocalNAS（172.22.64.35）AD、Exchange系统备份数据台式机关机临检时间节点团队工作描述责任人审核人918:30~19:00网络组测试***电信、联通出口链路测试***外网核心至各入驻单位接入层链路连通性测试***内网核心至宜山路、田林路链路连通性测试***内网核心至接入层链路连通性测试政务网连通性服务器组测试***外网AD、Exchange、OA系统应用测试***BA网AD、Insight、InfoCenter、消费、门禁系统应用协助戚世春测试***Web网站、园区管理、LIMS系统应用测试***外网AD、Exchange系统应用测试***内网AD、LIMS系统应用协助周涛测试***Web网站系统应用协助沈意吉测试***Citrix系统应用测试***信息AD、Exchange系统应用检查所有服务器、存储阵列硬件健康状况，记录健康灯、磁盘灯异常状况设备关机时间节点团队工作描述责任人审核人9月服务器组按照系统划分，依次关闭应用服务器/前端服务器数据库服务器/后端服务器存储阵列域控制器Exchange服务器需先手动停止相关服务后再关机9月网络组按照网络划分，依次关闭接入层交换机汇聚交换机旁路安全设备核心交换机干路安全设备路由设备此部分工作结束后可通告际达公司开始负载合并工作。计划耗时20:00~次日01:00。安全检查待际达公司将APCSmartUPS下线，并将***负载迁移到APC英飞UPS之后，即可开展安全检查工作。时间节点团队工作描述责任人审核人9月安全员对际达公司实施的UPS负载合并工作结果进行复查，确认线缆连接无误，确认空开容量、线径大小匹配并满足负载需求再次确认合并后所有负载的功率总和，评估UPS开机条件是否成熟排查全部机柜的负载接入，排查短路等风险隐患设备开机时间节点团队工作描述责任人审核人9月网络组按照网络划分，依次开机路由设备干路安全设备核心交换机旁路安全设备汇聚交换机接入层交换机9月服务器组按照系统划分，依次开机域控制器存储阵列数据库服务器/后端服务器应用服务器/前端服务器。需要注意的是，***LIMS数据库小型机开机后暂拔除网卡网线，以等待后续UPS电池测试完成后再联通网络901:30~03:00安全员观察UPSLoad值，随时通报开机过程中的增长情况需要重点注意的是：开机节奏应尽量防缓，以系统为单位依次开机，防止众多设备同时开机造成负载峰值的叠加。APC英飞UPS电池电量测试时间节点团队工作描述责任人审核人903:00~04:00安全员记录UPSLed面板显示的电池电量剩余值网络组监控设备运行状态，以备电量快速损耗时的大功率设备关机服务器组本部分工作内容详见本文档第5.3节。网络恢复测试时间节点团队工作描述责任人审核人9月网络组测试***电信、联通出口链路测试***外网核心至各入驻单位接入层链路连通性测试***内网核心至宜山路、田林路链路连通性测试***内网核心至接入层链路连通性测试政务网连通性应用恢复测试时间节点团队工作描述责任人审核人9月服务器组测试***外网AD、Exchange、OA系统应用测试***BA网AD、Insight、InfoCenter、消费、门禁系统应用协助戚世春测试***Web网站、园区管理、LIMS系统应用测试***安防系统应用测试***外网AD、Exchange系统应用测试***内网AD、LIMS系统应用协助周涛测试***Web网站系统应用协助谢初南测试***LIMS系统应用协助沈意吉测试***Citrix系统应用测试***信息AD、Exchange系统应用检查所有服务器、存储阵列硬件健康状况，记录健康灯、磁盘灯异常状况9月12:00、18:00服务器组在***上班前最后复查应用2遍国庆假期阶段工作安防临时环境搭建时间节点团队工作描述责任人审核人99:00~12:00安全员、网络组安防服务器、安防存储提前下架并迁移至1F中控机房安防服务器、安防存储连入1F中控机房BA接入层交换机测试安防应用恢复应急资源准备时间节点团队工作描述责任人审核人9月29网络组核心、汇聚交换机备机准备接入交换机备机准备光纤跳线准备双绞线跳线准备9月29服务器组X86服务器备机准备服务器开机光盘准备Windows操作系统光盘准备Oracle安装光盘准备SQLServer安装文件准备Exchange安装文件安准备Sharepoint安装文件准备Insight安装文件准备备用磁盘驱动器、内存条准备数据备份、配置导出时间节点团队工作描述责任人审核人9月网络组所有交换机的配置信息以copy方式导出为txt文档，存放于Laptop中所有安全设备的配置信息以截屏形式导出为png图片，存放于Laptop中917:30~24:009月30日16:00~19服务器组***Exchange数据库由于数据量较大，备份时间较长，故提前在29日晚间即以Ntbackup方式备份至异机***、***所有DC、Exchange服务器提前在29日晚间备份Windows状态信息***外网AD数据库、Exchange数据库以Ntbackup方式备份至异机***BA网AD数据库以Ntbackup方式备份至异机***BAInsight、InfoCenter服务器Ghost备份至异机；Insight、InfoCenter服务器数据库导出备份***消费服务器SQL数据库导出备份至异机***门禁服务器Ghost备份，SQL数据库导出备份至异机***OA服务器Ghost备份至异机，SQL数据库导出备份至异机***外网AD数据库以Ntbackup方式备份至异机***内网AD数据库以Ntbackup方式备份至异机***内网LIMS系统Oracle数据库以Exp方式备份至异机***信息AD数据库、Exchange数据库以Ntbackup方式备份至异机对于上述需要异机存放备份数据的情况，分别在***与***服务器群中选择专用服务器，作为备份数据存放的目的服务器，规划如下表：类别系统备份数据目的服务器外网AD、Exchange、BA网AD、BAInsight、BAInfoCenter、消费、门禁、OA系统备份数据***闲置DellR900外网AD、ExchangeNas-head（172.19.21.11）内网AD、LIMS系统备份数据LocalNAS（172.22.64.35）AD、Exchange系统备份数据台式机关机临检时间节点团队工作描述责任人审核人919:00~19:30网络组测试***电信、联通出口链路测试***外网核心至各入驻单位接入层链路连通性测试***内网核心至宜山路、田林路链路连通性测试***内网核心至接入层链路连通性测试政务网连通性服务器组测试***外网AD、Exchange、OA系统应用测试***BA网AD、Insight、InfoCenter、消费、门禁系统应用协助戚世春测试***Web网站、园区管理、LIMS系统应用测试***外网AD、Exchange系统应用测试***内网AD、LIMS系统应用协助周涛测试***Web网站系统应用协助沈意吉测试***Citrix系统应用测试***信息AD、Exchange系统应用检查所有服务器、存储阵列硬件健康状况，记录健康灯、磁盘灯异常状况设备关机时间节点团队工作描述责任人审核人9月30日19:30~服务器组按照系统划分，依次关闭应用服务器/前端服务器数据库服务器/后端服务器存储阵列域控制器Exchange服务器需先手动停止相关服务后再关机9月30日20:30网络组按照网络划分，依次关闭接入层交换机汇聚交换机旁路安全设备核心交换机干路安全设备路由设备设备下架迁出时间节点团队工作描述责任人审核人9月30日~10月1日服务器组、辅助组拆除通讯线缆、动力线缆，归类放置，其中SCSI线缆留在存储阵列上从靠近IDC后门的前排机柜开始下架服务器并迁出机柜，为后排机柜腾出通道依次为后排机柜下架服务器并迁出机柜对于有导轨的服务器可先仅下架服务器，导轨留待后续工作日拆除10月00:00~07:00网络组、辅助组拆除通讯线缆、动力线缆，归类放置对所有网络设备及安全设备下架并迁出机柜对于有进室光缆的机柜可暂不迁出设备上、下架时每3人1个小组，一共4个小组。饶文和李斌需对服务器设备的下架堆放起到指挥作用。具体下架设备的堆放规划见本文档第5.4节。此部分工作结束后即将IDC机房移交际达公司，开始全面强弱电施工。计划在10月5日17设备迁回上架时间节点团队工作描述责任人审核人10月2日~10月5日服务器组、辅助组根据际达强弱电施工完成进度开始设备的逐步回迁上架工作（机柜已于1日迁回）网络组、辅助组根据际达强弱电施工完成进度开始设备的逐步回迁上架工作（机柜已于1日迁回）信息化设备的的物理部属规划需参见服务器组与网络组在割接准备阶段即完成的机柜规划图与物理连接规划表。通讯线缆恢复时间节点团队工作描述责任人审核人10月12:00~20:00服务器组、网络组依次恢复所有服务器、存储设备到网络设备的通讯线缆连接依次恢复所有服务器、存储设备之间的内部通讯线缆此部分工作由服务器组与网络组成员协同工作动力线缆恢复时间节点团队工作描述责任人审核人10月12:00~20:00服务器组依次恢复服务器、存储设备的动力线缆连接，对于单电源设备，连接UPSPDU；对于双电源设备，则分别连接UPSPDU和市电PDU网络组依次网络设备、安全设备的动力线缆连接，对于单电源设备，连接UPSPDU；对于双电源设备，则分别连接UPSPDU和市电PDU安全检查待际达公司的强弱电施工全部结束后，信息设备的物理上架及线缆连接工作亦告完成，即可开展安全检查工作。时间节点团队工作描述责任人审核人10月5日20:00~安全员对际达公司实施的配电系统（含UPS）进行复查，确认线缆连接无误，确认空开容量、线径大小匹配并满足负载需求再次确认合并后所有负载的功率总和，评估UPS开机条件是否成熟排查全部机柜的负载接入，排查短路等风险隐患设备开机时间节点团队工作描述责任人审核人10月6日08网络组按照网络划分，依次开机路由设备干路安全设备核心交换机旁路安全设备汇聚交换机接入层交换机10月6日10服务器组按照系统划分，依次开机域控制器存储阵列数据库服务器/后端服务器应用服务器/前端服务器1008:00~12:00安全员观察UPSLoad值，随时通报开机过程中的增长情况需要重点注意的是：开机节奏应尽量防缓，以系统为单位依次开机，防止众多设备同时开机造成负载峰值的叠加。网络恢复测试时间节点团队工作描述责任人审核人10月6日12:00~14网络组测试***电信、联通出口链路测试***外网核心至各入驻单位接入层链路连通性测试***内网核心至宜山路、田林路链路连通性测试***内网核心至接入层链路连通性测试政务网连通性应用恢复测试时间节点团队工作描述责任人审核人10月6日14:0服务器组测试***外网AD、Exchange、OA系统应用测试***BA网AD、Insight、InfoCenter、消费、门禁系统应用协助戚世春测试***Web网站、园区管理、LIMS系统应用测试***安防系统应用测试***外网AD、Exchange系统应用测试***内网AD、LIMS系统应用协助周涛测试***Web网站系统应用协助谢初南测试***LIMS系统应用协助沈意吉测试***Citrix系统应用测试***信息AD、Exchange系统应用检查所有服务器、存储阵列硬件健康状况，记录健康灯、磁盘灯异常状况需注意事项机柜使用展望改造后的IDC新增若干机柜，主机房内将合计拥有28个机柜，另有UPS间内屏蔽机柜1台。本着保持现有设备分布习惯，适当扩容服务器机柜空间的基本原则，将28个机柜的使用规划如下：位置机柜编号用途前排左侧7台机柜N1~N7主要放置网络设备及安全设备中间2台机柜W1~W2IDC内互通线缆用头柜右侧4台机柜S1~S4***服务器设备后排右侧7台机柜S5~S11***服务器设备左侧8台机柜S12~S19***服务器设备及部分安全设备UPS间屏蔽机柜SH1涉密类网络及服务器专用机柜编号中：N代表Network（网络）S代表Server（服务器）W代表Wiring（布线）SH代表Shield（屏蔽）机柜的平面布局见下图：弱电布线展望IDC内部机柜互通服务器机柜一共15（后排）+4（前排）=19台，分别命名为S1、S2、……S19；网络机柜一共7台（前排头柜左侧的7台），分别命名为N1、N2、……N7；布线专用头柜共两台机柜，分别命名为W1、W2，其中W1用于铜缆汇聚，W2用于光缆汇聚；服务器机柜每台24根铜缆汇聚到铜缆头柜，6芯多模光缆汇聚到光缆头柜（每两台机柜共用1根12芯光缆及1个12口光配架）；网络机柜中每台12芯多模光缆汇聚到光缆头柜；屏蔽机柜6芯多模光缆汇聚到光缆头柜；网络机柜中N124根、N224根、N32×24根、N424根、N524根、N65×24根、N724根分别汇聚到铜缆头柜；原IDC内部机柜互通所用的多模光缆全部拆除，涉及原所有服务器机柜、新的N4柜、N7柜；原IDC内部机柜互通所用的单模光缆全部拆除，涉及原A1柜、新的N4柜、N7柜；两台头柜仅承担IDC内部机柜互通的汇聚用，最终铜缆头柜使用31个24口配线架，光缆头柜使用9个24口光配架。外部光缆接入N1柜作为BA网核心设备所在机柜，延用原有进室光缆，本次改造仅重新熔接；N2柜、N3柜作为***原内网、***内网核心设备所在机柜，延用原有进室光缆，本次改造仅重新熔接；N4柜中至7F的政务网6芯单模光缆移至N2柜下部；N5柜、N6柜作为***外网核心、***、***汇聚设备所在机柜，延用原有进室光缆，本次改造仅重新熔接；N7柜中至隔壁电话总机房的单模光缆原址保留或移至N6柜；原有联通进室光缆上移至本机柜（N7）顶部；原有政务网进室光缆由N6柜移至N2柜下部；原屏蔽机柜（SH1）至综合楼地下室、5F、7F的单模光缆保留。APC英飞UPS电池电量测试中秋节假期间，在原***负载并入APC英飞UPS后，记录UPSLoad值，并由际达公司协助进行该UPS的电池电量测试。测试起始时间点：所有信息化设备开机完成，并且尚未进行应用测试。测试方法：断开整个IDC的市电接入，由UPS电池为所有负载提供动力支持，以每3分钟记录1次的频率，记录UPSLed面板显示的电池电量剩余值。测试结束时间点：当UPSLed面板显示剩余电量下降至30%时，即恢复UPS的市电接入。测试交付物：通过测试期间记录数据，生成Excel表与二维曲线图，纵轴为电量剩余值，横轴为时间。以图表为素材编制文档后提交***客户。测试分工：积达公司负责UPS市电的开/断，以***IT团队负责人指令为准；***信息安全员负责记录UPS电池电量剩余值，并最终编制测试交付物；网络组与服务器组成员监控设备运行状态，以备电量快速损耗时的大功率设备关机。下架设备堆放整个IDC共有服务器（含存储阵列）设备约120台，网络设备（含信息安全设备）约50台。国庆假期下架后的存放需严格确保设备的物理安全。设备堆放规划如下：选择203会议室与608会议室作为设备堆放场地。203会议室延会议桌堆放一周，合计46个堆位，每堆位堆叠设备不超过两台4U设备，或4台2U设备，该房间将堆放设备约130台。608会议室延会议桌堆放一周，合计20个堆位，每堆位堆叠不超过两台设备，该房间将堆放设备约40台。原则上203会议室放置重型设备，1U类轻型设备运往608会议室存放。203会议室与608会议室为复合地板，为放置地板划伤，需加盖保护材料后方可堆放设备。10月1日所有机柜原则上外迁放置在2F咖啡茶座区，如实在只能移到走廊上的，需注意留出施工材料进出通道。***配合事项部分信息化系统运维工作职能尚未由***承担，且***团队未掌握相关设备的帐号密钥，故需要***及第三方厂商提供相应协助，具体如下：系统协助方配合事项Web网站系统戚世春数据的提前备份，业务应用关闭，设备物理关机，业务应用启动并测试，突发事件的应急处置园区管理系统戚世春LIMS系统戚世春LIMSASP系统中软公司***配合事项部分信息化系统运维工作职能尚未由***承担，且***团队未掌握相关设备的帐号密钥，故需要***科信处及第三方厂商提供相应协助，具体如下：系统协助方配合事项Web网站系统周涛、大汉公司数据的提前备份，业务应用关闭，设备物理关机，业务应用启动并测试，突发事件的应急处置Citrix系统沈意吉LIMS系统谢初南、维斯德公司业务应用恢复后的测试，突发事件的应急处置国庆期间IDC停电***园区拟定10月4日白天停电检修，届时信息化设备尚未到开机时间节点，亦未开始大规模的上架安装，原则上本次停电不对信息化由现场项目经理负责跟踪停电情况，并作为与物业和客户的沟通接口人。国庆期间园区BA环控响应暂停由于国庆期间BA服务器及核心网络设备下架停机，故BA系统的环境调控功能将在假期中完全暂停，园区内所有区域的假期环境控制需求必须在关机前提前设置好。一旦关机后，对任何临时产生的环控需求停止响应。由运维项目经理发出通知，告知各入驻单位在9月30国庆期间园区安防系统保障由于国庆期间安防系统无法承受长时间中断，亦无法承受长时间的视频数据缺失，故BA核心交换机、安防服务器，及存储阵列需保证运行，即使中断亦严格控制时长。为确保实时监看以及数据存储，考虑到BA网物理光缆汇聚到IDC机房，故BA核心交换机无法外迁，必须原地下架并保证持续开机。同时，安防服务器及存储阵列在9月24日白天移至1应急预案网络设备开机故障CISCO设备开机时，若发生内存问题导致设备无法正常启动，立刻利用备件进行更换，保证设备的正常启动。若发生CISCO设备板卡故障，则利用备机上的板卡进行替换。CISCO设备启动时无法加载IOS时，从外部导入IOS。当Radware设备开机发生故障时，利用已配置好的Array进行替换，保证ISP接入。当PIX开机发生故障时，直接去除PIX设备，把Radware和6509连接上，把PIX上的NAT映射移至6509上去，从而保证网络的联通。当***外网4507汇聚设备开机发生故障时，直接利用原***内网4507设备进行替换，同时，修改配置，保证网络的可用性。当***外网4507汇聚设备开机发生故障时，直接利用原***内网4507设备及3550交换机来进行替换，满足原有光电接口的需求，保证网络的可用性。当BA核心开机发生故障时，利用原有两台老BA核心以及1台3550交换机进行替换，可以还原成原先架构，保证网络的可用性。安全设备开机故障安全设备可以分为***内外网设备和***内外网设备。其中***的外网设备有IPS、BLUECOAT、UTM、数字认证、安达通VPN、Kill邮件网关、Atomix短信网关。由于IPS、UTM直接接入骨干链路中，当其发生意外而无法正常启动时，立刻对其做下线处理，在骨干链路中去除此设备，保证网络的连通性。由于BLUECOAT作为流控设备具有BYPASS功能，所以，当设备无法正常启动时，网络数据将透传过设备，不会对网络的连通性造成影响。安达通作为旁路VPN设备，当发生开机故障时，可以对设备做下线处理，将不会对主要业务产生影响。数字认证设备作为旁路接入提供对***原内网的接入认证。当设备启动发生意外而无法应用时，可以对设备进行修复操作，设备的下线不会对主要业务产生影响。Atomix短信网关作为旁路设备，当设备开机发生故障时，可以对其进行下线修复，不会对主要业务造成影响。***内网设备有网神防火墙、内网审计系统。当网神防火墙和审计系统出现开机故障时，可以对其进行下线处理，不会对主要业务产生影响。***外网设备有FortiGate、MAXNET、漏洞扫描、入侵检测、WebsenseRiskFilter。两台FortiGate互为备份HA备份，一旦同时发生设备故障，可将***外网服务器网段VLAN终结迁移至PIX上实现，并相应修改6509配置。MAXNET作为流控设备，具有BYPASS功能，出现开机故障时，将可以透传网络流量，不影响网络的可用性。漏洞扫描、入侵检测作为旁路设备，出现故障时，可以进行下线处理，不影响主要业务。WebsenseRiskFilte作为邮件网关，出现故障时，可启用原作为备机的美讯智邮件网关。***内网设备有Iblock、安全审计、数据库审计。安全审计和数据库审计设备作为旁路设备，在发生开机故障时，可以对其进行下线处理。Iblock虽作为干路设备，但以透明模式部属，故在发生开机故障时，可对其进行下线处理，不影响主要业务。x86服务器开机故障在***与***服务器群中分别选择两台x86架构服务器作为整合割接过程中的服务器备机。***选择闲置的DellR900服务器两台。***选择闲置的HPDL385与DL380服务器各1台（原内网DC与原Pubnas）。一旦有x86服务器因严重硬件故障或系统故障导致无法恢复，则启用上述备机。应用恢复故障***应用BAInsight系统首先排除发现的故障，如若故障无法排除，则执行以下应急预案：对Insight主服务器和InfoCenter服务器做Ghost备份，异机保存。应急恢复时，首先在Insight备服务器上做Ghost恢复，并迁移USB-key。然后对InfoCenter服务器做Ghost恢复。作为备用方案，备份两台主用服务器的数据库，异机保存。应急恢复时，如Ghost恢复后仍然无效，启用Insight备服务器，需重新安装Windows2000server系统，然后重新安装Insight软件。针对InfoCenter服务器，需重新安装Windows2000server系统，然后安装SQLServer数据库，连接Insight服务器，最后对其进行数据恢复，从而恢复正常业务。门禁系统首先排除发现的故障，如若故障无法排除，则执行以下应急预案：首先对原主门禁服务器做好系统镜像，并把其他盘符中的资料，备份和系统镜像拷贝出来；若主门禁服务器开机出现故障时，直接利用主门禁服务器的系统镜像对备门禁服务器进行系统还原，并把主门禁服务器中的相关资料拷贝到备门禁服务器中，导入数据库备份，并修改备门禁服务器的IP地址。消费系统首先排除发现的故障，如若故障无法排除，则执行以下应急预案：首先保证两台服务器之间数据的同步，在施工前做一次最终的数据备份。应急恢复时首先切到备份服务器上，业务恢复正常。作为备用应急预案，需对消费数据做异机备份，如切换备用服务器后仍然存在故障，需重新安装消费软件，重新安装SQLServer2000数据库，最后将之前备份过的数据进行导入恢复，最后运行消费软件，恢复正常业务。域控制器首先排除发现的故障，包括：电源模块检查，服务器状态指示灯检查，RAID卡挂载检查，磁盘状态检查。软件部份主要包括：安全模式及最后一次正确配置模式。同时还原数据的前提是已经备有最近一次的完整、干净的数据备份。如若故障无法排除，则执行以下应急预案：***域控制器包括三个系统：第一部分为原内网域控，机器名APMDC1环境为单结点架构。一旦出现意外情况导致机器无法正常启动，首先从硬件环境上判断，是否电源各项指示灯正常，硬盘RAID的挂载是否正常。然后试图进入安全模式能否自行恢复。如果安全模式也不能进入，则需要修复安装，如修复安装也无效，只能搭建新环境，然后重新导入最新的数据备份。第二部份为外网域控，机器分别为new-dc1和new-dc2。该环境具有双结点环境，如果BDC机器无法正常动，不影响正常使用，因为PDC上具有域控的五个主要角色。因此当BDC不论何种原因不能正常启动时，都不会对大系统环境造成影响。排障的过程分为硬件与软件部份，首先从硬件环境上判断，是否电源各项指示灯正常，硬盘RAID的挂载是否正常。然后试图进入安全模式能否自行恢复。如果安全模式也不能进入，则只能搭建新环境。将原有域的账号重置，并将新装机器IP与机器名设为原机器一致，加入域后即可。域环境会自动将域的活动目录信息传递到新机器上。如果是主域控不能正常启动。硬件排错过程同上，由于主域控上运行了5个角色，因此需要在BDC上转移五个角色，由辅域控来担当主域控的角色，并将原PDC计算机账号重置。由于主域控上主要应用业务是DNS解析，因此可首先将BDC的IP改成PDC的IP地址，让客户机能有正常DNS解析与身份验证功能。然后将损坏的PDC重新安装。并加入域即可，最后一切正常重新将5种角色还给PDC。第三部分是BA网域控，机器分别为jiance-lims和jiliang-lims。该环境具有双结点环境，应急排障与恢复过程同外网域控的双节点环境一致。Exchange邮件系统首先排除发现的故障，包括：电源模块检查，服务器状态指示灯检查，RAID卡挂载检查，磁盘状态检查。软件部份主要包括：安全模式及最后一次正确配置模式。同时还原数据的前提是已经备有最近一次的完整、干净的数据备份。如若故障无法排除，则执行以下应急预案：中心的邮件系统目前是单节点环境，分为前端与后端二个角色，互相之间没有任何冗余，也就是说二台机器之间有任何一台机器出现故障都就有可能让整个邮件系统出现瘫痪。当前端出现问题时，由于前端只是提供用户的访问等角色，当出现问题时首先需要从硬件上判断入手，检测硬件环境是否正常，能否进安全模式、是否可修复安装等。假如机器是硬件问题引起或是软件问题引起的严重崩溃。此时唯一办法只能是重新搭建新环境，然后启用备份还原。当后端出现问题，由于后端主要是数据库角色，因此出现故障时首先从硬件环境上判断，是否电源各项指示灯正常，硬盘RAID的挂载是否正常。然后试图进入安全模式能否自行恢复。如果安全模式也不能进入，则需要修复安装，如修复安装也无效，只能搭建新环境，然后重新导入最新的数据备份。OA系统首先排除发现的故障，如若故障无法排除，则执行以下应急预案：首选对OA服务器做Ghost备份。其次备份数据库，将备份数据异地保存。应急时只需对服务器做Ghost恢复，从而恢复正常业务。作为备用方案，需要对OA服务器的数据库做好完整的异机备份。当以上Ghost方案执行后仍然存在故障，则考虑对该服务器重新安装Windowssever2003系统，在域控服务器上重置apmoa-1这个域账户，然后对OA服务器加域（以上两个步骤需要域控服务器的正常运行），安装IISwindows组件，安装SQLServer2005数据库，安装MicrosoftOffice2007软件，安装和部署MicrosoftOfficeSharepointServer2007，然后部署OA系统平台，最后后对Sharepoint做数据库恢复，从而恢复正常业务。***应用内网应用LIMS数据库首先排除发现的故障，如若故障无法排除，则执行以下应急预案：LIMS数据库采用两台Sun小型机组成SunCluster，提供基于Oracle9i的数据库服务，基于小型机硬件架构及Solaris操作系统的稳定性，暂不考虑两台小机硬件及系统同时故障的可能性，仅从数据库角度进行应急预案。当数据库无法启动时，依次查看检测ORACLE后台进程ps-ef|grepora，监听器后台进程ps-ef|greptns，网络服务端口netstat–an|grep1521。尝试mount并opendatabase，尝试startupmount。查看数据库空间使用情况。到/u01/admin/orcl/bdump目录下，通过tai