基础设施应急演练方案

1、2006年机房基础设施 应急演练方案金融信息管理管理中心基础设施组二零零六 年 九 月 三十 日基础设施应急演练（实战）工作安排一、基础设施应急演练时间10月 14 日 16： 00 18： 00二、应急演练（实战）内容模拟机房市电供电中断三、应急演练过程1、准备工作机房供电系统图、机房钥匙、配电系统维修工具、对讲机、应急灯、UPS操作手册、应急联系电话表。全面检查计算机机房供电系统状况，重点确保UPS 主机系统和电池组等处于良好运行状态。与配电室联系好， 保证演练期间配电室无维修或其它操作， 电力供应稳定。通知 UPS 供应商或维护商做好相应备件及技术支持准备，以防止UPS 后备电池因维护保

2、养不善造成其使用寿命缩短或 UPS 主机在进行逆变切换时发生故障。演练前对网络系统及应用系统进行一次系统备份和数据备份。2、应急演练应掌握的数据由于目前UPS系统成在机房的负荷较大，目前 UPS有效后备时间约2-2.5 小时。经与相关组了解业务系统数据应急备份和设备正常关闭需要时间约1.5 小时。机房计算机设备允许最高环境温度33 、应急操作过程3 首先，接到应急演练小组演练开始的命令，在D1配电柜将UPS供电总电源切断。在供电电源停止后，每十分钟对UPS供电情况进行一次巡检，检查内容主要是UPS 的负载情况、输出的电压电流、电池后备时间、电池运行情况，并做好记录（记录表样式附后） 。随时联系

3、配电室人员，了解供电恢复时间，并向领导小组汇报。当停电半小时后未得到准确恢复送电时间， 通知网络组、 主机组及其他相关部门，做好停机准备，停部分设备以减少用电负荷。当停电一个小时后仍未得到准确送电时间或者配电室通知短时间内故障无法排除，向领导小组汇报， 由领导小组通知网络组、 主机组及其他相关部门关闭机房全部设备。如果停电范围较大， 涉及机房空调市电停止， 还要有专人对机房温升情况进行监控并记录（记录表样式附后） 。当机房温度达到 33 时，向领导小组汇报， 由领导小组通知网络组、 主机组及其他相关部门关闭机房相关设备，随着温度的升高直至关闭全部设备。上述 UPS 电源中断和机房空调电源中断两

4、种情况同时发生时，只要其中一个条件不能满足机房运行要求， 就要向领导小组汇报， 由领导小组通知网络组、主机组及其他相关部门关闭机房全部设备。送电后的恢复工作：市电恢复正常供电后，机房管理员检查UPS系统运行情况和电池组充电状况、 空调系统运转情况， 并向领导小组进行 报告。、应急演练工作基础设施组人员分配4 在演练期间要统一服从指挥李学平：主要负责全面协调工作李 坤：主要负责八层机房内温度的记录玄华伟：负责B1 UPS运行情况的记录张雯华：负责输入应急演练数据记录对领导小组的汇报主要向康主任汇报5、在应急演练市电断电场景中发生异常故障的处理、单台UPS主机发生故障的处理单台UPSi机发生故障时

5、，应立即将该UPS的负荷切入热备份的梅兰 50kvaUPS主机。切入后做好以下工作：（ 1）随时监控热备份主机的运行情况；（ 2）立即对发生问题的主机进行维修，如短时间内维修好后，应立即投入运行，退出热备份主机的负荷。（3）监视其他主机运行情况，当其他UPSi机电池电量也显示不足时，应立即停机，避免两台UPSi机的负荷全部切入热备份 UPSi机, 导致热备份主机的超负荷将使热备份主机宕机， 从而导致更大范围的 断电。手动切换UPS主机负载由正常转到手动旁路的步骤:索科曼UPSa、在控制菜单上选择“ ECO模式b、确认L1及L4号灯已经亮起c、将手动旁路开关Q5闭合断开Q3输出开关UPS将de、

6、将电池隔离开关F1断开f、将输入开关Q1 （及旁路输出开关Q1A断开梅兰UPS.a、按住控制面板上的“逆变器停机键（9）三秒钟；b、控制面板上绿色的“逆变器”指示灯（4）熄灭；c、绿色的“静态旁路”指示灯（3）亮；d、逆变器停止运行；e、如果电源二满足切换条件，逆变器停机，并将负载切换到电源二；f、如果电源二不满足切换条件，逆变器不停机，在显示器上显示信息 “MAINS 2 OUTSIDE TOLERANCES , TRANSFERDISABLED （电源二超限，不能切换）；逆变器等发生故障时也会自整流器、主机电池电量不足、UPSS .动倒入旁路，所以如有一台已经倒入备份的 upsM要避免其他

7、ups负 荷倒入，否则和发生热备份UPS过负荷停机。手动切换UPS主机负载由手动旁路转到正常的步骤：索科曼UPSa、将电池隔离开关F1断开b、将输入开关Q1 （及旁路输出开关Q1A断开（在30s内完成）c、确认L1及L4号灯已经亮起d、将UPSS出开关Q3断开e、将手动旁路开关Q5闭合（在30s内完成）f、再次检查操作面板指示灯是否正常梅兰UPS .、闭合上线的开关（在低压配电盘上）以便为电源一和电源二供电；ab、闭合电源一的输入开关Q1,给系统加电；检查控制面板上绿色指示灯（1）亮；此时整流/充电器自动启动；c、闭合电源二的输入开关 Q4S;检查控制面板上绿色的指示灯（3） 和（5）亮；d、

8、闭合逆变器输出开关Q5N;e、闭合电3&断路器QF1;断开旁路开关Q3BP;f、按下控制面板上的“逆变器启动”键8;绿色“逆变器”指示灯（4） 闪烁；逆变器启动，然后，如果选择系统在在线方式，如果电源二满 足切换条件，负载切换到逆变器供电，否则，如果选择系统运行在“节能” 方式， 则负载继续维持由旁路供电； 绿色 “静态旁路” 指示灯 （ 3 ）熄灭； 绿色的“逆变器”指示灯（4）在在线方式时亮，或在“节能”方式时闪烁；g、检查ups参数是否正常；运行声音有无异常；、UPS电池发生过热等异常现象的处理UPSfe池发生过热等异常现象的主要原因是电池放电电流过大。应检查UPS负载的变化，如果负载变

9、化不大，则主要原因是电池的连线有松动、 电池内部极板有短路情况。 处理此故障首先将该负载切入热备份ups然后将此电池组的up砌入维修旁路（切入方法如上题）。维修方法：对松动的线予以紧固，如电池板松动，并且是极个别的电池，可用备用电池更换。维修后检查无问题，尽快投入运行，避免其他UPS主机发生问题后无备份主机。、UPS电池放电时间较快如何处理如发现 ups 主机电池放电较快， 应立即报告领导小组， 由领导小组通知主机组等停部分机房设备，确保重要设备的连续供电6、应急演练过程中发生异常故障的处理（发生真实故障的处理）发现任何异常情况要及时向应急演练领导应急演练过程中，、.小组报告，由应急演练领导小

10、组决定是否中止应急演练；、 在应急演练过程中预先准备好灭火器材， 防止出现大电流放电出现着火；、在UPS电池出现过热时应及时终止演练并恢复市电供电，以防意外发生；、出现电池及电缆接头过热情况要及时处理，恢复市电，更换接头 等。、演习过程中如发现单台 UPS电源发生故障，应及时倒入热备份UPSfe源主机供电，同时恢复其他 UPS电供电，确保信管中心机房 供电的安全。突发市电停检UP运行情每十分中up进每十分中记录一对机房一次记机房温度、湿统进行一次正常行确与大楼配室联机房温度超 2。打开机房通道门使用电风扇，减机房温短时间能否恢供是否大 33做好恢复送电的通知领导小组准宕主机、网络、应各组进入宕

11、机程，并确认系统理员密主机、网络、应各组进入宕机市电恢复后，对程，并确认系统源进行检恢复送电后，检理员密空调运行情通知领导小组，据要求，逐台宕UP主机进行机，来电后进行复送电市电中断应急演练处置流程图UPS 异常运行记录时输出电输出电电池放电电电池后备时每十分钟记录一次确认签字:机房温湿度记录表主机1主机2网络机时湿温湿温温湿每十分钟记录一次确认签字:市电中断后主机组、网络组、应用组系统运行确认表主机网络应用时系统确系统系统确确电状电状签电状签签每十分钟进行一次确认计算机机房场地进水（模拟）演练安排一、应急演练时间11 月 13 日之前二、应急演练内容计算机机房场地发生漏水，对计算机系统运行造

12、成严重影响。三、应急演练过程1、准备工作：吸水设备、水桶、拖布及地板吸盘等水灾抢救用品。计算机机房供电系统线路图纸、了解机房漏水的风险点。2、机房可能发生大范围漏水的部位：机房空调（海洛斯）的加湿用的供水水管（位于机房大门延机房北侧墙至空调机组） 、除湿的下水和吸顶式空调的冷凝水。3、演练操作步骤（ 1 ）领导小组宣布机房防水演练开始。（ 2 ）发现进水，渠道：接到计算机机房管理人员报告场地进水或计算机机房场地监控系统（漏水报警器报警）发现场地进水，执行小组（机房组）立即检查进水部位，查明进水原因，掌握危害程度，并与大楼后勤服务部门联系，请求寻找进水原因。（ 3 ）执行小组向协调小组报告。（

13、4 ） 协调小组向领导小组报告计算机机房场地进水原因、 危害程度。5）同时为减少损失，通知业务组做好进行数据备份、业务系统和电子设备关闭的操作准备工作 （ 6 ）大楼后勤服务部门负责组织疏通排水通道、清除计算机机房周边积水、切断计算机机房进水水源。 （ 7 ）协调小组在确保无触电危险的前提下，组织人员用吸水工具抽吸场地内积水，控制进水影响范围。（ 8 ）领导小组根据进水危害程度，命令业务组部分关闭或全部关闭业务系统和电子设备后， 由机房管理员切断部分或全部场地电源， 防止危害进一步扩大。（1） 进水危险解除后，机房管理员检查计算机场地受灾情况和电力线路、网络线路健康情况，进行计算机机房去湿等环

14、境恢复，并向领导小组报告。（2） 领导小组根据计算机机房环境恢复情况，命令业务组部分恢复或全部恢复业务系统和电子设备运行。（3） 机房进水应急演练结束。4、应协调的部门大楼的后勤部门 -提供吸水工具，并配合吸水捷通公司 负责漏水点的修复机房火灾（模拟）演练安排一、应急演练时间11 月 13 日之前，演练过程约需1 个小时二、应急演练内容计算机机房发生火灾，对人的生命和计算机系统运行造成危害。三、应协调的部门信息中心、保卫部门和服务局设备处相关人员参加。四、前期准备工作（一）手持计算机机房灭火器、手持应急照明灯具等火灾抢救用品。（二）确保气体灭火系统运行稳定，并将启动方式设置为手动。五、演练步骤

15、机房火灾演练开始。火情发现。执行小组（机房组）接到机房管理人员的火情报告，或计算机机房场地监控系统发现火情，或大楼消防监控中心发现火情。执行小组（机房组）在排除误报和在确保生命安全的前提下，准确掌握火情部位、灾情程度，并向协调小组报告。协调小组向领导小组报告计算机机房发生的火情和危害程度。经领导小组同意， 执行小组揿动火灾报警按钮， 发出声、 光报警信号，组织人员撤离计算机机房。分以下两种情况进行处置：（ 1 ） 在火情未蔓延时，领导小组命令执行小组切断火灾部位电源、利用手持机房灭火器具进行灭火；） 在火情蔓延时， 领导小组命令执行小组切断计算机机房全部电2（源，并在确保人员全部撤离机房后，关

16、闭机房所有通道门、启动气体灭火系统进行灭火。火情解除后， 执行小组检查计算机机房空气质量， 掌握受灾情况和电力线路、网络线路等健康情况，并向协调小组、领导小组报告。领导小组根据计算机机房环境情况， 命令执行小组恢复部分或全部电源供应、业务组部分恢复或全部恢复业务系统和电子设备运行。机房火灾演练结束。六、演练中发生故障及相关问题的处理1、机房消防的疏散通道位置机房在疏散通道位置已经贴有消防疏散图，在发生火灾时可按疏散图的逃生通道疏散， 另外在每个疏散通道门上都标有安全出口指示灯。2、误按了放气按钮怎么办？在误按了放气按钮时，可在30s 内按住旁边的止喷按钮，并等待专业人员拿钥匙进行复位。 （详见

17、烟烙烬气体灭火使用说明）3、机房发生火情，拉了气体释放开关不释放气体怎么办？这种情况的原因是气体灭火的控制屏或释放阀发生故障， 可立即到气瓶间拉下（主机房分区8#、 9#气瓶，网络机房7#、 8#气瓶）上手动释放开关4、中心机房气体灭火的防火分区主要有两个防火分区：一个是主机房另一个是网络机房和配电间、气体喷放的形式5 是全淹没式，在机房的顶部和地板下面都放有气体灭火喷头6、气瓶内气体的主要成份气体的主要成份是氮气和惰性气体，对人体无危害。附：烟烙烬气体灭火系统使用说明烟烙烬气体灭火系统控制器面板图区控区控制器和 21值班室有两 台烟烙烬气体灭火系统控制器，分为区包括：区包括：主机房、服务 器

18、机房、介质库、备用间。2制器。1空调配电室、机要通讯机房、 网控中心、网络设备机房。烟烙烬气体灭火系统控制器使用说明表指示及操作 系统状态只有绿色电源指示灯亮，其它指示灯都不亮， 系统运 系统正常行正常火灾报警 探测器检测到火灾时，控制器发出报警信号（报警指示灯 发出,此时值班人员应作如闪烁红色光亮，警报器鸣响）.下工作1 即通知被保护区内人员撤离2 认火灾报警位置及是否为误报3 确有火灾发生应立即通知主管部门4 做好详细记录5 按报警静音键，使火灾警报静音，此时报警静音示灯发出黄色亮光系统恢直到做好安全工作之前，不要进入保护区如被保护区内还有烟雾，不能复位按系统复位键使控制器复电源故如果交流

19、电源停电或压欠压， 电源指示灯熄灭， 电故障指示灯亮，蜂鸣器发出音，立即通知维修人系统故系统发生故障，其指示灯发出黄色闪烁光亮，蜂鸣发出声音，立即通知维修人员回路故回路发生故障，其指示灯发生黄色闪烁光亮，蜂鸣发生声音，立即通知维修人故障静事故障蜂鸣音停止，按故障静音键，故障指示灯发黄色亮手动装置使用方法:确认火灾是否存在，正确选择使用手动启、停装置。若有下列情况发生，立即按下并按住紧急停止按钮（见左图）通知值班人员复位系统：、防护区内火灾很小，没有必要启动气 体灭火1系统，可使用手持灭火器灭火。2、防护区内的人员未及完全撤离现场。3、联动系统故障产生误动作紧急停止按钮若某个防护区内突然发生严重火灾，火情失控，应立即按下对应此防护区的紧急启动按钮或按下相应防护区控制器手动放气按钮。紧急启动按钮注意事项：为确保本系统的安全使用，当保护区内有人员工作时应将气体灭火自动转换开关放置在手控制盘上的手动 /放置;动位置当保