网络实战演练方案模版

1、.XXXX分公司生产网络系统实战演练方案模版第 0.07 版XXXX技术管理部XXXX信息总中心二一二年二月;.版本控制信息版本日期拟稿和修改说明本文档中的所有内容为 XXXX股份有限公司的机密和专属所有。 未经 XXXX股份有限公司的明确书面许可， 任何组织或个人不得以任何目的、 任何形式及任何手段复制或传播本文档部分或全部内容。;.目录1演练场景说明 .12演练准备工作 .23演练风险评估 .24演练场景一：上联线路主备切换与路由器宕机演练.34.1演练思路 .34.2演练步骤 .34.2.1演练细则 .34.3演练的应急处理步骤 .64.3.1操作步骤 .64.3.2操作细则 .65演练

2、场景二：内外网核心交换机宕机演练.75.1演练思路 .75.2演练步骤 .75.2.1演练细则 .75.3演练的应急处理步骤 .115.3.1操作步骤 .115.3.2操作细则 .116演练场景三：主备防火墙宕机演练 .116.1演练思路 .116.2演练步骤 .116.2.1演练细则 .126.3演练的应急处理步骤 .136.3.1操作步骤 .136.3.2操作细则 .137演练场景四：机构接入线路主备切换与设备演练.137.1演练思路 .137.2演练步骤 .147.2.1演练细则 .147.3演练的应急处理步骤 .167.3.1操作步骤 .167.3.2操作细则 .168演练场景五 :

3、网控器演练 .168.1演练思路 .168.2演练步骤 .178.2.1演练细则 .178.3演练的应急处理步骤 .178.3.1操作步骤 .17;.8.3.2操作细则179演练场景六 : 线路运营商传输设备演练199.1演练思路199.2演练步骤209.2.1演练细则209.3演练的应急处理步骤209.3.1操作步骤219.3.2操作细则21;.1 演练场景说明依据分公司生产网络系统架构现况，本演练方案模版设计了六个演练场景，各演练场景的演练内容、演练目标与预期结果如下表所示：演练内容演练目标适用范围预期结果场景一：上联验证分公司连接信息总中心、北京信所有分公司路由器宕机及息中心的二条广域网

4、专线主备机制的有效。断线演练有效性。场景二：内外验证内、外网任何一台核心交换机宕采用五层网络架构的分公司网交换机宕机机对机构 CUPS 系统 ZNAP 服务器有效。演练之间网络连接冗余机制的有效性。场景三：防火验证主备防火墙之间 Failover 切换机所有分公司有效。墙宕机演练制的有效性。所有分公司场景四：机构(主备引擎切换演验证机构主备线路接入主备切换机制练步骤只适用于接入网络宕机有效。的有效性。部署双引擎如思及断线演练科 7600 系列路由器的分公司 )验证当分公司网控器拨号下联卡故障场景五时，通过当地运营商将本地POS机主所有分公司网控器 PRA 线叫号码映射至总中心 400 号码后，

5、由有效。路异地灾备切中心进行远程统一灾备，以此来确认换分公司拨号下联卡高可用机制的有效性验证当分公司生产网络出现突发故障导致本地网络彻底瘫痪，或机构上联场景六分公司的两根专线彻底中断，交易数已经部署了 3G灾3G 灾备切换据无法上送时，使用分公司与机构间有效。备线路的分公司演练部署的 3G无线网络进行通讯，实现当地的机构与商户联机交易的快速恢复。所有分公司( 关闭传输设备演练场景七：验证线路运营商传输设备电源主备切主光路演练与关传输设备演练闭传输设备主电有效。换有效性、双上联光路切换的有效性。源演练仅在运营商传输设备支持时适用 )设定的场景为可能出现的故障，通过演练验证网络的冗余性或应急方案可

6、行；1、 演练设备为银联运营生产相关的网络设备，包括防火墙、路由器、交换机、网控器及其;.它网络设备；2、 所有必须的演练场景应在一个演练计划内完成，但可安排在一个或连续的多个窗口内实施。3、 各分公司应依据附件5： 2013 年分公司演练场景建议表选择演练场景，除上述演练场景之外，分公司可依据本单位生产网络实际情况，进行演练场景的补充。2 演练准备工作1、 对所有演练相关的网络设备(模块 )准备好现场应急备件；2、 生产网络系统所有网络设备的配置文件须在设备本地存盘，并备份至TFTP 服务器。3、 在演练之前，向信息总中心提供网络系统的相关信息，主要有路由信息、设备连接信息、机构线路信息和设

7、备配置信息等，同时进行生产网络系统健康检查，参见附件3 ：分公司生产网络系统演练准备检查项目表。3 演练风险评估演练场景演练内容影响上 联线 路主备 切导致总中心交易服务器和分公司机构之间丢包，但TCP场景一换 与路 由器宕 机连接不中断或中断后自行恢演练复。导致总中心交易服务器和分公司机构之间丢包，但TCP内 外网 核心交 换连接不中断或中断后自行恢场景二复 ; 导致网控器上联TCP 主机宕机演练备卡切换 ,交易自动恢复、网控器下联 TCP 卡交易受影响。导致总中心交易服务器和分场景三主 备防 火墙宕 机公司机构之间丢包，但TCP演练连接不中断或中断后自行恢复。机 构接 入线路 主导致总中心

8、交易服务器和分公司机构之间丢包，但TCP场景四备 切换 与设备 演连接不中断或中断后自行恢练复。本次演练将分公司拨号交易网控器 PRA 线路切换至总中心灾备环境，影场景五响范围为分公司网控器拨号异地灾备切换交易场景六3G 灾备切换演练导致总中心交易服务器和分公司演练机构之间丢包，但风险评估1 、 宕机后无法正常重启2 、 宕机重启后，部分模块无法工作3 、 宕机后线路主、备机制无法生效1 、 宕机后无法正常重启2 、 宕机重启后，部分模块无法工作3 、 宕机后交换机/防火墙主备机制与路由系统冗余机制无法生效 4 、 机构连接中断后无法自行恢复5 、 网控器上联TCP 卡主备须手工回切1 、 宕

9、机后无法正常重启2 、 宕机重启后，部分模块无法工作3 、 宕机后防火墙主备机制无法生效4 、 机构连接中断后无法自行恢复1 、 宕机后无法正常重启2 、 宕机重启后，部分模块无法工作3 、 宕机后线路主备机制无法生效4 、 机构连接中断后无法自行恢复1 、 运营商实施号码映射时短暂影响拨号 POS 交易1 、 机构连接中断后无法自行恢复;.TCP 连接不中断或中断后自行恢复。导致总中心交易服务器和分2、 宕机后无法正常重启演练场景七： 传输公司机构之间丢包，但TCP3、 宕机重启后，部分模块无法工作场景七 :连接不中断或中断后自行恢4、 宕机后防火墙主备机制无法生效设备演练复5、 机构连接中

10、断后无法自行恢复4 演练场景一：上联线路主备切换与路由器宕机演练4.1演练思路1、先后关闭上联信息总中心、北京信息中心二台路由器上的广域网接口，观察路由能否自动切换，并通过长ping 机构地址来记录路由切换时间。2、先后关闭上联信息总中心、北京信息中心二台路由器的电源，观察路由能否自动切换，并通过长ping 机构地址来记录路由切换时间。要点：设备宕机演练前，须确认广域网线路、网络路由、相关交易均已恢复至正常。4.2演练步骤步骤演练内容第一步上联北京信息中心线路断线演练第二步上联信息总中心线路断线演练第三步上联北京信息中心路由器宕机演练第四步上联信息总中心路由器宕机演练4.2.1演练细则第一步：

11、上联北京信息中心线路断线演练序号操作内容操作人复核人1通知成员机构、信息总中心即将进行上联线路的断线演练分公司总中心登录二台内网核心交换机执行如下命令：Show ip route 2Show ip route 分公司总中心确认 /13 、 /13、 /24网段路由源自上联北京信息中心路由器、/13网段路由源自上联信息总中心路由器。3通知信息总中心网络值班岗登录CUPS系统 ZNAP服务器，开启对分分公司总中心公司辖内机构主机地址的长Ping4通知信息总中心网络值班岗登录收单系统PNA

12、P服务器，开启对分分公司总中心公司辖内网控器上联卡地址的长Ping5断开分公司上联北京信息中心广域网线路（拔出对应网线）分公司总中心6信息总中心网络值班岗观察Ping包丢包情况分公司总中心7观察网管平台应有 XX 分公司至北京信息中心线路中断、RPING不分公司总中心;.通的告警8信息总中心网络岗通知交易监控岗，检查分公司交易情况；同时分总中心公司自查交易情况分公司9恢复分公司上联北京信息中心广域网线路（插回网线）分公司总中心线路恢复后执行如下命令：10Show ip ospf nei分公司Show ip bgp summary确认该设备和相邻设备的动态路由邻居关系已经正常建立登录分公司二台内

13、网核心交换机，执行如下命令：Sh ip route 11Show ip route 分公司总中心确认 /13网段路由源自上联北京信息中心路由器、/13网段路由源自上联信息总中心路由器第二步：上联信息总中心线路断线演练序号操作内容操作人复核人登录二台内网核心交换机执行如下命令：Sh ip route 1Show ip route 分公司总中心确认 /13 、 /13、 /24网段路由源自上联北京信息中心路由器、/1

14、3网段路由源自上联信息总中心路由器。2通知信息总中心网络值班岗登录CUPS系统 ZNAP服务器，开启对分总中心公司辖内机构主机地址的长Ping分公司3通知信息总中心网络值班岗登录收单系统PNAP服务器，开启对分总中心公司辖内网控器上联卡地址的长Ping分公司4断开分公司上联信息总中心广域网线路（拔出对应网线）分公司总中心5信息总中心网络值班岗观察Ping包丢包情况分公司总中心6观察网管平台应有 XX 分公司至信息总中心线路中断、RPING不通总中心的告警分公司7信息总中心网络岗通知交易监控岗，检查分公司交易情况； 同时分总中心公司自查交易情况分公司8恢复分公司上联信息总中心广域网线路（插回网线

15、）分公司总中心线路恢复后执行如下命令：9Show ip ospf nei分公司Show ip bgp summary确认该设备和相邻设备的动态路由邻居关系已经正常建立登录分公司二台内网核心交换机，执行如下命令：Sh ip route 10Show ip route 分公司总中心确认 /13网段路由源自上联北京信息中心路由器、/13 网段路由源自上联信息总中心路由器第三步：上联北京信息路由器宕机演练序号操作内容操作人复核人1通知信息总中心、辖内各成员机构，演练开始分公司总中心登录二台内网核心交换机执行如下命令：2Sh ip

16、route 分公司总中心Show ip route ;.确认 /13 、 /13、 /24 网段路由源自上联北京信息中心路由器、/13网段路由源自上联信息总中心路由器。3通知信息总中心网络岗， 在 CUPS系统 ZNAP服务器上开启到五家机分公司总中心构主机的长 ping4关闭上联北京信息中心路由器电源（如双电源设备， 两路电源都要分公司总中心关闭）登录内网核心交换机执行如下命令：5Show ip route 分公司总中心Show ip route 144.8.0.

17、0确认上述二条路由均源自上联信息总中心路由器6观察长 ping 的丢包情况分公司总中心7观察网管平台应有内网核心交换机报到该路由器RPING不通、OSPF分公司总中心NEIGHBOR DOWN的报警三层网络结构的分公司，需检查场景二/ 步骤一的第 8 步7打开上联北京信息中心路由器的电源（如双电源设备， 则两个电源分公司总中心都打开）8通过 Console 口监测、 记录路由器重启情况，观察路由器重启有无分公司总中心异常，如有异常，则通知信息总中心网络岗路由器重启完成后，执行如下命令：9Show ip ospf nei分公司总中心Show ip bgp summary确认该设备和相邻设备的动态

18、路由邻居关系已经正常建立观察长 ping 的丢包情况三层网络结构的分公司，需检查场景二 / 步骤一的第 12、 13 步登录分公司二台内网核心交换机，执行如下命令：Sh ip route 10Show ip route 分公司总中心确认 /13网段路由源自上联北京信息中心路由器、/13网段路由源自上联信息总中心路由器第四步：上联信息总中心路由器宕机演练序号操作内容操作人复核人通知信息总中心网络岗， 在 CUPS系统 ZNAP服务器上开启到五家机构主机的长 ping1关闭上联信息总中心路由器电源（如双电源设备， 两路电源都要

19、关分公司总中心闭）登录二台内网核心交换机执行如下步骤：Sh ip route 2确认 /13网段的路由源自上联北京信息中心分公司总中心路由器3信息总中心网络值班岗记录长ping丢包数据，正常应在五分钟内分公司总中心恢复4观察网管平台应有内网核心交换机报到该路由器RPING不通、OSPF分公司总中心NEIGHBOR DOWN的报警，记录UMP平台的其它告警信息三层网络结构的分公司，需检查场景二/ 步骤二的第 8步4信息总中心网络岗通知交易监控岗，检查分公司交易情况； 同时分分公司总中心公司自查交易情况5交易完全恢复正常后， 打开上联信息总中心路由器的电源（如双

20、电分公司总中心;.源设备，则两个电源都打开）通过 Console 口监测、 记录路由器重启情况，观察路由器重启有无总中心6分公司异常，如有异常，则通知信息总中心网络岗路由器重启完成后，执行如下命令：Show ip ospf nei分公司总中心7Show ip bgp summary确认该设备和相邻设备的动态路由邻居关系已经正常建立观察长 ping 的丢包情况三层网络结构的分公司，需检查场景二 / 步骤二的第 12、 13 步登录分公司二台内网核心交换机，执行如下命令：Sh ip route 8Show ip route 分公司总中心确认 /

21、13网段路由源自上联北京信息中心路由器、/13 网段路由源自上联信息总中心路由器9信息总中心网络岗通知交易监控岗，检查分公司交易情总中心况；同时分公司自查交易情况分公司10确认分公司交易完全正常后，本演练场景结束分公司总中心4.3演练的应急处理步骤在演练过程中，如网络设备关机后，交易（CUPS系统 ZNAP上的长 ping 或收单系统PNAP上的长 ping 或相关监控岗位发现告警）受影响，且在5 分钟内无法恢复，则应立即恢复系统。如系统重启异常或无法重启则执行以下应急处理步骤：4.3.1操作步骤步骤操作内容第一步分公司使用预先准备的备件进行紧急更换第二步将原先保存的故障设备

22、配置文件导入备件第三步将备件接入网络，替换故障设备第四步检查网络是否恢复正常第五步协调集成商更换故障设备4.3.2操作细则序号操作内容操作人复核人1与信息总中心网络岗协商后， 使用预先准备的设备备件进行紧急更分公司总中心换2将原先 TFTP服务器上保存的故障设备配置文件导入备件分公司总中心3将备件接入生产网络，替换故障设备分公司总中心检查网络是否恢复正常，执行如下命令：4Sh cdp nei/*检查 CDP neighbor 是否正常建立分公司总中心Sh ip ospf nei/*检查路由邻居关系是否建立Sh ip bgp sum/*检查与总中心的 BGP邻居是否建立;.Sh ip bgp/*

23、检查是否已经学习到BGP路由5根据维保合同，协调集成商更换故障设备分公司总中心5 演练场景二：内外网核心交换机宕机演练5.1演练思路依次对内网主用核心交换机、内网备用核心交换机、外网主用核心交换机、外网备用核心交换机进行关机演练；通过长Ping 机构地址和内网网控器TCP卡地址，确认路由系统、防火墙系统冗余机制的有效性。注：1 、关闭下一台交换机前，需确认前一台交换机已重启完毕并恢复正常（包括路由等），同时 Primary 防火墙为 Active 状态。2、交换模块内嵌的分公司无须进行相应交换机的宕机演练。5.2演练步骤步骤操作内容第一步内网主用核心交换机宕机演练第二步内网备用核心交换机宕机演

24、练第三步外网主用核心交换机宕机演练第四步外网备用核心交换机宕机演练5.2.1演练细则第一步：内网主用核心交换机宕机序号操作内容操作人复核人1通知信息总中心网络值班岗，开始关闭内网主用核心交换机分公司总中心登录上联信息总中心路由器，执行如下命令：2Sh ip route 144.x.x.x(辖内机构地址 )分公司总中心确认存在四条路由，且分别源自两台内网核心交换机通知信息总中心登录 CUPS系统 ZNAP服务器，开启对机构地址的长3Ping ；通知信息总中心在二代收单PNAP上开启对分公司NAC所有分公司总中心上联卡地址的长 Ping4关闭内网主用交换机电源（如双电源设备，则双路电源均须关闭）分

25、公司总中心登录分公司上联信息总中心路由器，执行如下命令：5Sh ip route 144.x.x.x（辖内机构地址）分公司总中心确认机构路由源自内网备用交换机6信息总中心网络值班岗记录对机构端服务器的长Ping的丢包情况分公司总中心7信息总中心网络岗通知交易监控岗，检查分公司交易情况； 同时分分公司总中心公司自查交易情况观察网管平台应有内网备用核心交换机报到该主用交换机RPING8不通、 OSPF NEIGHBOR DOWN的告警，同时有防火墙报FAILOVER异分公司总中心常的告警9通知信息总中心网络值班岗，同时开启内网主用交换机电源分公司总中心;.10设备正常启动后，确认路由邻居关系已正常

26、建立：分公司总中心Sh ip ospf nei登录上联信息总中心路由器，检查确认路由是否恢复正常：11Sh ip route 144.x.x.x(辖内机构地址 )分公司总中心确认存在四条路由，且分别源自二台内网核心交换机观察长 ping 的丢包情况登录防火墙系统检查 Failover状态（此时防火墙系统应已发生主备切换）12Sh failover分公司总中心Sh conn确认防火墙系统 Failover 工作状态正常， TCP链接信息已同步如果 Secondary 防火墙为 Active 状态，则执行如下命令进行回切：13登录 Primary 防火墙（ Standby 状态） telnet 1

27、44.x.9.x分公司总中心Config tFailover active14信息总中心网络岗通知交易监控岗，检查分公司交易情况；同时分分公司总中心公司自查交易情况；第二步：内网备用核心交换机宕机演练序号操作内容操作人复核人1通知信息总中心网络值班岗，开始关闭内网备用核心交换机分公司总中心登录上联信息总中心路由器，执行如下命令2Sh ip route 144.x.x.x(辖内机构地址 )分公司总中心确认存在四条路由，且分别源自两台内网核心交换机通知信息总中心 CUPS系统 ZNAP服务器，开启对机构地址的长Ping ；3通知信息总中心在二代收单PNAP上开启对分公司 NAC所有上联卡分公司总中

28、心地址的长 Ping4关闭内网备用交换机电源（如双电源设备，则双路电源均须关闭）分公司总中心登录分公司上联信息总中心路由器，执行如下命令：5Sh ip route 144.x.x.x（辖内机构地址）分公司总中心确认机构路由源自内网主用核心交换机6信息总中心网络值班岗记录对机构端地址长Ping 的丢包情况分公司总中心7信息总中心网络岗通知交易监控岗，检查分公司交易情况；同时分分公司总中心公司自查交易情况8观察网管平台应有内网主用核心交换机报到该备用交换机RPING分公司总中心不通、 OSPF NEIGHBOR DOWN的告警8通知信息总中心网络值班岗，同时开启内网备用交换机电源分公司总中心9通过

29、 Console 口监测、记录交换机重启情况，观察重启有无异常，分公司总中心如有异常，则通知信息总中心网络岗设备正常启动后，确认路由邻居关系已正常建立：10Sh ip ospf nei分公司总中心登录上联信息总中心路由器，检查确认路由是否恢复正常：11Sh ip route 144.x.x.x(辖内机构地址 )分公司总中心确认存在四条路由，且分别源自二台内网核心交换机观察长 ping 的丢包情况12登录防火墙系统检查 Failover 状态分公司总中心;.Sh failoverSh conn确认防火墙系统 Failover工作状态正常，主备防火墙TCP链接信息已同步通知信息总中心外围监控岗，二台内网核心交换机宕机演练完成，13请其检查分公司网控器上联卡与二代收单PNAP、二代多渠道 NASA分公司总中心的连接情况，如发生主备切换，则手工回切14信息总中心网络岗通知交易监控岗，检查分公司交易情况；同时分分公司总中心公司自查交易情况第三步：外网主用核心交换机宕机演练序号操作内容操作人复核人1通知总中心及辖内机构，开始关闭外网主用核心交换机分公司总中心登录外网机构线路接入主要网络设备，执行如下命令：