容灾HLR2倒换演练方案

中兴HLR倒换演练方案一、演练目的根据工程计划，江苏已新建一台容灾备份中兴HLR用于覆盖江苏地区中兴HLR用户。该套HLR目前调测完毕，系统已经具备割接入网的条件。为保证系统的安全性，在中兴HLR2进行倒换测试。二、演练规范当容灾系统中的主用HLR（或称主用HLR）出现严重故障，并且无法在短时间内恢复时，业务需要切换到备用HLR（或称容灾HLR）,保证用户业务不受影响，切换过程采用手工切换，通过人机命令完成切换操作。三、演练场景当主用HLR发生重大故障，按故障处理流程逐级立即上报，经决策需要发起容灾切换时，发起切换操作：所有切换过程采用手工切换，通过人机命令完成切换操作。可以通过OMC“专业维护”->“监控中心容灾”界面进行容灾HLR的手工切换操作，包括主用HLR托管和备用HLR接管以及托管回收和接管回切。HLR托管：主用HLR主动发起的切换动作，将业务访问从主用HLR切换到容灾HLRHLR托管回收：主用HLR主动发起的切换动作，将业务访问从容灾HLR切换到主用HLRHLR接管：容灾HLR主动发起的切换动作，将业务访问从主用HLR切换到容灾HLRHLR接管回切：容灾HLR主动发起的切换动作，将业务访问从容灾HLR切换到主用HLR在容灾HLR上执行手工接管时容灾HLR自动修改运行状态，（如果切换前与各局向的链路为闭塞状态，需要先手工激活所有信令链路），允许业务运行，同时界面可以根据需要指定是否允许BOSS受理。在主用HLR上执行手工托管时主用HLR将自动闭塞所有信令链路（与容灾HLR的直连链路除外），以促使对端网元将业务切换到容灾HLR，同时可以根据需要在界面指定是否禁止BOSS受理、是否允许容灾数据同步。当主用HLR故障恢复时进行HLR托管回收，并通知相关领导故障恢复，进行业务测试和观察。四、演练实施方案1．演练准备网管中心核查的本地交换机（端局/IGW）的备份信令路由，确保备份路由指向HSTP；核查HSTP至各主用HLR的备份信令路由，确保指向新建中兴容灾HLR。厂家进行容灾HLR接管准备A、 检查容灾HLR的运行状态检查容灾HLR的告警及通知消息，确认容灾HLR运行状态正常。需要特别注意有无信令局向不可达或链路异常告警，如果有请确认是否为手工闭塞的链路或局向，在容灾接管后是否需要解闭塞。B、 检查容灾HLR的容灾状态在容灾HLR的网管客户端依次打开“视图”->“专业维护”->“监控容灾”，点击“状态查询”。检查容灾HLR信息中，需要接管的主用HLR所对应的HLRNUM1状态是否正常，为备用状态，RunMode为“未接管”状态C、 静态缓存库数据检查连接Drsync库（比如：用户为drsOOl，密码为drsOOl，实例为hlr）a） 使用sqlplusdrs001/drs001@hlrb） 查询等待同步的数据用SQL语句Selectcount（*）fromr_hdrsyncssuwherestateO=O;如果出现等待的数据同步，需要检查如下数据：1） 检查系统的同步速度是否小于积压的速度；2） 检查主用Drsync和备用Drsync，备用Drsync和备用DBIO之间的链路是否正常连接；c） 查询失败同步的数据用SQL语句selectcount（*）fromr_hdrsyncssuwherestateO=2;如果步骤（c）的值不为0,则进行2的操作；如果该值为0,则忽略2如果存在有失败记录，使用DrManager工具查询失败结果；失败记录可能的结果：1） 主用HLR和备用HLR环境配置数据不一致导致同步失败，修改配置数据，使主用HLR和备用HLR数据一致，再进行重同步操作2） 同步过程中系统忙导致同步失败，可以通过工具进行重同步进行再次操作。静态同步的失败记录通过DrManager工具进行查询的D、 动态失步表记录检查动态数据同步失败记录新版本都保存到PDSA节点上的U_WSyncFail表，老版本都保存在HSDB模块上的R_HFAILSYN表中。该表标记失步的用户，动态同步正常时，失步表中该记录为0;如果主用侧有积压，则必须等全部同步完成后，才进行容灾切换，否则可能会导致用户动态信息错序覆盖。演练时间2011年10月27日晚23:00~10月28日03:00容灾切换与回切演练步骤3.1容灾切换3・1・1省份通知省份营帐停止BOSS受理，停止向HLR发送BOSS指令为了避免主用HLR故障期间，故障HLR和容灾HLR之间用户数据不一致，需要停止BOSS对故障HLR用户数据的受理操作；容灾演练切换时，可能有少量工单受理导致主用HLR和容灾HLR执行状态不一致，也需要停止BOSS对主用HLR的受理操作。3.1.2厂家进行容灾HLR手工接管在容灾HLR的网管客户端依次打开“视图”->“专业维护”->“监控容灾”，点击“状态查询”，在“容灾HLR信息”中选择需要接管的HLRNumber（即待接管主用HLR的HLRNUM1）,点击右键，选择“接管”：此时将会弹出一个容灾接管选择项供选择，通常情况下需要选择“发生容灾接管后，允许BOSS受理”和“发生容灾接管后，允许补充业务登记”不能选择“通知容灾HLR协作接管”。也可以全都不选，但需要在接管完成后再修改“是否允许BOSS受理”为允许，否则后续BOSS侧发起倒换，将业务受理指向容灾HLR时，业务受理将会失败。注意：需要注意不能选择第一项，第一项要求主用HLR配置为自动托管时才起作用，目前主用HLR均配置为手工托管方式，因此此时如果选中该选项，接管操作将会失败，因此不能选择；点击确定之后，再次点击状态查询，其中需要接管的主用HLR所对应的HLRNUM1运行模式为“接管”状态，是否允许BOSS受理为“Y”：其中所有接管的主用HLR对应的HLRNUM1运行模式显示接管，则表示已接管成功。同时需要检查是否允许BOSS受理为“Y”，如果为“N”，可以选中该主用HLR对应的HLRNUM1，选择打开BOSS受理。再次点状态查询，检查是否允许BOSS受理为“Y”。3・1・3BOSS受理手工切换到容灾HLR在容灾HLR发起手工接管成功后，通知BOSS系统也同步修改，将业务受理消息发送到容灾HLR。3・1・4主用HLR手工托管在主用HLR的网管客户端上依次打开“视图”->“专业维护”->“监控中心容灾”，点击“状态查询”。在“主用HLR信息”中选择一个HLRNumber点击右键，选择“托管”此时将会弹出一个容灾托管选择项供选择，只选择“发生容灾托管后，允许其它HLR向本HLR进行容灾数据同步”，注意不能选择“通知容灾HLR协作托管”。注意：需要注意，不能选择第二项，第二项“通知容灾HLR协作托管”要求容灾HLR配置为自动接管时才起作用，目前容灾HLR为手工接管方式，因此如果选中，托管操作将会失败，因此不能选择。点击确定之后，再次点击状态查询，其中主用HLR所对应的HLRNUM1运行模式为“托管”状态，主用HLR的HLRNUM1显示为托管状态，表示已托管成功。3.1.5切换后的系统运行检查3・1・5・1主用HLR系统运行检査在主用HLR上按照大号段，如：左匹配86和460,进行全信令跟踪检查切换后的信令消息，应当只有容灾心跳消息及动态同步消息，无业务请求消息。如果有业务请求消息，需要检查是哪个局向的信令消息，并通过动态管理功能将该局向的信令链路进行手工闭塞。3・1・5・2容灾HLR系统运行检査检查容灾HLR上的通知/告警消息，除容灾手工接管告警外，应无其它异常告警；打开失败观察，检查有无异常呼损；打开信令跟踪，检查容灾心跳及容灾动态同步消息是否正常；查看接口机日志，检查工单消息是否已发到容灾HLR，且无异常错误码(例如“系统错误”、大量的ISDN不存在等错误)容灾HLR受理台修改测试用户，检查是否同步到原主用HLR；动态同步积压检查，通过探针查询U_WSyncFail是否有积压记录；检查容灾HLR性能统计，与原主用HLR同时段性能是否一致；连接Drsync库(比如：用户为drs001，密码为drs001，实例为hlr)使用sqlplusdrs001/drs001@hlr查询等待同步的数据用SQL语句Selectcount(*)fromr_hdrsyncssuwherestate0=0;如果出现等待的数据同步，需要检查如下数据：检查系统的同步速度是否小于积压的速度；检查主用Drsync和备用Drsync，备用Drsync和备用DBIO之间的链

路是否正常连接查询失败同步的数据用SQL语句selectcount(*)fromr_hdrsyncssuwherestate0=2;（9） 如果有失败缓存记录，使用DrManager工具查询失败结果3.1.6业务测试（1）基本业务测试，由机房完成。序号测试条目备注1本地呼叫2外地呼叫3漫游呼叫4短消息收发5前转呼叫2）动态数据同步测试，由机房完成。序号测试条目备注1手机开关机，进行位置更新，检杳位置更新信息同步2GPRS位置更新，检杳GPRS位置信息同步3短消息状态信息同步4补充业务登记信息同步（3）动态数据缓存，由厂家完成。闭塞容灾同步链路，进行动态数据更改，动态数据缓存在容灾HLR，再解闭塞同步链路，检查动态数据同步是否正常。序号测试条目备注1手机开关机，进行位置更新，检杳位置更新信息同步2GPRS位置更新，检杳GPRS位置信息同步3短消息状态信息同步4补充业务登记信息同步（5）静态数据同步测试，由省计费BOSS指令测试。序号测试条目备注1用户销号2增加鉴权3用户放号4修改手机状态信息5修改补充业务登记信息（5）静态数据同步缓存，由厂家完成。停止主用HLR的DRSYNC模块，在容灾HLR上进行业务受理操作，再启动主用HLR的DRSYNC模块，通过Drmanager工具，完成缓存的失败数据静态数据同步。序号测试条目备注1用户销号2增加鉴权3用户放号4修改手机状态信息5修改补充业务登记信息6）用户数据下插测试业务受理信息同VLR的数据同步序号测试条目备注1对已开机用户修改手机状态，进行停复机操作2对已开机用户修改补充业务登记信息3.2容灾回切3.2.1主用HLR回收准备3・2・1・1检査主用HLR的运行状态检查主用HLR的告警及通知消息，确认容灾HLR运行状态正常。除局向不可达告警及容灾切换告警外，应无其它异常告警。主用HLR与容灾HLR的局向可达，有动态数据同步消息3.2.1.2检査主用HLR的容灾状态在主用HLR的网管客户端依次打开“视图”->“专业维护”->“监控中心容灾”，点击“状态查询”，检查主用HLR信息中，主用HLR所对应的HLRNUM1状态是否正常，为主用状态，RunMode为“托管”状态3・2・2停止BOSS受理，省份通知省计费先停止向容灾HLR发送BOSS指令为了回切操作时，可能有少量工单受理导致主用HLR和容灾HLR执行状态不一致，也需要停止BOSS对容灾HLR的受理操作。3・2・3容灾HLR手工回切在容灾HLR的网管客户端依次打开“视图”->“专业维护”->“监控容灾”，点击“状态查询”，在“容灾HLR信息”中选择需要回切的HLRNumber,选择“回切”点击回切后，此时将会弹出一个容灾回切选择项供选择，只选择“发生容灾回切后，自动通知BOSS切换”，选项“通知主用HLR协作回收”，该选项在自动回收中有效。点击确定之后，再通过点击状态查询，其中需要回收的主用HLR所对应的HLRNUM1运行模式为“未接管”状态显示需要回切的容灾HLR为未接管状态（其他容灾HLR如已接管，将仍为接管状态，不受此次回切影响），回切成功。3.2.4主用HLR手工回收在主用HLR的网管客户端依次打开“视图”->“专业维护”->“监控中心容灾”，点击“状态查询”，在“主用HLR信息”中选择主用HLR的HLRNumber（即主用HLR的HLRNUM1）,点击右键，选择“回收”。此时将会弹出一个容灾回收选择项供选择，可以选择回收后是否允许其他HLR向本HLR进行容灾数据同步（指DRSync向本HLR进行静态数据同步）。注意：需要选择“发生容灾托管后，允许其他HLR向本HLR进行容灾数据同步；点击确定之后，状态查询结果如下，其中主用HLR所对应的HLRNUM1运行模式为“未托管”状态，是否允许BOSS受理为“Y”：主用HLR点击状态查询，生产HLR信息中显示“未托管”，且“是否允许BOSS受理”为“Y”则表示回收成功；如果回收后，状态“是否允许BOSS受理”为“N”，按以下步骤处理：1） 在容灾HLR上检查生产HLR信息中所对应的HLRNUM状态是否为“未接管”状态，如果不是，则再次进行容灾HLR回切和主用HLR回收；2） 重复步骤1）直到容灾HLR中生产HLR信息对应的HLRNUM状态为“未接管”；再通过主用HLR上选中该主用HLR对应的HLRNUM，点击右键，选择打开BOSS受理。3.2.5BOSS受理手工回切主用HLR在主用HLR发起手工回收成功后，通知BOSS系统也同步修改，将业务受理消息发送回主用HLR。3.2.6切换后的系统运行检查3.2.6・1主用HLR系统运行检査（1）检查容灾HLR上的通知告警消息，除容灾手工托管告警外,应无其它异常告警；（2）打开失败观察，检查有无异常呼损；（3） 打开信令跟踪，检查容灾心跳及容灾动态同步消息是否正常；（4） 查看接口机日志，检查工单消息是否已发到容灾HLR，且无异常错误码（例如“系统错误”、大量的ISDN不存在等错误）；3・2・6・2容灾HLR系统运行检査在容灾HLR上通过全信令跟踪检查切换后的信令消息，应当只有