XXXX网管系统内存扩容实施方案

网管系统扩容方案PAGE第2页共13页XXXX网管系统内存扩容实施方案时间：项目名称：制定人：批准人：

目录1 说明 31.1目的 31.2主要操作 31.3需提前准备的工作 31.4操作的主板示意图 32扩容前后系统对比 43本次扩容过程对业务的影响 54本次内存扩容人员和时间安排 54.1故障处理人员安排： 54.2扩容时间安排： 65扩容内存操作步骤 65.1网管服务器扩容内存 65.2网管服务器测试 96回退步骤 106扩容风险及应急预案 116.1扩容风险 116.2扩容应急预案 11编制说明1.1项目目的XX机务站网管中心2台XX型网管服务器系统内存为16G，由于设备更新扩容，已经不能满足日常需要，需将内存扩容至32G，即增加8个2G内存，并进行相关的Firmware升级，以提升主机性能。具体操作如下：将每台T5240的内存，扩容为32GB。现将每两台设备（限于同一地点服务器）中的一台设备的原所有2GB内存（每台16G），都挪到另一台设备上，使该设备达到32G内存；内存空出的设备，插入（具体配置：SE4GBFBDIMM(2*2GB),1.5V,T5240内存2*2GB）8组，共计32GB内存。由于新的内存条为1.5V电压的内存条，根据原厂手册，需要对安装新内存的设备的固件（firmware）进行升级；安装老内存的设备，无需固件升级。1.2主要操作程序1.数据库数据备份2.确认备机没有业务进行关机3.备机安装新的16个内存条扩容至32G；并检验。4.主切换备5.验证业务登陆情况6.主机安装备机拆下的原来内存条16G，扩容至32G；并检验。7.备用切换主8.验证业务登陆情况1.3需提前准备的工作本次服务器升级需要提前准备好扩容的内存，并需要额外准备一组备用（2条内存）,荣之联工程师提前准备最新的T5240的FW升级包。1.4操作的主板示意图T5240图:

2扩容前后系统对比扩容前扩容后涉及的设备名称XXXXX网管双机服务器涉及的设备IPXXXX涉及的设备位置XX机房涉及主机名AH-ZZ-NMS-SVR-APP1-SAH-ZZ-NMS-SVR-DB1-ST5240具体配置对比3本次扩容过程对业务的影响 本次内存更换操作过程，主要是对网管应用服务器双机，需要将应用服务器1的资源切换到应用服务器2上，在内存扩容完成之后，再将资源切回到应用服务器1上，在资源切换过程中，网管系统会有30分钟（每次切换需要约15分钟）的时间停止运行。 受影响的范围包括所有网管平台实时监控及snmp业务接口。4本次内存扩容人员和时间安排4.1故障处理人员安排：姓名公司名称电话4.2扩容时间安排： 20XX年XX月XX日21:00—23:505扩容内存操作步骤5.1网管服务器扩容内存步骤时间责任人扩容内存具体操作步骤完成情况说明XX月XX日0点前完成网管系统检查及应用服务器系统备份。应用服务器1更换内存条前，必须先将应用资源切换到应用服务器2上，然后关闭服务器。10:00-0:10XXX以root账户登录系统4，AH-ZZ-NMS-SVR-DB1-S#scstat–p（查看sc状态）#scswitch–z–gPKGAHNMS-rg-hAH-ZZ-NMS-SVR-APP1-S（切换到主服务器）以下在主服务器验证（如果没有跳过步骤）：#ps–ef|grepora_(查看nms数据库启动是否正常，切换是否正常)#ps–ef|grepNms(为14个网管后台程序进程是否正常运行)#ps–ef|grepGCD（为3个网管局数局程序是否运行正常）#ps–ef|grepCruiser(为3个网管自动巡检管理程序是否正常)#ps–ef|grepUIP（为3个应用集成程序是否运行正常）#ps–ef|grepPASM（为3个权限认证程序是否运行正常）#ps–ef|grepIPM（为IP地址管理程序是否运行正常）查看各个probe运行是否正常，是否被自动拉起。查看各个后台网管程序日志是否报错、是否稳定。□是□否20:10-0:15XX通过浏览器访综合分析（WEB:58045/ucas）、报表、综合监控（NMS监控软件）、综合维护（局数据、巡检系统、IP地址管理等），查看登录及监控是否正常□是□否30:15-0:25XX如果访问正常，则关闭4AH-ZZ-NMS-SVR-DB1-S#scswitch-S-hAH-ZZ-NMS-SVR-DB1-S（将该服务器上的sc资源切换到其他节点上）□是□否说明进入机房，扩容内存

步骤时间责任人扩容内存具体操作步骤完成情况40:30-2:30XXX检查内存的PN号和FW升级包□是□否5XXX机器健康度检查□是□否6XXX关闭操作：关闭应用服务器AH-ZZ-NMS-SVR-DB1-S通知用户系统将要关闭关闭该主机等待前面板电源灯熄灭断开应用服务器连接的所有电源，网线，光缆，将服务器推出机架打开服务器上盖将防静电腕带一端戴在手腕上，一端联在主机金属内壁上。拔出需要扩容的主机的内存将内存平放在防静电垫子上插入需要扩容的新内存升级该主机的FW（AH-ZZ-NMS-SVR-DB1-S）启动应用服务器AH-ZZ-NMS-SVR-DB1-S7XXX内存条板子下架1打开服务器上面的上面板取下原来内存条，将新内存条插入服务器3将服务器上面板盖上□是□否8XXX服务器上架□是□否9XXX1加电开机2收集内存状态日志，确认内存是否正常。□是□否

主备切换将业务切换到已经扩容的主机说明内存状态正常后，将应用资源切回应用服务器182:30-3:00XXX以root账户登录系统2，#scstat–p（查看sc状态）#scswitch-z-gPKGAHNMS-rg-hAH-ZZ-NMS-SVR-DB1-S（切换至备服务器）#scstat–p（查看sc状态）以下在主服务器验证（如果没有进程跳过此步骤）：#ps–ef|grepora_(查看nms数据库启动是否正常)#ps–ef|grepNms(为14个网管后台程序进程是否正常运行)#ps–ef|grepGCD（为3个网管局数局程序是否运行正常）#ps–ef|grepCruiser(为3个网管自动巡检管理程序是否正常)#ps–ef|grepUIP（为3个应用集成程序是否运行正常）#ps–ef|grepPASM（为3个权限认证程序是否运行正常）#ps–ef|grepIPM（为IP地址管理程序是否运行正常）查看各个probe运行是否正常，是否被自动拉起。查看各个后台网管程序日志是否报错、是否稳定。□是□否93:00-3:10XXX通过浏览器访问综合分析（WEB:58045/ucas）、报表、综合监控（NMS监控软件）、综合维护（局数据、巡检系统、IP地址管理维护等），查看登录及监控是否正常□是□否说明进入机房，扩容主机内存43:15-4:00XXX服务器下架□是□否5XXX内存条板子下架关闭主用服务器AH-ZZ-NMS-SVR-APP1-S断开服务器连接的所有电源，网线，光缆，将服务器推出机架打开服务器上盖将防静电腕带一端戴在手腕上，一端联在主机金属内壁上。将刚才从备机拔下的内存，全部插入主机启动主机AH-ZZ-NMS-SVR-APP1-S，进行检测备、主切换检查业务状态□是□否6XXX服务器上架□是□否7XXX1加电开机2收集内存状态日志，确认内存是否正常。□是□否说明登陆服务器主机检查硬件状态变化，验证业务是否正常备主切换将业务切换到扩容的主机说明内存状态正常后，将应用资源切回应用服务器184:15-4:35XXX以root账户登录系统4，AH-ZZ-NMS-SVR-DB1-S#scstat–p（查看sc状态）#scswitch-z-gPKGAHNMS-rg-hAH-ZZ-NMS-SVR-APP1-S（切换至主服务器）#scstat–p（查看sc状态）以下在主服务器验证（如果没有进程跳过此步骤）：#ps–ef|grepora_(查看nms数据库启动是否正常)#ps–ef|grepNms(为14个网管后台程序进程是否正常运行)#ps–ef|grepGCD（为3个网管局数局程序是否运行正常）#ps–ef|grepCruiser(为3个网管自动巡检管理程序是否正常)#ps–ef|grepUIP（为3个应用集成程序是否运行正常）#ps–ef|grepPASM（为3个权限认证程序是否运行正常）#ps–ef|grepIPM（为IP地址管理程序是否运行正常）查看各个probe运行是否正常，是否被自动拉起。查看各个后台网管程序日志是否报错、是否稳定。□是□否94:35-4:40XXX通过浏览器访综合分析（WEB:58045/ucas）、报表、综合监控（NMS监控软件）、综合维护（局数据、巡检系统、IP地址管理等），查看登录及监控是否正常□是□否

5.2网管服务器测试测试方案测试编号测试项目测试硬件状态测试主机主机/备机预置条件扩容内存之后,升级FW之后测试步骤进行最大化自检预期结果识别大小配置,并通过最大化检测测试结果通过未通过备注需要输出检查结果测试编号测试项目测试FW升级完成预置条件升级FW后，重起主机后测试步骤通过命令查看预期结果正常识别内存.测试结果通过未通过备注需要输出检查结果测试编号测试项目应用检测预置条件扩容完成后，FW升级完成后测试步骤用户检测应用状态预期结果应用正常测试结果通过未通过备注需要输出检查结果6回退步骤如果在扩容时出现不能正常扩容内存，或启动后不能进行正常业务流程，则可采用该回退方案，恢复成原始状态拆除新增内存1.关闭服务器电源通知用户系统将要关闭按下并释放前面板电源按钮等待前面板电源灯熄灭2.把钥匙插入前面板插孔中，拧到强制关闭位置3..断开服务器连接的所有电源，网线，光缆，将服务器推出机架4.打开服务器上盖5.将防静电腕带一端戴在手腕上，一端联在主机金属内壁上。6.拔出扩容的内存7.将内存条从Memory板或者主板上拔出，恢复原状8.插入CPU/