云平台服务器存储应急预案

云平台效劳器存储应急预案名目\l“_TOC_250010“目的 3\l“_TOC_250009“适用范围 3\l“_TOC_250008“标准内容 3\l“_TOC_250007“故障分类 3\l“_TOC_250006“应急预备 3\l“_TOC_250005“具体措施 4\l“_TOC_250004“故障处理标准 4\l“_TOC_250003“机房停电 4\l“_TOC_250002“主机故障 4\l“_TOC_250001“存储系统故障 5\l“_TOC_250000“云平台软件系统故障 5云平台治理效劳器故障预防 5云平台日常告警故障排解 6硬件故障预防与排解 6故障预防 6故障排解 6故障处理 7目的为提高云平台效劳器、存储故障处理力量，形成科学、有效、反响快速的日常治理流程和应急处理机制，确保平台的安全和稳定运行，最大限度地减小故障对生产的影响，降低业务中断风险，特制定本标准。适用范围本标准适用于供给云计算虚拟化平台效劳的效劳器、存储治理，应对发生和可能发生的故障。标准内容效劳器运维和应急处理应包括风险评估，检测体系和应急处理三个环节，合理有效的执行掌握将防止故障影响扩大。故障分类平台故障包括效劳器硬件和存储系统故障；自然灾难〔水、火、电等〕造成的物理破坏；人为误操作造成的损害等。应急预备部门责任人员明确职责和治理范围，依据实际状况，安排应急值班，确保到岗到人，联络畅通，处理准时准确。具体措施建立安全、牢靠、稳定运行的机房环境，防火、防雷电、防水、防静电、防尘；建立备份电源系统。遵守安全操作标准；对虚拟机和治理效劳器进展定时备份；承受有效的虚拟化监控工具，准时觉察问题和日报告。故障处理标准机房停电器正常运行。主机故障平台效劳器消灭硬件告警需要停机维护，效劳器责任人应马上通知相关人员，将业务虚机迁移到集群中其他效劳器主机上，再将故障效劳器切换至维护模HA假设效劳器硬件24小时内无法恢复，效劳器责任人需书面报告缘由并马上通知业务治理人员进展数据应急备份,防止灾难扩大。假设虚拟化存储硬件消灭告警，第一目击人应马上通知存储治理员，并上报主管领导，存储治理员应在报告1小时内联系厂家到场处理，处理完成后因报告缘由，找到解决方法；并马上对数据做完整性检查，消退重复发生隐患。存储系统故障发生存储系统故障后，相关人员应检查消灭故障的缘由并尽快排解。如遇系统崩溃，数据丧失，应启用备份文件进展数据恢复。云平台软件系统故障日常做好虚拟机的定时备份和快照，系统崩溃后，能够准时恢复虚拟机。发生虚拟机系统故障后，相关人员应准时通知业务人员检查消灭故障的缘由并尽快排解。如遇虚拟机系统需要启用备份系统进展恢复时，应在恢复后和业务治理员认真检查业务是否恢复并做好恢复记录。云平台治理效劳器故障预防虚拟化效劳器承受群集配置。配套治理软件对虚拟数据中心治理单元进展集中治理，系统平台常年24小时运行，每天将产生大量的任务日志和记录信息。同时管理效劳器担当了整个平台主机治理和集中配置的角色，使用率极高。为了安全，应定期备份配置数据库，定期检查告警日志。云平台日常告警故障排解当虚拟化平台消灭告警信息，通过以下步骤排解：确定故障缘由。查看已触发的警报内容，确定故障前操作是否是引发该故障的缘由，对合规操作引起的告警，进展消退。对提示硬件产生的告警，应查看硬件状态信息，对确认是硬件的问题按硬件维护预案处理。对提示因资源缺乏或性能引发的告警，因查看近期性能图表，找出缘由，消除故障提示。对于无法推断的故障，可导出系统日志发给厂家分析处理。硬件故障预防与排解故障预防保持双机运行状态正常，单机消灭故障后，准时对故障单机进展修复。故障排解当效劳器消灭硬件故障，通过以下步骤排解：〔1〕确定故障缘由。依次查看电源、硬盘、内存、主板、处理器等，如条件许可，可使用替换法检测各硬件。〔2〕恢复固件缺省配置。比方去除第三方厂商备件和非标配备件。故障处理，如数据存在应先做好数据备份，将此效劳器各应用快速转移，然后排查报警具体缘由，如由于错误操作或硬盘连接不好引起的报警，可尝试重启效劳器，重插拔硬盘等操作即可解决问题。如硬盘损坏，应准时将备用硬盘替换下故障硬盘，使效劳器恢复正常工作。排查过程中，如不能正确推断问题缘由，不能任凭操作，可向售后效劳询问处理。内存故障：由于我们的效劳器有多组内存，单条内存故障时，会对效劳器性能稍有影响，当不会影响整体使用，所以如觉察内存条损坏时，安排时间将损坏的内存条替换掉即可。RAID卡故障：效劳器的RAID卡消灭故障时，系统会无法识别出硬盘，效劳器不能正常使用，所以应第一时间启动备用效劳器。将故障效劳器移诞生产网络RAIDRAIDRAID，假设长期