(4)IT运维管理：ITIL先锋论坛-某互联网公司运维平台技术方案

运维平台负责人GOPGOPS全球运维大会2020·城市站CONTENTS33统一变更体系GOPGOPS全球运维大会2020·城市站GOPGOPS全球运维大会2020·城市站GOPGOPS全球运维大会2020·城市站GOPGOPS全球运维大会2020·城市站问题一问题二问题三问题一问题二问题三现网频繁变更，如何不人为搞出故障？故障不可避免，出现故障，如何快速恢复业务？业务现在没问题，提前解决那些风险隐患导致业务未来有故障的问题？GOPGOPS全球运维大会2020·城市站GOPGOPS全球运维大会2020·城市站GOPGOPS全球运维大会2020·城市站GOPGOPS全球运维大会2020·城市站化难点：GOPGOPS全球运维大会2020·城市站灰度原则能力：市市市市灰度原则能力：市市市市变更中兜底能力：市市 GOPGOPS全球运维大会2020·城市站版本库CI/CD版本库CI/CD较查查线查查GOPGOPS全球运维大会2020·城市站发布...发布... 发布...发布... ,' ,' GOPGOPS全球运维大会2020·城市站结合对等切换灰度结合对等切换灰度发布规则双城双活发布即生效一致性解决方案发布过程可控不留坑给下一次大故障救命急用GOPGOPS全球运维大会2020·城市站GOPGOPS全球运维大会2020·城市站快自动切换解决高频已知故障自动切换解决高频已知故障换 人工切换兜底所有故障处理 人工切换兜底所有故障处理力GOPGOPS全球运维大会2020·城市站11难点：2难点：2345GOPGOPS全球运维大会2020·城市站效果：发现很多次纬度值上报异常情况；发现超大纬度值笛卡尔积情况很多次；GOPGOPS全球运维大会2020·城市站优势：优势：劣势：优势：劣势：GOPGOPS全球运维大会2020·城市站 置 置 GOPGOPS全球运维大会2020·城市站+GOPGOPS全球运维大会2020·城市站 置面积算法优势：终极效果：不在需要人为任何经验的配置告警，100%的自动化GOPGOPS全球运维大会2020·城市站置GOPGOPS全球运维大会2020·城市站 GOPGOPS全球运维大会2020·城市站简要分析对用户侧的影响，以便上升决策，是初步判断故障点，不要分析故障的根本原因，简要分析对用户侧的影响，以便上升决策，是GOPGOPS全球运维大会2020·城市站set3set3GOPGOPS全球运维大会2020·城市站全面不漏范围（多路径取并集）全面不漏范围（多路径取并集）GOPGOPS全球运维大会2020·城市站GOPGOPS全球运维大会2020·城市站top20错误码 影响范围优先级高top20错误码 影响范围优先级高初因优先级低初因优先级高23初因优先级中1初因优先级高23初因优先级中1GOPGOPS全球运维大会2020·城市站GOPGOPS全球运维大会2020·城市站类异常条件：实践是检验整理的唯一标准，通过演习保障自动切换和一键强制异常条件：①全断网：网络完全中断②部分断网：单台交换机异常条件：①全断网：网络完全中断GOPGOPS全球运维大会2020·城市站GOPS全球运维大会2020·城市站故障发现故障发现告警”快、准”告警”快、准”故障定位故障故障处理GOPGOPS全球运维大会2020·城市站统一值班统一值班持续运营持续运营运维服务度量运维服务度量运维交付流水线运维交付流水线故障处理体系故障处理体系统一变更体系统一变更体系容量管理平台容量管理平台SRESRE开放平