电力营销系统监控管理解决方案

1、电力营销系统监控管理解决方案背景信息技术作为企业整合资源、加强管理和提升企业综合竞争力的利器，正日益受到企业前所未有的重视，并逐步渗透到企业整个价值链。电网企业也不例外，电力营销信息化从上世纪 90年代的单机单项应用开始起步，到今天的网络化全业务应用，电力营销信息化步伐正呈加速和纵深发展趋势。在国家电网公司，SG186 新一代电力营销技术支持系统正在其下辖的 26 个省级电网公司全面铺开实施，在南方电网公司，基于全省统一的电力营销信息管理系统也在如火如荼地进行。与传统电力营销系统相比，新一代电力营销系统呈现诸多显著特点：首先，“以客户为中心”的服务理念在系统中得到充分体现，支持客户“随时随地”

2、的服务请求；其次，电力营销数据和应用日趋向上集中，目前向省集中已成为主流建设模式；再次，系统业务功能日趋全面和一体化，电力营销业务对 IT 系统的依赖程度正达到前所未有的高度；最后，系统的 IT 架构日趋复杂，有别于传统的局域网应用，现今的电力营销系统采用的是多层技术架构，其组成除了包括复杂的网络、存储、负载均衡和机房等 IT 基础设施外，通常还包括数据库、中间件、WEB、系统备份和外部接口等各种服务器，以及基于其上的各种业务应用系统。这一切给新一代电力营销系统运维带来诸多新的挑战： 系统容纳的用电客户和使用终端数目呈现爆发性增长，例如一个省级集中电力营销系统通常有数千万用电客户和上万个使用终

3、端； 系统要求 7*24 小时持续不间断地支持客服中心、银电收费和其他自助业务的运作，以满足客户任意时间服务请求； 系统用户访问模式正变得越来越不确定，如用户可通过网上营业厅、呼叫中心、自助终端、银电联网系统等多种渠道办理缴费和其他业务； 系统受到安全攻击的可能性越来越大，安全管理工作正变得越来越复杂。总之，新一代电力营销系统面临的是一个全新的复杂的 IT 环境，在可用性、性能和安全管理等方面都给系统运维带来许多新的困难和挑战，怎样通过采用先进的技术和管理手段应对目前的困境，确保在复杂 IT 环境下电力营销业务持续高可用性，是摆在目前电网企业面前亟需考虑的紧迫问题。监控现状与困惑随着电力营销业

4、务对电力营销系统的依赖程度与日俱增，以及伴随电力营销数据和应用的集中化趋势，系统风险也在急剧聚集，系统在可用性、性能和安全方面管理正承担前所未有的压力，如何对电力营销系统实行有效的监控管理，确保电力营销业务持续高可用性，正日益受到各供电企业空前的关注和重视。在传统的人工运维无法胜任的情况下，供电企业纷纷上马各种 IT 运维系统，从最初的单纯网络管理，到机房管理、主机管理和应用管理，以及目前的业务服务管理，试图以技术手段和管理手段来解决系统运维中存在的困难，经过多年的摸索和实践，已取得相当的成效，但同时又面临到许多新的困惑，具体表现在以下几个方面： 由于缺乏基于业务视角的监控视图，在监控管理方面

5、业务部门与 IT 运维部门经常沟通不畅，造成 IT 与业务脱节，在故障发生时无法确定业务影响范围和故障恢复优先次序，导致系统运维人员工作目标性不强，总是处于被动应战状态； 由于业务应用系统本身的特殊性和缺乏必要的监控标准和规范，几乎所有监控产品都是只针对业务应用系统所依赖的 IT 资源层面进行监控，很少有能真正对电力营销业务应用系统本身进行直接监控的产品，这已经成为目前电力营销系统监控管理中的一个盲点和死角； 由于设计上的缺陷，许多主流的监控产品并不能很好地解决目前电力营销应用监控中碰到的一些难题，例如由于电力营销业务具有很强的周期性，在一个电费周期中对资源的监控，通常需要对不同的时段（如月初

6、、月中和月末）设置不同的预警和告警阀值，即所谓的浮动阀值。又如对备份任务的监测，除了需要检查备份内容是否完整外，还要实时监测备份任务是否在预定时间内正常开始和结束，这通常需要监控系统支持复杂阀值设置和上下文关联分析才能实现，而一般监控产品通常只支持一些简单阀值设置； 在监控产品选择上，要么是功能太过单一，如单纯的网络管理产品，已经很难满足现有电力营销系统监控需要；要么就是功能虽然强大，但价格昂贵，并且将 IT 监控人为割裂为网络管理、应用管理、性能管理和安全管理等各种独立的产品打包出售，然后通过后期的集成来实现所谓的“一体化监控”。这种基于后期整合的做法由于忽视了 IT 系统作为一个整体存在为

7、企业业务服务的事实，忽视了 IT 系统各元素之间存在的天然联系，在监控效果上自然是大打折扣。蓝科监控解决方案针对电力营销系统当前监控管理现状和困惑，广州蓝科科技股份有限公司借助其十多年电力营销系统开发实施和运维经验，经过数年精心打造，适时推出了电力营销系统全面一体化的监控管理解决方案，以下是本解决方案关键特性介绍： 从业务视角出发，高效主动地管理电力营销系统IT 是为企业业务服务的，保持企业业务持续高可用性是 IT 运维部门的首要目的。传统的以资源监控为主的监控产品，无法建立企业业务与 IT 资源之间的映射关系，实行的是一种单点监控和分散监控管理方式，不能直观整体地反映企业业务的健康状况，常导

8、致“四处救火”被动应战的工作局面。蓝科电力营销监控管理解决方案，强调从业务视角出发，提供业务视图展现和业务服务水平管理（SLA），使电力营销业务与其所依赖的 IT 资源和使用用户关联起来。通过业务视图（图 1），系统提供一种整体浏览电力营销业务健康状况的方式，并能使运维人员更直观地了解业务系统发生故障时的影响范围和依据监控对象之间的业务依赖关系快速定位故障节点。通过业务服务水平管理，使 IT 运维部门有了明确的工作目标和动力，帮助运维人员确定工作优先次序，增强业务部门和 IT 部门沟通，改变长期被动运维工作的局面。图表 1 电力营销业务视图 基于统一监控对象模型，实现电力营销系统全面一体化监控

9、所谓全面监控，是指将企业业务所依赖的 IT 资源包括网络、服务器、数据库、中间件、机房和业务系统统一作为监控对象纳入管理。所谓一体化监控，是指监控内容必须覆盖 IT 系统在可用性、性能、安全、资源和其他异常事件方面监控管理需求。有别于其他大厂商通过多个功能模块后期集成来实现一体化监控的模式，我们依据 IT 系统是作为一个整体为企业业务服务的事实，通过建立统一监控对象模型，在监控对象粒度一级就集成了可用性、性能、资源、安全和其他异常事件的管理，应该是目前最高效最接近本质的一体化监控解决方案。图 2 是电力营销系统全面一体化监控管理模型，从纵向(监控对象)包含电力营销业务所依赖的所有 IT 资源，

10、横向（监控指标）则覆盖了每个监控对象可用、性能、安全、资源和异常等多方面得监控管理需求。监控指标监控对象图表 2 电力营销系统全面一体化监控管理模型 专有的现场探针技术，完美解决电力营销系统监控的盲点和死角由于应用系统本身缺乏统一的成型的监控标准和方法，导致在开发过程中，开发商多只考虑自己业务逻辑的实现，很少考虑自身软件的监控能力，因此绝大部分监控产品都只实现对通用资源的监控，缺乏对应用系统本身直接的监控，这也是目前电力营销系统监控管理中存在的最大盲点和死角。而根据我们的经验，在日常运维过程中，相当多的电力营销业务可用性问题并不是由于 IT 资源层面的故障引起的，而是由应用系统本身缺陷导致的，

11、因此如果缺少对应用系统本身的监控，监控的效果自然也就大打折扣。广州蓝科公司通过采用专有的现场探针技术，成功绕开了目前电力营销系统本身缺乏监控能力的难题，使电力营销系统监控不留死角和盲点。具体做法是根据实际情况在用户不同的使用场景下部署现场探针，然后通过执行预设的脚本或基于协议分析的方法，来监测电力营销业务操作的可用性和响应时间。现场探针技术的采用，保证了监控结果更接近用户体验，如图 3 所示，对电力营销收费业务的监控结果能反映用户不同使用场景使用效果，更能满足日常监控管理需要。图表 3 现场探针技术在电力营销系统监控中的应用示意图 独具特色的两层分析处理机制，解决应用监控中的诸多难题让我们先来

12、看看一个具体的电力营销数据备份监控需求：某大型应用系统数据库系统为 Sybase，每天晚上 12 点开始进行 1 级备份，即把 Sybase 中的 5 个数据库 master，dlyxgis，dlyx_cx， dlyx，bakdata 备份到服务器的本地磁盘中；第二天中午开始进行二级备份，即把一级备份的磁盘文件用 legato 备份软件备份到磁带库。现在要求监测一级备份是否在每天晚上 12 点左右（一个时间范围）如期启动，5 个数据库是否都正确完成备份，并且整个一级备份工作是否在第二天早上 8点前完成（因为上班时候进行一级备份会对白天业务处理性能产生较大影响），二级备份是否在 3个小时之内正常

13、完成。经过仔细分析，备份任务监测需求是复杂的多条件、多事件、时间相关和顺序相关的，其中一级备份和二级备份还是跨资源相关的。下面让我们看看怎么运用二层分析处理机制来解决电力营销数据备份监控需求的，如 4 所示，系统第一层分析处理（图 4 中第环节）是基于指标粒度级的，它通过对持续采集回来的一级和二级备份日志进行上下文关联分析，输出一级备份和二级备份监控结果（事件）。第 2 层分析（图 4 中第环节）是告警事件分析处理层，通过对监控事件进行过滤、压缩和关联分析处理，输出有效告警事件，避免告警风暴和误报，如在一级备份没有正常启动或备份不成功，二级备份告警是需要屏蔽的。多多多多资资资资源源源源事事事事

14、件件件件 实实实实现现现现复复复复杂杂杂杂阀阀阀阀相相相相关关关关性性性性处处处处理理理理,输输输输值值值值设设设设置置置置和和和和上上上上下下下下文文文文出出出出告告告告警警警警事事事事件件件件关关关关联联联联事事事事件件件件分分分分析析析析告警分析标准事件原始事件告警事件控制监监监监测测测测响应事件监测信息自自自自动动动动响响响响应应应应和和和和人人人人工工工工响响响响 采采采采用用用用代代代代理理理理和和和和应应应应相相相相结结结结合合合合,提提提提供供供供关关关关联联联联展展展展现现现现和和和和知知知知识识识识库库库库支支支支持持持持以以以以便便便便非非非非代代代代理理理理结结结结合合

15、合合方方方方式式式式快快快快速速速速诊诊诊诊断断断断和和和和恢恢恢恢复复复复故故故故障障障障监监监监控控控控对对对对象象象象进进进进行行行行数数数数据据据据采采采采集集集集目前市面上监控产品大致可分为两类，一类是根本不具有分析能力，仅支持简单阀值判断和告警功能，无法很好地满足象电力营销数据备份这样复杂的监控需求。另一类是具有事件相关分析能力的监控产品，但由于是把所有监控事件都统一集中处理，增加了处理的复杂性。而两层分析处理机制，由于在采集到告警之间增加了一层分析功能，负责对同一监控资源事件进行上下文关联分析和处理，更能有效地解决应用监控中的各种难题。图表 4 电力营销系统全闭环监控管理示意图

16、有针对性监控指标体系设计，提供强大的故障预警能力一个好的监控产品，其价值不在于故障发生后如何告警，而是在故障发生前如何能及时预警，使 IT 运维工作真正做到“防患于未然”。一个监控产品的故障预警能力强弱，除了依赖其纳入监控的对象是否全面外，监控指标体系设计也是重要因素之一。广州蓝科专门针对电力营销系统实际监控需求，除了具备一般监控产品所有通用指标之外，还增加了许多极具针对性的指标。如通过对主机集群状态监测，可在生产机和备用机切换时发出预警信息，提醒运维人员查找和消除故障隐患，以避免下次真正单点故障发生；又如对数据库备份进程监测，在早上上班前预定时间内如果发现备份进程还在运行，则发出预警信息通知

17、系统管理员提前处理，以避免在工作时间内进行系统备份影响业务响应速度。 图表 5 电力营销系统监控指标体系 集中监控与分布式部署能力，以适应营销系统建设日趋集中趋势电力企业集中化和扁平化管理要求，使电力营销系统建设也呈现日趋集中趋势，省集中已是目前的主流应用模式。在省集中模式下，基于各种业务或技术的原因，一般还会有部分应用系统继续保留在地市公司，如 95598 呼叫中心、与地方商业银行的银电联网系统、电能量采集系统等。蓝科 SAMP 监控平台由于具有集中监控和分布式部署能力，能很好支持这种应用场景，如图 5 所示，只需通过在地市部署一个监控调度服务器（MS），负责本地应用系统监控数据的采集和上报

18、，而不再需要在各地市单独部署监控系统，这样为客户也节省了不少投资。图表 6 SAMP 部署图 精心设计的系统功能，真正实现营销系统全面闭环监控管理SAMP 系统根据电力营销系统从监测、分析、告警到控制的闭环管理需求，精心设计各个环节系统功能，功能菜单组织如图 6 所示。具体功能特点描述如下： 监控部署 提供向导式的人工部署界面 自动发现功能，提高监控对象部署效率 监控对象导入/导出，支持系统快速恢复和批量创建 监测代理远程集中部署，使系统部署变轻松 监控调度（MS）服务器和 CCE 服务器配置功能，使系统能轻松应对监控规模变化，真正做到“随需而变” 监控管理 业务、管理和设备多种视图展现，使系

19、统支持分业务、分权限和分设备管理需求 拓扑视图，支持各种物理和逻辑的拓扑绘制，并通过与监控对象的关联，可实时了解拓扑图中各种监控对象的健康状况 机房视图，可直观展现监控对象在机房位置情况和机房环境当前状态图表 7 电力营销系统监控管理功能菜单组织 告警管理 告警预订，使运维人员能批量预订自己关注的告警信息 告警确认，提供告警事件之间关联展现，辅助运维人员快速定位故障 工单处理，提供已确认告警事件的流程处理，促使运维工作规范化 告警动作配置，支持多种告警通知方式和故障自动响应 SLA 管理 SLA 定义，支持分层分级定义服务水平 SLA 浏览，支持分层分级展现服务水平 报表管理 支持 TOPN、

20、对比分析、趋势分析、告警统计、告警TOPN、设备分类、可用性和工单统计等各种类型报表 知识库 海量的专家建议信息，为运维人员快速解决问题提供有力帮助 支持知识条目创建、分类、修改和查询 支持告警事件与知识库的自动关联 丰富的模板功能，有效解决电力营销系统监控中的个性化需求SAMP 系统内置多种模板，以解决电力营销系统监控中的个性化需求，具体如下： 告警信息模板，使用户能灵活定义适合本单位的告警信息内容； 报警信息模板，使用户能根据不同告警通知方式定义适合自己的报警信息，如相比短信通知方式，对邮件通知方式可订阅告警事件的详情； 报表模板，使用户可调整各种类型报表的展现内容和格式； 页面展现模板，使用户可定义出适合自己个性化应用展现页面； 拓扑图模板，使用户可定义各种物理和逻辑拓扑展现； 监控对象模板，使用户能很轻松地增加新的监控对象类型。选择我们的理由 十多年的电力营销系统开发和运维经验我们拥有有十多年的电力营销系统开发和运维