智慧电力大数据平台方案

大数据应用生命周期

2

大数据生态湖泊

数据运维数据之源

*1基于大数据的应用体系

应

用大数据检索大数据关联大数据分析大数据预测

互联网数据

社会数据

数据生产区（原始数据）

结构化数据文本文件多媒体数据描述类数据

机构内部数据

电力大数据概述

金售电

(2)发电用输电

以

中国华能集团公司＜217)国务院关于印发电力体制改革

画方案的通知【国发[2002]5号】中国电力建设集团有限公司

3国电fll

中国大唐集团公司(376)POWVKNIRA(200)

中国华电集团公司(345)中国能源建设集团有限公司

...•.-./中国南方电网中国国家电网(309)

。(2)

中国国电集团公司(299)(18)

g国务院关于印发电力体制改革

中国电力投资集团公司(408方案的通知【国发[2015]9号】

特性一：不可存储能源特性二：垄断性特性三：关注社会效益特性四：新机遇挑战

电力是不可存储的能源,电力的大型基建特性注作为基础存在的电力供伴随着国家电网总经理

一旦生产则必须耗用，定了电力行业的垄断性，应是国计民生的大事，刘振亚离职，以及国务

这就注定了电力生产、国家电网和南方电网公即便作为企业，也是将院2015九弓•文的颁布,

使用、销售的独特性。司是目前国内企业体量社会效益看重于经济效新的变化与机遇开始出

最大的存在。益的存在。

电力大数据电力相关企业信息化分析

国家电网信息化建设路径国家电网信息化建设套路

2006-2010

一体化企业级信息集成平台

八大业务应用

六个信息化保障体系

2011-2015

建立覆盖面更广，集成度更深，智

能化更高,安全性更强，可视化更

优的新型IT架构，纳入了电力应用

的全过程，在数据集采甚础上加强

数据分析和辅助决策的功能

2016-2020

一平台一系统国网拆分背景，去SOA〈SAP、业务部门提报相关管理部门

多场景微应用Oracle、Accenture）化需求，对可行性研究报告一进行初审

过去大系统建设的反思和调整,强，国网直属型单位/单位所闻倍息化科室

调自身UAP平台的应用。/国网紧密型单位,国家电网经济研究院

,甲方代写，国家电网信通部门

/电科院信息安全部门

电力大数据一整体框架

廿配电

o发电令售电

/电网改革的决策支撑；,实现对最末端消费的数据采集分析；

/能源结构的调整改善；,对关联上下游产业提供战略性指导；

/基于多维视角的决策分析；/改造提升经济效益目标的营销管理；

/提供日常建设、运维的监管;/配合国家产业调整目标，协助供给侧改

造的实现

电力大数据一细节关注内容

,用电客户市场细分模型

售电业务全面开放后，对售电、购电的内容都将/高价值工业用电客户分析模型

今后工作的产生天翻地覆的变化，迫切地需要大数据支持今/居民用电忠诚度分析

后业务的方向与决策支撑，可以预见基于电信客

重中之重,耗能电器用户画像

户忠诚度、银行客户营销、电商策略支撑方面的/节能智能家电推荐

大数据应用将会得到大规模应用.

/用电高峰时段区域分析

/变电站选址分析模型

配电业务在今后相会一分为二，特高压高压配电/变电站建设舆情监控

分割后的继续由传统电网公司负击，高低压配电建设则可/变电站检修项目风险监控

新领域能由新诞生.的售电公司负资，老树新花将会为配/变电站分时段负载分析及关联分析

电建设工作带来新的活力。/配电设备传感巡检数据分析及故障率

分析

输电线路规划分析模型

输电业务将会继续由电网公司负责，但是日前的输电线路环境影响及自然灾害评估

传统领域用电发电端同时开放以后，输电关联的业务将全输电负载分析管理

的新突破不可避免地带来影响，电网将会放卜自身”老大.输电线路建设资源预测模型

的地位，输电将会变更其经济效益和社会效益的

权重，更多地”迁就”社会实际需要。输电建设承运商/承建商等级评估

/单体发电质量分布分析

国家开放了个人发电销转业务以后，出现了围观/单体发电输配成本核算

急需支撑的冷场的情况.如何让发电销售说服大众和电网公/单体发电定价决策依据分析

司，成为国家一个新的创业增长点，再没有比大/临时性用电高峰单体发电支持体系

先锋领域数据更具说服力的科学依据了。

电力大数据一宏观关注内容

克强指数与GDP作为现代工业真正的神经，社会正常运转的基本资源，国家一直十分关注电力与工农业、

2»1。年.如H柴上《经击学人》摊出阳f评虫1，旧城巾发展的关系，不管是将高压的论证审批，还是国家电网的拆分，以及水电站建设等各

的腐X:聆纷济指

GDPiftKHiAffitttt人方面应用，大数据将会为宏观决策提供科学的数据支撑和高效的分析模型。

“：工业用电H新M.nftttiAUAmKmitWKvin

款新增的结品

/水电站选址论证/核电站运转情况分析

/火电站环境污染分析/电站持续型环境影响评估

/风力发电质量与气象分析/重大灾害电站应急指挥平台

/远程输电时段地域成本论证/统一电价及电力营销行为分

/用电调度能效评估析

/输电建设资源预测系统/电力巡检模型分析

/变电站覆盅区域负荷分析/大型活动临时配电调度管理

/值点工业园区用电支推调度/变电站故障及处理平台

平台/智能巡检机器人数据管理

/用电量与坛保关联性分析/错峰用目定价指导分析

“克第指的":外指啦《SK；DP走处I汴波次/电量GDP关联分析/异常灾害电力负载应急管理

-克餐指数"V经济无外a度相关。

/用电区域分布引导管理/电价舆情分析

电力大数据

—城市耗电量分析

通过收集不同气候、不同时段期间以及其他关联

的用电量情况，助力"智慧城市”应用的同时，

有效预测用电需求，协助电力相美单位应对用电

高峰期的电力调度和资源确保能力。

电力大数据

—雅碧江流域水电开发有限公司大数据案例分享（成果展示）

基于3*12的大屏展示以下内容：电站发电生产数据、水文气象观测数据、日常KPI指标、视频监控数据

10

电力大数据

—四川电力物资公司典型建设

物流设备集成

库位规划集成

仓库物流规划

辅助决策

现场收发货

入库管理资金支付深化

合同招标管理出库管理财务结算

需求预测管理库内管理

调度大厅建设财物一•体化

平衡利库管理传感信息集成

在途信息集成视频传输集成

监控信息集成

GPS信息集成

仓库财务部门

采购部门

物资调度

中心

迎酶

11

电力大数据

物费需求Hi测应用模型

—物资需求模型应用应用模叟：

y=/[°'/'（肛‘）+°：/：（x/）]

电力，资料类量务

•2009年，31网公司总部■立了主数网标s.•£AS,

«.下发到四JI公司执行的物资主数据座有，・l

16个大类,125个中类,765个小类，万能■近定理模型参数;一

60670条物|幡码.2013年，下发到四川公万髭■近盅建星由前葬

司执行的褶窗主数累席有25个大类.321个大的•等*KotenogEs・出；Ad;/）:物资需求发君”础模型.如通过机II学习

中为597mML1407734HW4M.的.Mk>A9a:ll£/<n…刎'方法内施的预潮fl盟.

为・汪任・数学猊9的QU〃♦.，）：年度物责it求计划，即11物,在，时刻的需

•以四川公司为例.电力«贵需求大妁有14求挽计；

万多肿物资，井且仍处在一不断增加的状

态中.不同抑类的物资的短个时间般内的需总存中的<・）.使s,：M/年被纳入统计的项目类型的投资■;

求爆不同的，不同附类的物资的需求13好也•W"/<'（•--•••：项目类型的效■;

K中，方裸■大于0的无I1小.

是不同的.£:第，年第，个项目类0的投资■.

”:加如;

乱，：：权■变■.且a+a；=i.

•电力公司指覆主收事系统中的14万多神嘴!小员G14O4OO9I片制小0•他1米

费中，有些物费的需求分布很・幅■松事历

史的需求败搪而寻找出一脚"定的数学函败MH/1A实际做FUMtft年度计划依

关系.如下的标：2012013459S345670

20120290750736490

■示：201203106484866912000

:二r'"力nj20120416X991262so0

20120558374477720

iiiiiiiiiimiiniiii

201206181940663210

12

行业大数据应用面对的挑战

硬件无法跟进

数据规模的

指数级漕长

专业人才匮乏

13

CONTENT大数据应用生态

2大数据平台

A

=大数据政务经济财税■K生旅游

成型政法环保工业商用

E大敬照■)M-,

P主题应用大数据大数据大数据大数据大数据大数据大数都

L

大数据门户展示核动数据可视化应用可视化大屏

根因

大数据大数据关系

预测

铸喉

分忻

A知识认知分折

可视化大价显示控制模板分折

系统

-敏捷BIF系统

平台平台系统

O

)>大数据治理平台大数据存储大数据智

O能运维平

O数据共享开放与服务台

数据台账

S储运

冶

Q炼

s数据H录智能

部潜

系统

e数据审计数

然

a元

治

数数据安全大数据基础架构

理

据

数据质髭并行批处理其他

流Hadoop

管Spark

理

程流计算

数据标准

资

HDFS滁

监

控

系

统

捡矿大数据交换汇

洗矿集平台

然靠T原始0”原始Q流媒体互联网'分布式

选矿数据烟囱HRDB、-FILEb收据>'数据RDB

15

构造大数据的数据之源

大数据交换汇集平台

16

大数据交换汇集平台核心价值

§

开发环境

集成设计数据联合

用宜观且以角色为基础的图ETL

获得虚拟访问多种数据库结

形用户界面，管理数据处理,用可视化端到端的事件抽取、转换、加载，通过开箱即

设计器，建立和编辑数构、企业应用、主机遗留旧

提供摭拽功能，源系统访问用的基于SQL的数据转换功能支

I和可自空皮的元数据树据管理流程文件、文本、XML.消息队

力ELT.荻7更疝的灵活性,—--------

ffl

迁移与同步

互联互通

管理与监控可以在多种数据库、企业应用、

相较「•其它解决方案.WYDC原踪作业状态和性能报告主机遗留旧文件、文本、XML、

数据管理能够实时或批或地在以及趋势信息的各项指标消息队列以及其它源之间，进

更多的平台上链接更多数据源行数据如迁移和同步.，

ETL概述

更多类型的数据来源

§tilK支持各种数据源，包括DB2、Oracle.Mysql等各种主流数据库，以及结构化文件系

数据库数据仓库其它数据

统、Excel.Xml、LDAP、SOAP/WebServcie、CSV文件和RSS等各种数据源.

更广泛的连接方式

数据旅连接支持集群，和数据库分区访问。数据陈连接的方式支持JDBC、ODBC和

JNDI方式，提供了数据连接池功能，能够大大提高数据库的访问效率。

⑥更人性化的控制方式

提供了图形化界面的操作方式，开发人员只需拖动相应的组件到控制台即可.

®更强大的性能和处理速度

采用并行处理的方式实现数据的高效处理，支持10G以内的大数据量的数据采集，

并在网络断开后至新执行任务时，支持断点续传功能。

18

ETL核心架构

ETL月艮务器统一管理平台

认证授权

监

控

元数据I处理流程I任务调度I性能管理I交换管理管

理

转换引擎任务引擎接

口

I

ETL资源库

数据

资源库

丰富的ETL构件库

，频QJRfiita

一&

►Fte•««OXSD^iZE从—*文件名.J*vaScripti5364h3

-2*<tQSBURUISW3X口waeqWAJtn口tl^f：

o研U怯US亶。星百可用埠加MC婀，r«a-<a*可例a

山：!加亶位序列(MW)

a38■由收件/BM否存在J窗匕aA列折分力多为

.血Jtt«^«ras^eni才M・•i列诉分为多行