大数据中心建设思路2

数据中心建设思路西安美林杨晓辉国网数据中心概念数据建模设计梳理采集（ETL）数据存储数据服务总线数据中心建设任务数据整合——3统一（模型、数据源、口径）综合分析——横向分析专业应用——纵向关联分析数据共享——数据服务、企业总线4数据中心目标架构展示层数据分析应用层数据集市层企业数据仓库(EDW)数据存储层数据源层跨专业综合分析营销分析财务分析生产分析设备分析人力分析计划分析综合统计分析电力市场分析营销生产电力市场综合ERP紧耦合业务应用数据营销、生产、综合等业务应用和其它外部数据DSOPSAInfoCube物资分析项目分析跨专业综合集市企业门户ODS数据抽取数据整理数据转换数据汇总集中存储数据分析应用方式展现方式源系统5数据中心执行架构批处理服务性能与可用性服务通用服务最终用户访问数据抽取数据源系统、非系统数据存储知识发现在线分析查询数据访问报表报表元数据管理服务技术元数据业务元数据元数据知识库数据仓库架构数据访问数据访问架构门户系统数据全域服务任务重启与恢复任务调度监控被拒绝数据管理错误处理异常日志与审核跟踪文件传输帮助数据归档线程管理参数化文档管理服务数据注解应用连接服务中间件连接器抽取转换数据集市数据仓库加载数据缓存ODS排序过滤清洗抽取转换关联更新加载DSO套装软件业务6数据中心物理架构业务系统数据库服务器心跳线DSO/DM磁带库光纤交换机光纤交换机磁盘柜存储WEB备份服务器BI应用服务器群ETL/Monitor/AnalysisETLAnalysisHPODSDW/DMBI应用服务器可由多个服务器组成应用集群数据中心建设的终极目标统一且完善的企业信息模型统一数据源、统一数据口径一致的数据出入口（数据服务总线）管控中心（各种专业分析）企业统一数据模型数据边界——顶层信息模型实现最终目标的困难数据源不健全、数据质量差模型统一设计工作量大底层建设成效缓慢11网省电力力数据应应用所面面临的挑挑战业务挑战现有分析系统仅提供简单的报表能力，功能单薄领导层无法从企业全局角度出发对企业各个业务条线进行跨业务、多角度、多层次的综合分析业务分析系统多集中于各自专业领域，而跨业务专题的分析应用能力尚不具备存在相同数据多头上报并且上报数据不一致的问题缺乏对现有数据的高级分析应用，没有合理地发挥和利用网省电力业务数据资产的价值技术挑战各个业务系统相互独立，业务人员难以进行跨系统业务分析现有分析型系统与相应生产型系统耦合性较强，受到生产型系统影响较大，缺乏对全业务分析的支持数据不一致问题较严重，对于相同业务数据存在多个不同版本各业务系统自行管理数据，业务数据的含义在企业的各个部门内存在不一致的解释各类业务系统内数据质量较低业务因素数据分析类型划分不够明确缺少统一的报表与指标体系规范缺乏明确的数据认责技术因素缺乏规范的数据架构缺乏明确的数据定义数据分布不合理数据模型不一致数据管理不规范缺乏企业级整合的数据缺乏有力的系统实施和使用管控机制数据中心心的建设设策略短期见效效、应用用驱动展现全局局指标数数据，早早出成果果，短期期见效，，以应用用促建设设非源头数数据直接接导入，，健全全全局类指指标数据转移部分分业务系系统查询询功能切断统计计途径推动数据据中心应应用数据中心心建设最终是为为解决业业务部门门专业分分析能力力而服务务，在这个个逐步推推进、不不断完善善成熟的的过程中中，应着着重解决决影响应应用实用用性不强强的如下下几点：：好的经验验、方法法和操作作流程是是关键，，促进信信任关系系的建立立，解决决互不信信任的局局面。在一套有有效的方方法的指指导下，，同时遵遵照一个个好的流流程，就就容易得得到领导导支持，，得到业业务人员员的有效效参与和和技术人人员的有有力配合合解决长周周期项目目中期没没有任何何产出的的现状消除领导及业业务人员对数数据中心建设设疑虑建设期间、获取取业务人员对对实施过程中中的认可和支支持，从而不不断增强他们们对项目的信信心及应用实实用性的肯定定解决企业数据据“进口”与与“出口”数数据统一切断网省业务务人员获取统统计数据的其其他来源，统统一定义从数数据中心获取取切断业务应用用向总部交换换数据的其他他途径123业务部门主导导过程中不断出出成果切断原有数据据统计、汇报报方式数据中心的建建设方式1、自顶向下（（追溯法\分析应用法））既先分析报表中中指标数据，，再根据指标标的构成进行行追溯分析，，直至建设粒粒度到最小的的、不可再分分的业务细节节数据；这种种方式有利于于梳理统计类类指标，分析析企业中各统统计指标的口口径。侧重纵纵向数据关联联。2、自下而上（（数据整合法法）这种建设思路是先先建立企业的的概念模型，，然后利用数数据仓库和和企业建模标标准等思想进进行全面的数数据模型设计计、物理模型型设计。侧重横向分析析和标准建设。3、折中建设建设方法对比比方法1.先数据整合、、再构建分析析应用方法2.先构建分析应应用、再进行行数据整合（（或者不进行行全局整合））方法3.边构建分析应应用、边进行行数据整合优势挑战适用于业务较为简单单或业务需求求明确数据基础较好有成熟建模经经验业务条线复杂杂、数据基础础水平不一、、应用需求层层次不同要具备成熟的的数据标准和和数据模型数据整合投入入较大，短期期内与分析应应用收益不能能相符可实行有效的的数据质量管管理可快速进行分分析应用的扩扩展分析应用快速速见效数据质量无法法保障只能满足部门门级使用分析应用快速速见效逐步深化的建建设方法，兼兼顾效率和可可扩展性调动业务驱动动力工作方法法的统一一致致建设团队的有有效分工、协协作建议采用方法3进行数据中心心数据整合的的建设分析应用演进进细节数据

单指标分析

综合分析专业分析建设设方法17业务驱动力梳梳理分工协作模式式确认建设任务分工工实施验证业务部门专业分析建建设驱动力调调研按专业分析建设指导导思路，深化化业务部门专专业分析需求求调研按数据耦合度度分工建设可按源系统接接入管理、数数据整合管理理、分析应用用建设管理的的方式分工建建设组建专业分析析应用建设团团队，同数据中心运维团队队建立分工协协作机制，有有效推进数据据整合工作按试点、推广广、验证的数数据中心建设设流程迭代完成数据中心逐条线建建设策略的部部署18选择合适专业业分析应用满足业务部门需要要量身定制的的业务需求生产分析举例例典型日负荷曲曲线增长趋势势分析峰谷差分析责任频率合格格率分析电压合格率分分析变压器负载情情况分析安全生产分析析举例人身事故分析析设备事故分析析电网事故分析析电力设施保护护分析设备障碍情况况分析避免综合统计计查询建设涵涵盖面广、集集中展现指标标集合的现象象解决数据粒度度粗放，业务务主题分析不不够深入的问问题按专业分析条条线逐步完成成数据整合，，有利推动一一体化平台数数据中心的建建立专业分析深入入性强实施路线成熟熟度高分析深入性强强，需求定义义严谨专业分析内部部耦合性强设计结构要求求严谨专业分析19数据中心共享演进进继续完善数据据交换平台，，提升交换效效率、性能，，足以支持远远程大数据传传输的实现。。在服务质量保保证方面，关关注数据交换换场所的安全全性、可靠性性。构建数据交换换接口区数据据接口规范，，随着数据仓库建设的进进度而扩展接接口区数据规规范。综合数据交换换区域营销数据交换换区域生产数据交换换区域ERP数据交换区域域共享数据区域设计总部深化数据据获取日报数数据细化数据深度提升数据共享性能能完善优化完善特定业务需求的级联要求基本成型完成基于细粒度历史数据的专业分析数据起步速成完成基于粒度粗放数据的综合指标查询数据

数据中心功能设计21展示层数据分析应用层数据集市层八大业务应用用数据和其它它外部数据安全生产财务绩效设备生产企业数据仓库库(EDW)数据仓库层数据的抽取/清洗/整合数据源层安全生产分析析营销分析财务绩效分析析电网运行分析析设备生产分析析人力资源分析析项目分析物资分析综合统计分析析电网运行电力市场分析析人力资源项目电力市场营销物资综合统计网省电力公司司数据仓库逻逻辑架构数据应用分析析通过企业级级数据仓库及及数据集市提提供数据支持持，并通过前前端展示层将将分析的结果果用合适直观观的方法展现现给最终用户户22数据仓库能力力蓝图数据仓库集中整合信息描述数据移动分析展现质量保障高级应用提供多维分析析能力，使得得用户能够把把一个实体的的多项重要属属性定义为多多个维度进行行深入分析，，并能对不同同维度值的数数据进行比较较；同时，还还需具备数据据挖掘能力，，帮助业务分分析人员在现现有数据中识识别数据的模模式，针对整整个企业的状状况和未来发发展作出较完完整、合理、、准确的分析析和预测，从从复杂难懂的的数据中发掘掘出指引企业发展展需要的路径提供标准的报报表和图表功功能来帮助不不同管理层人人员做出正确确决策；针对对具体分析应应用建立数据据集市为前端端提供高效的的数据查询和和分析服务为了方便整个个数据仓库保保存信息的管管理，需要具具备强大的元元数据管理功功能，以实现现各类技术术术语与流程在企业内部的统一定义通过数据仓库库，使得数据按照业务主主题进行存存储，完成成对分散数数据的整合合工作，形形成企业内内部“唯一一事实”提供较强的的数据抽取取、转换与与加载能力力：能够高高效地将前前端业务分分析所需要要的各类数数据移动到到数据仓库库内，根据据预先制定定的业务规规则对数据据进行处理理转换使其其符合目标标数据格式式，并根据据前端展现现需求提供供高性能数数据加载机机制数据仓库应应该具备完完善的数据据质量管理理机制，确保企业内内部数据的一致致性与准确确性，提升升数据仓库库分析结果果的可信性性23数据应用的的业务目标标根据对国际际先进电力力企业的研研究，数据据应用工作作可以通过过提高四项项能力（即即电网安全全运营管理理、电力营营销及服务务、财务绩绩效分析和和资源计划划及决策））来促进电网的业务发展展。数据应用提高电力营销管管理及服务务能力通过对用电电量、电费费、电价的的分析，提提高电量的的需求预测测能力、价价格制定能能力全面面了了解解用用电电户户的的电电力力消消费费和和缴缴费费情情况况，，帮帮助助制制定定相相关关的的用用电电政政策策和和服服务务措措施施.分析析营营销销手手段段及及效效果果，，提提升升营营销销策策略略的的有有效效性性提高高电网网安安全全运运营营管管理理能力力通过过对对设设备备和和电电网网的的运运行行状状况况、、检检修修、、缺缺陷陷、、事事故故的的及及时时准准确确掌掌握握，，提提高高设设备备和和电电网网的的监监控控管管理理能能力力，，科科学学管管理理电电网网设设备备资资源源；；通过过对对安安全全人人身身伤伤亡亡事事故故的的分分析析，，提提高高事事故故管管理理和和防防范范能能力力提高财务绩效分析能力反映企业单位位的财务成果果；指导企业业单位降低成成本和费用，，增加收入；；充分利用资资金，创造好好的经济水平平员工绩效分析析，从组织和和个人两个层层面为绩效管管理提供支撑撑依据。提高资源计划及决决策能力完善报表管理理，为领导及及时提供全面面的关键业务务信息。通过国网业务务运行状态的的分析和监控控，提高信息息预测能力，，为领导的科科学决策提供供保证，电网用户前台业务人员后台管理人员决策领导数据分析应用用的业务目标标——通过构建四项项能力来促进进网省电力业业务的发展24数据分分析应应用基基本涵涵盖了了网省省电力力所有有业务务数据据范围围安全生产分析设备生产分析财务绩效分析电网运行分析电力市场分析营销分析人力资源分析物资管理分析项目建设分析业务监控电量电费电价分析销售分析市场开发分析需求预测营销分析线损信息分析客户服务分析机构构成分析定员定岗分析人员组成分析工资分析教育培训分析绩效考核报表与信息查询销售分析物资收入经济分析物资消耗经济分析物资库存经济分析分析预算超时限分析市场信息分析建设情况分析投资情况分析投产效果分析分析与国网公司生产建设过程中发生的各类人身伤亡事故相关的数据统计设备构成分析设备动态信息分析设备检修分析设备缺陷分析设备试验分析财务指标资金分析成本分析利润和收益分析负荷分析电压质量分析电量平衡分析网损分析无功补偿分析电网保护设备分析交易量分析交易费用分析电力价格分析市场需求预测综合分析计划统计生产经营指标分析用电营业指标分析电网运行产品成本、销售收入和利润电网建设安全指标25公司领导财务人员生产人员计划人员调度人员人资部门人员项目管理人员科信管理人员物资管理人员营销人员电力交易人员网省电电力各各层次次用户户通过过数据据分析析应用用而受受益26保证设设备综综合信信息的的完整整性和和历史史性从横向向确保保完整整性：：设备运运行的的情况况设备消消耗的的水、、煤、、气记记录设备运运行的的可靠靠性记记录记录设设备的的测试试信息息。。。。从纵向向确保保历史史性：：当期上期历史同同期历年情情况。。。。设备管理监控人员/后台管理人员数据整整合支支持统一设设备视视图设备台台帐信信息设备检检修设备测测试设备故故障设备运运行设备消消耗设备事事故设备环环境设备可可靠性性其他信信息(ODS)数据仓仓库ODS保障数数据的的时实可可访问问性数据仓仓库保保障数数据的的历史性性统一信信息视视图提提供了了快速速访问问主题题全面面信息息的能能力某电力力设备备27数据仓仓库建建设策策略比比较重复的的ETL发开和和数据据整合合，人人力资资源浪浪费重复的的ETL工具，，前端端分析析工具具，数数据仓仓库平平台软软件的的购买买。各自的数数据模型型设计，，集市之之与集市市之间潜潜在的新新一轮数数据整合合需求。。无丰富的的企业全全面业务务数据支支撑，无无法提供供跨系统统的业务务分析能能力集市各自自的指标标定义，，在企业业层面，，容易出出现不一一致不符合一一体化平平台建设设要求形成企业业范围内内统一信信息视图图建设统一一、可重重用的ETL流程ETL工具，前前端分析析工具、、数据仓仓库平台台单次采采购和开开发，有有效降低低TCO丰富的企企业全面面业务数数据支撑撑，领导导以及业业务人员员能够得得到更加加丰富的的数据各业务部部门可根根据自身身需求在在统一数数据仓库库平台上上建设更更深层次次的高级级数据分分析应用用建设元数数据管理理机制实实现企业业内术语语理解一一致建设统一一的数据据管理机机制，提提升数据据质量推荐实现方法法I—业务部门门单独建建立各自自数据集集市，无企业层层面的统统一的规规化和协协调实现方法法II—信息部门门牵头统统一建设设企业数数据仓库库VS企业级数据模型建设目标与方法29企业级概念数据模型企业级逻辑数据模型企业主题主题逻辑数据模型物理数据模型指导细化概念数据模型逻辑数据模型物理数据模型转换当前已有有成果在相当长长的时间间内，还还需要做做的事情情数据模型型建立过过程30数据集市市层八大业务务应用数数据和其其它外部部数据数据仓库库层数据源层层直接满足足上层数数据分析析应用要求查询询的高效效性和有有针对性性高度聚合合，一般般无明细细从技术而而言是星星型模式式数据分析析模型………主题1主题2主题n………基于主题域侧重于对企业业范围内数据据进行整合明细数据与聚聚合数据共享享从技术而言是是3NF模式数据仓库模型型数据模型在数数据仓库架构构中所处的位位置31企业级概念数数据建模目的的主题主题主题主题主题主题主题主题主题业务数据业务数据业务数据业务数据业务数据业务数据业务数据业务数据业务数据数据分类企业级概念数数据建模的目目标在于识别别网省电力业业务主要数据据主题并根据据各个数据主主题间的逻辑辑关系划分其其所属数据主题域。数据主题域集集中反映了某某方面的业务务内容，通常常是同类或关关联关系较为为紧密的数据据主题的集合合（如，设备备主题包括了了设备台帐、、设备运行相相关事件等多多个数据主题题）。数据主题是任何可以区区分的人、地地点、事情、、事件或概念念，信息围绕绕它来保存。。属性是实体体的特性或数数据字段。数数据主题域域是数据仓库库主题建模的的基础，通过过细化数据主主题域即可建建立统一的数数据仓库模型型。统一数据仓库库模型是网省省电力公司数数据仓库进行行数据整合和和集成的重要要基础。32企业级概念数数据建模方法法数据主题梳理理—通过仔细分析析网省电力公公司各类业务务系统详细说说明，IT咨询组从中梳梳理出网省电电力公司业务务所产生和需需要的主要数数据并形成数数据主题清单单，这些数据据主要包括主主数据和事物物数据两部分分：主数据是是指客户、供供应商、设备备台帐等，而而事务数据是是指网省电力力具体业务运运营所产生的的各种事务型型数据，例如如设备检测数数据、调度交交易数据等。。数据主主题域域设计计—根据分分析整整理得得到的的数据据主题题清单单，并并结合合这些些数据据的特特点和和网省省电力力具体体业务务关注注点即即可归归纳抽抽像出出数据据主题题域。。主题题域集集中反反映了了主题题相关关的所所有业业务内内容，，通常常是同同类或或关联联关系系较为为紧密密的数数据主主题集集合业务系统详细说明数据梳理数据主题清单归纳整理数据主题域33数据据主主题题域域划划分分安全全客户户产品品设备备电网网财务务资产产物资资项目目人员员与与组组织织综合合管管理理事故信息事故损失安全记录客户基本信息客户信用客户电价客户表计信息客户变更客户消费电能客户帐单客户负荷客户缴费客户产品订购客户服务产品品基基本本信信息息产品品价价格格产品品质质量量保保障障服务务流流程程定定义义设备台帐设备运行设备检修设备测试设备消耗设备环境设备故障设备可靠性电力成本电力价格电网结构电力调度电量交易电力市场预测科目银行凭证会计帐簿财务报表资产卡片资产形成资产租赁资产借用资产变更资产调拨资产报废清产核资资产折旧投融资资产报表物资编码物资分类物资供应库存信息出入库管理项目基本信息项目计划信息项目设计信息项目管理信息设备材料信息竣工决算信息投产成果信息需求信息费用信息合同信息招投标信息业绩信息职位信息调动信息奖惩信息培训信息社保缴纳劳保领用外事信息人员基本信息薪酬福利信息社会保险信息劳动保障信息组织机构信息法律国际任务同业对标审计信息纪检监察计划统计服务务质质量量考考核核服务务绩绩效效分分析析34数据据主主题题域域详详细细解解释释安全全安全全主主题题域域用用于于描描述述公公司司运运营营过过程程中中的的人人身身事事故故、、电电网网事事故故和和安安全全损损失失等等信信息息客户户客户户主主题题域域主主要要由由客客户户的的基基本本信信息息、、计计费费缴缴费费信信息息、、客客户户服服务务信信息息等等组组成成产品品产品品主主题题描描述述国国网网公公司司提提供供的的电电能能、、热热能能与与国国网网公公司司所所提提供供服服务务的的描描述述与与价价格格信信息息以以及及与与服服务务质质量量、、服服务务效效果果相相关关的的各各类类记记录录设备备设备备主主数数据据用用于于描描述述企企业业发发电电、、输输电电、、配配电电、、供供电电四四大大类类在在网网运运行行设设备备资资源源、、运运行行和和调调度度信信息息、、测测试试、、破破坏坏和和环环境境等等信信息息电网网电网网主主题题域域包包含含了了市市场场的的电电力力价价格格、、预预测测相相关关信信息息，，网网间间、、电电厂厂电电网网的的交交易易信信息息，，以以及及电电力力调调度度中中设设备备产产生生的的相相关关数数据据财务务财务务主主题题域域描描述述了了财财务务的的核核算算、、预预算算、、固固定定资资产产、、资资金金数数据据以以及及会会计计账账目目等等相相关关数数据据资产产资产产主主题题域域描描述述了了与与国国网网公公司司各各类类有有形形/无无形形、、金金融融/非非金金融融资资产产相相关关的的各各类类信信息息物资资物资资主主题题域域描描述述了了与与国国网网公公司司的的物物资资与与物物资资管管理理相相关关的的各各类类信信息息项目目项目目主主数数据据表表达达了了基基建建项项目目、、跨跨区区电电网网项项目目、、投投资资项项目目、、大大修修项项目目、、技技改改项项目目、、科科技技项项目目、、用用户户项项目目和和信信息息化化项项目目的的全全生生命命周周期期的的信信息息人员与组组织人员与组组织主题题域用于于描述公公司业务务活动中中人和组组织结构构信息综合管理理综合管理理主题域域描述同同业对标标、计划划统计、、审计、、法律、、纪检、、国际任任务信息息35概念逻辑辑模型36主题域概概念模型型产品客户安全设备37主题域概概念模型型（续1）物资电网资产财务38主题域概概念模型型（续2）综合管理理项目人员与组组织39数据建模模一步工工作：在在概念念模型基基础上，，进行国国网公司司企业级级逻辑数数据模型型的建设设安全客户……企业级逻逻辑数据据模型包包含近千个个业务实实体及及其复复杂的的关系系巨大的的挑战战！！！！企业级级概念念数据据模型型细化企业级级逻辑辑数据据模型型*企业业级逻逻辑数数据模模型的的建设设应该该以数数据仓仓库建建设为为线索索，是是数据据仓库库建设设的重重要工工作之之一示例数据中心建设目标和架构41国网数数据中中心整整体建建设目目标体体系电网安全管管理能力营销管理与与服务能力力财务绩效分分析能力资源计划决决策能力数据应用安全生产分析财务绩效分析营销分析电网运行分析设备生产分析人力资源分析计划统计物资管理分析电力市场分析项目建设分析42综合决策综合国网业业务指标建立数学模模型，综合合预测完善关键绩绩效指标考考核等应用用制定策略，，指导业务务实践综合决策套装软件内内紧密耦合合的专业分分析通用平台专专业分析跨平台的专专业分析...专业分析绩效预测指标挖掘…人力生产财务套装软件业业务基础数数据整合在套装软件件内部完成成非套装软件件业务在通通用平台整合完成交换数据基础数据整整合…层次：决策层内容:指标衡量层次：管理层内容:专业分析综合分析…物质项目设备计划国际合作营销招投标营销分析生产分析人力分析财务分析物质分析项目分析设备分析计划分析数据中心整整体建设目目标体系在在应用架构构上的分解解43基于通用平台实实现套装软件营销系统生产系统……EDW-ODS企业级数据据仓库通用平台前前端集市集市集市集市前端集市层数据仓库层层ODS源系统DW中应用国网网统一的数数据模型和和数据标准准；整合后的数数据通过开开放平台前前端进行分分析和展现现；风险可扩展性较好好，适应未未来应用需需求的增长长有利于企业业级数据模模型的建立立有利于系统统间共享信信息的统一一信息视图图建立44数据中心数数据架构数据访问功能和方式46主要数据访访问功能名称功能描述报表实现预定义和用户自定义报表功能通过报表工具实现预定义报表的自动生成和分发，并能够灵活的实现用户自定义报表的功能。即席查询进行准实时的业务查询通常即席查询的功能会涉及准实时的业务信息，可以由ODS区提供此类应用，通过即席查询工具，不需要非常专业的SQL知识即可完成业务信息的即席查看。联机分析利用OLAP分析手段实现多维度的交叉分析利用OLAP分析工具，配合设计良好的OLAP数据模型，可以完成业务人员对业务的分析需求。联机分析的手段包括各种图形和表格的表现，以及在其上进行的多维度的交叉分析，帮助用户快速定位和解决问题。知识发现利用数据挖掘等知识发现技术实现特定的分析专题用户获取有用信息的能力体现了数据仓库系统的价值，通过数据挖掘等高级统计分析技术，企业能够将数据源中有价值的信息（知识）识别出来并建立模型，同时通过自动化或半自动化的工具进行分析。知识发现应用根据专题的不同可采用自顶向下或自底向上的方法，分别适应假设验证和知识发现型的应用。47数据访问类类型、数据据访问复杂杂度和用户户层次三者者间的关系系复杂分析数据访问复杂度简单分析初级用户有经验的用户报表数据分析查询知识发现48数据据访访问问方方式式有限限制制的的交交互互灵活活的的交交互互客户户端端通通过过浏浏览览器器访访问问数数据据静态态发发布布灵活活交交互互架架构构是是能能够够提提供供最最丰丰富富功功能能的的最最新新架架构构。。除除了了与与有有限限制制交交互互相相似似的的功功能能外外，，灵灵活活交交互互架架构构能能够够生生成成包包含含嵌嵌入入式式、、可可供供交交互互、、可可执执行行内内容容的的报报表表。。这这些些可可交交互互内内容容允允许许用用户户体体验验到到接接近近于于客客户户端端/服服务务器器模模式式工工具具开开发发的的图图形形界界面面使使用用感感觉觉有限限制制的的交交互互架架构构能能够够让让用用户户访访问问实实时时数数据据。。当当用用户户点点击击链链接接来来获获取取报报表表的的时时候候，，系系统统允允许许用用户户在在一一系系列列参参数数中中选选择择自自己己需需要要的的条条件件。。这这些些HTML页页面面（（可可能能是是静静态态形形式式，，也也可可能能是是互互动动形形式式））将将被被返返回回给给Web服服务务器器并并展展现现给给最最终终用用户户静态态发发布布是是最最直直观观的的数数据据访访问问架架构构形形式式，，用用户户可可以以通通过过点点击击相相关关链链接接得得到到预预先先生生成成的的报报表表。。这这些些报报表表以以HTML文件格式存放放在Web服务器内。静静态发布的执执行架构仅由由Web服务器和浏览览器两部分组组成。报表通通常是通过批批量处理执行行产生的数据访问的实实现方式是选选择和评价数数据访问工具具的重要参考考依据,目前市场上主主流的数据访访问实现方式式分为两种：：客户端->分析服务->数据存储客户端为IE流览器的数据据访问第二种数据访访问方式因为为更容易部署署和更少的维维护成本，被被广泛的使用用和形成行业业标准开发过程组织50网省数据仓库库的演进方法法是以数据仓仓库分析能力力和数据整合合能力的提高高为主线索,提升数据管控控能力,改进数据质量量QuickWin（速赢）数据仓库建立立及完善数据仓库优化化领导决策能力力的提高数据质量的改改进数据管理能力力的提升建立领导查询询系统挑选重要的主主题进行数据据仓库建设提供联机分析析及综合报表表数据仓库基本本建成提供更全面的的数据分析以以及数据展现现可以对数据进进行更深层次次的挖掘网省数据中心心建设演进方方法51国网数据仓库库的总体实施施策略是以降降低风险为原原则，通过试试点建设积累累经验，验证证方法，从而而形成国网成成熟的统一的的数据模型标标准，数据管管控方法和流流程，数据仓仓库体系架构构。然后再大大面积推广。。这样可以保保证整个国网网数据中心的的建设在控、、有序。推广网网省试点网网省数据模模型规规划,提供基基于业业务数数据主主题的的高层层数据据逻辑辑模型型和细细节数数据物物理模模型业务数数据标标准和和代码码指标标准确确的建建立设计数数据仓仓库技技术架架构制定数数据标标准管管理及及维护护流程程制定数数据质质量管管理策策略和和方法法数据按其其敏感性性、重要要性建立立一套完完整的数数据安全全分级标标准试点的建建设宣贯推广广经验验证证执行督导导典型经验验数据模型型标准数据仓库库技术架架构数据管理理标准业务数据据标准代码指标标标准采用试点点先行，，典型经经验指导导的策略略实行全全国网范范围内的的数据仓仓库建设设52数据仓库库开发的的人员和和组织53数据仓库库开发的的阶段、、任务和和流程计划分析设计开发测试部署项目管理培训及运行行支持复查期望目目标定义方案蓝蓝图评估现状能能力定义交付策策略评估风险定义ETL功能、技术术整合设计开发执执行运行环环境制定ETL、BI产品测试计计划制定UAT计划开发BI前台展现组组件安装开发执执行运行环环境部署ETL、BI组件测试计计划完成产品测测试完成UAT测试评估部署就就绪条件完成数据转转换发布应用程程序完成操作就就绪测试完成性能测测试ETL高层需求确确认TTTTTTETL开发流程定义开发执执行运行环环境需求定义报表详详细规范建立概念数数据模型定义终端用用户访问技技术需求定义数据分分析需求性能测试计计划建立逻辑数数据模型建立物理数数据模型完成组件测测试在整个数据据仓库开发发过程中，，非常关键键的任务。。需要设入入较多的资资源54计划阶段计划阶段复查期望目目标评估现状能能力定义方案蓝蓝图定义交付策策略回顾愿景及及业务目标标定义方案蓝蓝图确认目标业业务流程定义交付策策略TTTT评定当前业业务流程评定当前的的能能力、性能、风险险评定当前技技术架构评定当前应应用程序评定当前组组织架构评定元数据据及数据管管控评定当前支支撑能力应用解决方方案技术解决方方案业务流程变变更解决方案运维解决方方案定义开发策策略定义试点策策略定义测试策策略定义部署策策略定义元数据据管理定义数据管管控策略55分析阶段分析阶段复查期望目目标定义数据分分析需求定义ETL高层需求TT建立概念数数据模型定义开发、、执行、运运行环境的的具体需求求定义用户对数数据访问的技技术需求制定UAT测试计划制定产品测试试计划制定性能测试试计划评估风险56设计阶段设计阶段定义ETL功能技术整合合方案高层需需求定义报表详细细规范TT建立逻辑数据据模型制定技术架构构及组装测试试计划设计开发、执执行、运行环环境的准备57开发阶段开发阶段ETL开发流程BI前台组件开发发TT建立物理数据据模型ETL、报表组件测测试计划开发、执行、、运行环境的的准备58测试阶段测试阶段组件测试产品测试TT性能测试UAT测试确认组件测试试周期编写组件测试试脚本发布组件测试试环境更新测试源数数据执行组件测试试，并将测试试通报错误及及时修复确认产品测试试周期编写产品测试试脚本发布产品测试试环境执行产品测试试，并将测试试通报错误及及时修复确认性能测试试周期编写性能测试试脚本发布性能测试试环境执行性能测试试，并将测试试通报错误及及时修复59部署阶段部署阶段评估部署就绪绪条件完成数据转换换TT完成部署就绪绪测试发布应用评估应用程序序是否就绪评评估技术架构构及基础架构构是否就绪评估部署站点点是否部署就就绪评估国家电网网最终用户人人员是否就绪绪并已培训完完成制定偶发性事事件处理机制制列出部署就绪绪每一阶段检检查点准备数据转换换就绪动作准备转换所需需正式数据；；清洗数据；；创建数据备备份执行数据转换换动作验证转换后的的数据执行部署测试试验证操作结果果错误修复；管管理及服务支支持能力就绪绪确认操作就绪绪验证完成通知部署、开开发及上线实实施团队数据中心功能展示财务杜邦专业分析FI业务管理模块块财务ERP业务管理模块块总共有7个分析主题；；应用到的分分析查询共有有75个；BW分析模型8个；用到的源源系统分为2类：ECCP800和外部平面文文件；数据源源总共有11个：财务管理ERP高级分析应用用ERP业务运行指标标杜邦财务分析析体系地市公司对标标指标总账应收应付固定资产贷款业务量统计凭证错误率分分析预制凭证完成成情况财务开放记账账期间查看包含了13份报表，25个分析查询，，2个数据源。杜邦财务分析析体系详细地地为用户或决决策者提供了了陕西省电力力公司本部、、物资公司、、信通公司及及各地市公司司的所有财务务状况数据信信息的综合性性分析平台，，用户通过它它就可以对各各公司的月度度财务状况及及年度财务总总结都有一个个全面的掌握握.杜邦财财务分分析体体系—模型结结构图图其他专业分析设备备维维护护成成本本分分析析电网网发发展展指指标标资产产状状况况指指标标分分析析财务务分分析析数据质量监控数据据质质量量监监控控数据据质质量量监监控控系系统统由由数数据据监监控控看看板板、、数数据据修修正正、、数数据据质质量量分分析析及及数数据据评评测测报报告告等等组组成成。。几几个个功功能能模模块块并并非非独独立立的的，，而而是是以以综综