中电投集团数据体系设计项目投标书(技术部分)-正式版_第1页
中电投集团数据体系设计项目投标书(技术部分)-正式版_第2页
中电投集团数据体系设计项目投标书(技术部分)-正式版_第3页
中电投集团数据体系设计项目投标书(技术部分)-正式版_第4页
中电投集团数据体系设计项目投标书(技术部分)-正式版_第5页
已阅读5页,还剩241页未读 继续免费阅读

下载本文档

版权说明:本文档由用户提供并上传,收益归属内容提供方,若内容存在侵权,请进行举报或认领

文档简介

(正本)中国电力投资集团公司集团数据体系设计项目投标书技术部分投标单位:用友软件股份有限公司投标日期:2012年11月26日中国电力投资集团公司集团数据体系设计项目投标书技术部分技术响应说明本章节按照与招标书内容同样的顺序针对技术部分的要求分块进行简单应答,并给出实质性响应详述的确切位置索引。 点对点应答项目条款编号是否满足要求描述3. 数据体系设计基本要求3.1总体技术要求是体现“数据与应用相对分离、数据为应用服务”的理念,设计内容覆盖数据体系设计各项内容,并充分考虑设计的各项要求,详见4.1.方案概述3.2设计原则是满足“实用性、前瞻性、先进性、扩展性”原则,并对其进行了扩展,详见4.1.2.设计原则3.3设计成果要求是除了设计文档外,增加了各种数据体系相关标准规范,详见4.1.3设计成果4.项目需求4.1数据体系模型设计是详见5.1数据体系模型设计4.2数据获取方案设计是详见5.2数据获取方案设计4.3数据应用方案设计是详见5.3数据应用方案设计4.4数据存储部署架构设计是详见5.4.数据存储部署架构设计4.5数据管理方案设计是详见5.5.数据管理方案设计4.6数据体系技术架构设计是详见5.6.数据体系技术架构设计4.7数据体系建设实施设计是详见5.7.数据体系建设实施设计5.项目实施服务要求是详见6.项目实施、管理、培训方案6.项目进度(工期)要求是详见6.4项目实施计划7.项目管理是详见6.3.项目组织保证,6.5.项目管理方法9. 培训要求是详见6.6.项目培训与知识转移10. 技术支持与售后服务要求是详见6.9.战略合作及服务承诺项目背景介绍企业概况中国电力投资集团公司(以下简称“中电投集团”)是国内五大发电集团之一,是集电力、煤炭、铝业、铁路、港口各产业于一体的综合性能源集团,在全国惟一同时拥有水电、火电、核电、新能源资产,是国家三大核电开发建设运营商之一。公司组建于2002年12月29日,注册资本金人民币120亿元。中电投集团坚持“电为核心、煤为基础、产业一体化协同发展”的发展思路,坚持“电源结构和产业结构调整”的战略核心,坚持“背靠资源,面向市场”的发展原则,坚持“建设国际一流能源集团”的发展目标,坚定实施“三步走”战略,并胜利实现了第一阶段发展目标。截止到2011年底,中电投集团拥有电力装机容量7680万千瓦,煤炭产能7350万吨,电解铝产能260万吨。中电投集团资产总额5034亿元,拥有6家上市公司,员工总数11.68万人。项目背景为加快推进中电投集团战略转型,实现“三步走”战略目标,建设国际一流能源集团,中电投集团2011年启动了管控一体化建设工作,通过进一步调整产权结构和组织结构,理顺产权关系和管理关系,优化资源配置,发挥规模效益,实现集约化、规范化、程序化、标准化、信息化管理,建立起结构合理、权责明确、治理科学、运营高效的集团化管控体系。在中电投集团管控一体化建设的“七统一”实施方案中提出了统一信息系统建设,即以中电投集团“三步走”战略目标为指引,适应产业一体化协同发展和管控一体化建设要求,统一中电投集团应用系统、信息网络、IT基础设施标准,建立中电投集团统一、集成、适用的信息系统,为中电投集团建设国际一流能源企业提供信息技术支撑与保障。中电投集团适应企业发展、集团管控和管理提升要求制定了信息化发展规划,信息系统总体架构自上而下包括六个层级:信息展现、决策分析、经营管理、综合管理、专业生产和技术支撑。其中,“管控+ERP”系统支撑决策分析、经营管理、综合管理与专业生产管理的需求,构成信息系统架构的核心。管控支持系统面向管理决策层,重点支持目标管理、分析考核与执行监控;ERP类系统面向生产运营层,以业务、财务一体化为特点,支撑人、财、物、项目、设备管理等核心经营管理以及专业生产管理。管控支持系统由三个层次构成,分别为目标管理、分析考核、执行监控,实现加强目标管理的管控力度、完善考核分析的技术支撑、实现对核心业务的执行监控的管理目标。管控支持系统拟分步骤、通过2-3年时间完成全部内容的实施。考虑到系统覆盖内容广,通过多系统组合方式建设,同时通过集成平台对各应用系统进行整合集成(目前已建立基于Fiorano的数据集成平台,覆盖集团总部、所有二级单位和部分三级单位)。在管控支持系统建设过程中将建立集团统一的指标体系。2012年启动综合分析系统、运营监管平台建设,对其他已有系统、在建系统进行完善,同步开展标准指标体系建设。“管控+ERP”信息系统建设与应用需要有效的数据体系作为支撑。管控支持系统包括多个信息系统,各个信息系统既要产生数据、为其他系统提供数据,又要从其他系统获取数据,不同的系统需要共同的数据。为有效管理和利用好数据,实现数据的标准统一、数据一致,实现数据的一次获取多次利用,减少数据的冗余、混乱,提高数据质量,中电投集团拟构建统一的数据体系,为数据利用打好基础。通过建立统一的数据体系,为中电投集团管控支持系统建设与应用提供支撑。中电投集团是一个由三级组织构成、涉及多个产业的集团企业,“管控+ERP”信息系统体系中具体系统分布于集团总部、二级单位和三级单位,系统数量多、构成复杂,为做好统一数据体系建设,拟先开展数据体系设计工作。本期中电投集团数据体系设计项目从中电投集团数据应用需求出发,结合技术发展趋势,按照“数据与应用相对分离、数据为应用服务”的理念,在中电投集团信息化发展规划体系下,根据中电投信息建设的现状和未来数据集成的需要,开展数据体系设计,为构建统一的数据体系,实现对信息资产的全面管理提供坚实的基础。对中电投集团数据体系设计项目的理解对中电投业务及信息化的理解电力行业信息化发展现状分析我国的电力行业信息化建设起步较早,早在上世纪60年代,电力行业就已经将信息技术应用到生产过程自动化、发电厂自动监测、监制以及变电站自动监测、监控方面。但由于电力行业一直处于相对垄断地位,加之变革频繁,电力行业的关注点一直处于如何贯彻体制改革和如何提高产能方面,所以整个电力行业的信息化应用水平不高,整个行业缺乏统一性标准。电力行业目前在信息化建设方面存在三大结构性问题:第一、基础硬件投入偏多,软件投入相对不足。目前,我国电力行业对于信息化建设的投入还处在大规模基础硬件投入阶段,现有网络和信息资源的利用不够。很多电力企业对于信息化建设还存在的误区,倾向于买些“看得见、摸得着的东西”,据有关数据表明,2009年我国电力行业信息化整体投入大约在120亿左右,其中硬件投入占到总投入的73%,软件服务仅占11%。而一个成熟的信息化市场,硬件、软件、IT服务的投入比例应为5:3:2。没有软件系统的支持,硬件系统无法发挥出应有的效用,因此,在信息化建设方面,电力行业的企业在信息化建设上,要坚决摒弃“信息化建设就是买设备”的想法,做到统筹规划,避免信息化资源的盲目投入和浪费。第二、专业系统众多,系统管理软件缺乏。我国的电力行业信息化建设起步较早,但由于存在行业垄断,电力行业的主要注意力多放在如何提高产能和安全生产上,因此,虽经过多年的信息化建设,目前整个电力行业仍处于专业系统众多而系统管理软件缺乏的局面,生产自动化系统的应用仍然是电力行业软件应用的主体,对于电力行业的产、输、配、售环节的过程监控有余,但对于电力企业的管理决策的支持能力则严重不足。第三、系统孤立,信息无法集中为资源。由于整个电力行业一直处于变革之中,所以,虽然有诸如《区域及省电力公司信息系统建设规范》等文件的出台,但在整个行业,大多数电力集团公司所属电厂的信息系统千差万别,由于没有采用统一的信息编码,致使集团内部各信息系统数据和信息的直接共享和交换十分困难,信息化系统孤立,各环节信息无法集中成为可共享使用的资源。企业数据中心是通过统一的数据定义与命名规范、集中的数据环境,实现数据共享与利用;按其规模划分为部门级数据中心、企业级数据中心、互联网数据中心等,通过这些规模从小到大的数据中心,满足各种应用的需求,以及实现对数据进行统一部署和管理,达到运行各种应用。在对电力行业软件使用情况中的分析中,我们发现,电力行业的管理软件使用大多还处在财务系统、人力资源管理系统以及简单的OA系统等单个管理信息化系统的应用层面,有些电力企业尝试实施ERP系统,但最后大多效果不佳。这主要因为电力行业过去为垄断行业,在垄断的环境下,电力行业对于提升内部管理的需求不高。那么,面对电力改革加快走向深入,电力行业如何从垄断的保护伞下走出来直面市场竞争,如何将信息化建设和整个行业的变革联系在一起就是摆在我们面前最严峻的问题。过去的经验告诉我们,通过流程优化(BPR),可以很好的把企业变革和信息系统建设统一在一起。因此,以流程优化来理顺电力行业各个孤立系统之间的关系,流程优化虽然是个老生常谈的话题,但对于长期处于垄断地位得电力行业来说,以流程优化来促进电力行业信息化的建设或许是电力行业信息化建设的一个突破:第一、市场化、规范化的改革思路要求电力行业打破垄断,那么整个电力行业就面临从组织到业务的全面变革,产、输、配、售各个环节将按照新的价值链顺序进行重组,这个时候,对原有流程进行优化,即符合整个行业的变革需求,又能提升电力企业参与市场竞争的实力。从根本上解决目前电力行业信息化建设存在的五大问题。第二、电力行业信息化建设“规划的缺失和系统的分裂”的局面,也迫切需要从根本上对于电力行业的信息化建设进行再思考和重新整合。在过去几十年内,信息技术应用在电力工业各个专业领域,但各领域的应用是分散和孤立的,并没有形成大系统的概念。因此在下一阶段,电力信息化的重点之一就是信息技术的集成和综合利用。首先,为了保障电力行业在信息、网络方面的可靠性与安全性,应该对电力系统光纤通信网、数据网、信息网进行整合与统一。其次是管理信息系统等信息化应用系统内部的整合。经过多年来持续不断的建设,电力行业内部各个子系统采用了各种不同的平台和管理软件,这不利于使用操作、管理维护和整体效果的发挥,因此要进行平台整合。再就是各信息化应用系统间的整合。目前在电力系统的各专业应用了管理信息系统、营销自动化系统(包括客户服务中心)、电力生产管理系统、电力市场技术支持系统、物资采购系统、GIS系统等,随着应用的普遍,各系统间也需要进行平台及内部工作流程的整合与统一。电力信息化集成的基础是电力企业管理流程的优化,没有流程优化,就无法从根本上明确电力企业各系统之间的运作关系,也就无法实现系统的集成。基于BPR的管理信息系统变革,要根据国家对于电力行业的改革思路,在电力企业内部进行基于BPR的管理变革准备和宣传教育,这也是电力企业走出垄断,面向市场的必由之路。“绿色IT”是以环保为核心设计、制造、布置和处置IT产品以及其他有关方面,其表现在信息化建设的各个方面。电力企业已经在设备采购过程中,将绿色环保指标写进了标书。相比之下,以前考虑更多的是机器的配置、价格、单程运行的性能以及售后服务质量,而现在则加重了其他指标的力度,比如节能降耗方面的要求。电力企业的绿色IT表现在机房建设、机房布局、服务器、终端设备等多个方面,例如强调选用高效低能耗的服务器,强调机柜的摆放、风道的规划、使用挡板进行冷热通道的区分,制定人流物流制度规范以及进行应用划分等等。通过采用新的技术,可以帮助电力企业实现节电10-15%以上。不仅在硬件方面,电力企业在信息化建设过程中对业务系统的有效整合,也是绿色IT的重要体现。这种整合直接带来的硬件投入的减少和运维成本的降低,也提升了企业的信息反馈和制定决策的效率。电力企业是接收信息和制作信息的生产企业。因此,其信息化建设必须以数据信息管理为核心,围绕着数据管理进行信息化建设。在进行信息化建设时,必须注意数据结构的统一规划,数据结构的一致性能够最大程度地协调个各管理环节的工作,合理的数据结构设计是信息系统得以正常运行的基础。主题数据库是应用系统的基石,主题数据库的建设是信息化建设的重中之重。主题数据库的数据是从各个应用系统的原始数据(即局部数据库),根据系统和系统的数据共用性以及数据的意义,抽取、提炼并予以加工出来。随着业务的不断发展,很多新的数据也会不断加入主题数据库。那么对于以上应用的整合问题,是我们目前的头等大事,目前在电力系统的各专业应用了管理信息系统、营销自动化系统(包括客户服务中心)、电力生产管理系统、电力市场技术支持系统、物资采购系统、GIS系统等,随着应用的普遍,各系统间也需要进行平台及内部工作流程的整合与统一。电力信息化集成的基础是电力企业管理流程的优化,没有流程优化,就无法从根本上明确电力企业各系统之间的运作关系,也就无法实现系统的集成这样信息化就没有达到最大化。中电投业务及信息化现状分析为加快推进中电投集团战略转型,实现“三步走”战略目标,建设国际一流能源集团,中电投集团2011年启动了管控一体化建设工作,通过进一步调整产权结构和组织结构,理顺产权关系和管理关系,优化资源配置,发挥规模效益,实现集约化、规范化、程序化、标准化、信息化管理,建立起结构合理、权责明确、治理科学、运营高效的集团化管控体系。在中电投集团管控一体化建设的“七统一”实施方案中提出了统一信息系统建设,即以中电投集团“三步走”战略目标为指引,适应产业一体化协同发展和管控一体化建设要求,统一中电投集团应用系统、信息网络、IT基础设施标准,建立中电投集团统一、集成、适用的信息系统,为中电投集团建设国际一流能源企业提供信息技术支撑与保障。中电投集团适应企业发展、集团管控和管理提升要求制定了信息化发展规划,信息系统总体架构自上而下包括六个层级:信息展现、决策分析、经营管理、综合管理、专业生产和技术支撑。其中,“管控+ERP”系统支撑决策分析、经营管理、综合管理与专业生产管理的需求,构成信息系统架构的核心。管控支持系统面向管理决策层,重点支持目标管理、分析考核与执行监控;ERP类系统面向生产运营层,以业务、财务一体化为特点,支撑人、财、物、项目、设备管理等核心经营管理以及专业生产管理。“管控+ERP”信息系统建设与应用需要有效的数据体系作为支撑。管控支持系统包括多个信息系统,各个信息系统既要产生数据、为其他系统提供数据,又要从其他系统获取数据,不同的系统需要共同的数据。为有效管理和利用好数据,实现数据的标准统一、数据一致,实现数据的一次获取多次利用,减少数据的冗余、混乱,提高数据质量,中电投集团拟构建统一的数据体系,为数据利用打好基础。通过建立统一的数据体系,为中电投集团管控支持系统建设与应用提供支撑。中电投集团是一个由三级组织构成、涉及多个产业的集团企业,“管控+ERP”信息系统体系中具体系统分布于集团总部、二级单位和三级单位,系统数量多、构成复杂,为做好统一数据体系建设,拟先开展数据体系设计工作。本期中电投集团数据体系设计项目从中电投集团数据应用需求出发,结合技术发展趋势,按照“数据与应用相对分离、数据为应用服务”的理念,在中电投集团信息化发展规划体系下,根据中电投信息建设的现状和未来数据集成的需要,开展数据体系设计,为构建统一的数据体系,实现对信息资产的全面管理提供坚实的基础。对中电投集团数据体系设计项目的理解项目目标本项目的总体目标是制定中电投集团数据体系建设方案,为中电投集团统一的数据体系建设奠定基础,为中电投集团建设“管控+ERP”的信息系统体系提供支撑,服务于中电投集团的管控一体化建设和管理提升。具体目标为:制定数据体系建设的总体方案,建立数据体系管理基础标准,提出数据体系的信息化支撑系统建设方案,为信息资源的整合和利用奠定基础。完成中电投集团数据获取(采集抽取、传输转换、加载)、存储、应用的技术设计方案,完成组织、流程、制度的数据质量管理设计方案,指导数据全生命周期的统一管理。明确中电投集团数据体系建设涉及的技术路线、软硬件产品类型和解决方案,满足数据体系建设所需产品及服务采购的要求。为中电投集团数据体系建设编制完整的、可操作、可实施的设计报告,满足中电投集团(包括总部、二级单位、三级单位)整体数据体系建设的要求。项目范围设计数据体系模型,明确数据管理的对象,包括共享数据模型、数据仓库模型、实时数据模型、非结构化数据模型等。设计数据获取方案,包括数据采集(抽取)、转换、传输、加载等,明确采集数据源、采集方式、技术手段、采集标准等,明确数据传输方式、转换方式、转换标准等。设计数据应用方案,包括应用提供方式、共享方式、应用提供的接口规范等。设计数据质量管理方案,包括数据管理的组织、制度、流程、技术手段,数据质量监控、数据安全管理方案等。设计数据体系的目标存储架构,包括存储内容、存储环境、数据分布等。编制包含上述内容的数据体系建设整体技术方案,制定数据体系建设整体蓝图,按中电投集团三级管理模式,设计数据体系建设技术架构,明确技术路线,提出现有数据体系、软硬件信息资产的继承、兼容方案。制定支撑数据体系建设与应用的软硬件配置方案。制定数据体系建设的实施路径与资源投入方案。与本项目相关的培训和后续技术服务。项目需求及内容数据体系模型设计中电投集团为三级组织管理体系,各级组织分为综合管理、专业管理和监督保障三类部门,具有发电(火电、水电、核电、风电)、煤矿、铝业、物流、高新(煤化工、光伏产品制造)产业板块。针对中电投集团的管理和业务特点设计数据体系模型。数据体系模型应覆盖指标数据、非指标数据、主数据、实时数据、其它结构化数据、非结构化数据等类型,按数据应用特点覆盖企业范围共享数据和专业内部独享数据,共享数据按数据流向关系分为横向共享数据和纵向共享数据。根据中电投集团信息化发展规划,结合实际业务管控模式,设计数据体系模型,明确数据体系的构成及其关系,尤其是集团范围内共享的数据模型。数据获取方案设计中电投集团目前已有部分信息系统和数据资源,未来几年将大力推进ERP系统、综合分析系统、运营监管平台、计划管理、预算管理等集团化信息系统建设,同时在二级单位、三级单位也有部分信息系统建设、部署和应用。针对中电投集团现有数据资源,制定相应的数据获取方案。在数据采集环节,应明确采集(抽取)的数据源,分析比较ETL、ESB、业务系统数据同步等方式的特点、优缺点,明确针对不同数据类型的采集方式和技术实现方式;设计数据传输、转换、加载的技术架构,制定转换、加载的标准规范。中电投集团正在建设集中统一的主数据管理系统,在该项目中将制定主数据规范、制定主数据分发的接口规范、实现数据分发等。针对中电投集团信息化现状,可能现有信息系统和数据资源不完备,需要通过人工填报方式获取部分数据,提出人工填报(报送)数据的技术手段、明确数据内容,制定采集的接口标准规范等。数据应用方案设计中电投集团在数据体系建设过程中将同步建设综合分析系统、运营监管平台、对标管理系统等信息系统,这些系统和数据应用都将基于统一的数据体系。根据中电投集团信息化发展规划和信息系统建设计划进行数据应用方案设计,明确各种数据类型的应用对象、数据提供方式、共享方式、数据提供的接口规范等;还应对同步实施的综合分析系统、运营监管平台、对标管理系统等的数据应用提出基本要求和合理建议。数据存储部署架构设计设计中电投集团数据体系的目标存储部署架构,明确各类数据在集团总部、二级单位、三级单位的分布、部署模式,明确所需的技术支撑环境。针对各类数据提出数据存储分布的方案,对各类数据分析论证集中部署、分布部署、集中与分布结合部署等模式的优劣性、可行性等,并确定最终的部署方案;给出在集团总部、二级单位、三级单位数据部署的类型。针对集中部署的数据类型,要提出配套的数据环境建设要求,明确相应的硬件平台、软件基础平台的规模、性能指标,针对分布部署的数据类型,提出配套数据环境的一般要求。数据管理方案设计针对中电投集团多组织、多专业/产业、多数据源、多数据环境的特点,进行数据管理方案设计,包括数据管理的组织、制度、流程、技术手段;设计数据质量监控方案,通过数据质量管理,建立科学、标准、规范、开放的数据环境,形成企业的数据资产。还应设计有针对性的数据安全管理方案,明确数据安全策略、数据安全管理的技术措施,提出技术解决方案。数据体系技术架构设计针对本项目需求进行中电投集团数据体系建设的技术架构设计,制定数据体系建设蓝图,按中电投集团三级管理模式设计数据体系技术架构,明确技术路线,提出现有数据体系、软硬件信息资产的继承、兼容方案。制定中电投集团数据仓库构建模型,明确数据仓库建设的技术路线、技术架构、数据结构、软件硬件平台环境等。针对中电投集团数据体系建设提出相应的基础软件平台、基础硬件平台建设方案,明确所需的技术路线和软硬件产品类型,提出软硬件配置方案,为有关软硬件产品选型采购提供具体参考。数据体系建设实施设计针对中电投集团数据体系建设进行实施设计,设计实施路径与资源投入方案,按照“整体设计、分阶段实施”的策略,规划不同建设内容的实施优先级和顺序,明确与相关业务系统协调推进的方案。在实施方案中需充分考虑保护和利用已有投资和IT资产。需将数据体系建设分解到具体项目中(如实时数据库、数据仓库、应用集成等),并提出项目实施计划、资金测算,合理测算数据体系建设的整体资金需求。集团数据体系设计的必要性及价值分析集团数据体系设计在信息化建设中属于信息资源规划的范畴。信息资源规划(InformationResourcePlanning,简称IRP)是指对企业生产经营所需要的信息,从采集、处理、传输到使用的全面规划。我们知道,在企业里,不论产品设计、材料配件采购、加工制造和总装,还是销售和客户服务等等过程,无不充满着信息的产生、流通和运用。要使每个部门内部,部门之间,部门与外部单位的频繁、复杂的信息流畅通,充分发挥信息资源的作用,不进行统一的、全面的规划是不可能的。美国信息资源管理学家霍顿(F.W.Horton)和马钱德(D.A.Marchand)等人在上世纪80年代初就指出:信息资源(InformationResources)与人力、物力、财力和自然资源一样,都是企业的重要资源,因此,应该像管理其他资源那样管理信息资源;搞好信息资源管理的目的是通过企业内外信息流的畅通和信息资源的有效利用,来提高企业的效益和竞争力。显然,搞好企业信息资源管理的前提是,首先搞好信息资源规划。目前,有些企业(特别是大型集团企业)投以巨资建立起来通信-计算机网络、各种生产自动化控制系统和经营管理信息系统,由于缺乏高层的统筹规划和统一的信息标准,致使设计、生产和经营管理信息不能快捷流通,信息不能共享,形成了许多"信息孤岛",远没有发挥信息化投资的效益。这种严重的"数字鸿沟"问题,许多人竟然熟视无睹;也有人开始关注了这种问题,但没有解决办法,或者解决问题的方法不当。还有一些企业准备实施计算机集成制造系统(CIMS)或引进供应链管理(SCM)、产品设计管理(PDM)、计算机辅助工艺设计(CAPP)、企业资源计划(ERP)、客户关系管理(CRM)等应用系统,但见到或听到一些管理咨询无效、系统实施失败的案例,虽然经过调研考察,参加过培训研讨,仍然没形成明晰的思路。要解决这两类问题,就要进行正规的信息资源规划。通过信息资源规划,可以梳理业务流程,搞清信息需求,建立企业信息标准和信息系统模型;用这些标准和模型来衡量现有的信息系统及各种应用,符合的就继承并加以整合,不符合的就进行改造优化或重新开发,从而能积极稳步地推进企业信息化建设。集团数据体系设计的必要性当前中电投存在多个系统同时运行的情况,导致数据来源不唯一、数据无法共享,造成数据不准确、不一致现象。出现这种现象的原因是多方面的。多系统分散建设为适应迅速变化的电力市场和竞争环境,中电投建设了各种面向特定应用或部门的分析型系统。此外,目前在中电投集团和二级单位各专业部门中还有多个操作型系统在运行,如各类业务平台、网络平台等。这些系统的分散建设导致同一类数据分散在不同部门及应用系统中,缺乏统一的数据来源和技术标准,导致出现数据不规范、不一致、无法共享等问题。多系统提供数据,缺乏企业级统一可信的数据源。数据多头管理由于系统的建设和管理职能分散在各部门,而各部门中数据管理的职责分散,权责不明确,致使数据管理的相关规范无法有效地执行和落实。在企业层面,缺乏统一的数据管理组织,致使企业无法统一定义数据管理的规程、标准等,相应的数据管理监督措施无法得到落实,企业范围内的数据考核体系也尚未建立,无法保障数据管理标准和规程的有效执行。同时,也缺乏对于数据管理的组织和岗位职责的界定,各部门数据管理人员安排自行决定。总体而言,中电投目前缺乏统一归口的数据管理组织,数据管理职责分散,导致权责不明,存在“人人管理,无人负责”的现象,缺乏统一完善的数据管理制度与规范,以及落实这些制度与规范的监督考核机制。缺乏统一标准由于系统分散在各部门进行管理,目前尚没有建立企业级统一的数据标准,因此当前的数据标准大部分由各部门分别制定,从而导致数据管理过程中缺乏统一规范。具体来看:1)尚未建立企业级统一的数据编码,各业务部门根据自身的业务需要和系统要求,建立自己的数据编码,从而导致各类数据编码不一致,甚至发生冲突;2)数据模型主要是在系统的建设过程中由各部门根据需要分别制定,导致数据模型不统一,甚至部分数据模型存在缺陷;3)数据指标体系也主要是各业务部门根据系统建设的需求分别制定,对于指标的口径解释不一致,且部分数据指标缺失。总之,目前在中电投内部,不同业务线在不同系统中对同一数据指标的据口径不统一,数据模型也自成体系,没有企业统一的数据模型。缺乏完善的数据质量管理体系目前企业内的数据质量管理主要由各专业部门分头进行,数据稽核措施停留在专业线内部,专业线间缺乏交流,各自为政;跨专业的数据质量沟通机制不完善;缺乏清晰的跨专业的数据质量管控规范与标准,数据分析随机性强,存在业务需求不清的现象,影响数据质量;尚未全面实现数据的自动采集,处理过程存在人为干预问题。而在各部门也存在数据质量管理人员不足、知识与经验不够,监管方式不全面等多方面的问题;同时,缺乏完善的数据质量管控流程和系统支撑能力。数据生命周期管理不完整缺乏完善和统一的数据生命周期管理规范和流程,不能确定过期和无效数据的识别条件,且非结构化数据未纳入数据生命周期的管理范畴;无IT工具支撑数据生命周期状态的查询,未有效利用元数据管理,提升数据生命周期的管理水平。对数据安全认识不全面目前企业对数据安全的认识主要集中在数据安全策略、用户授权访问方面,在数据安全审计、数据安全事件处理、数据风险管理等方面认识不够全面。部分部门设置了数据安全管理岗位,但职责仍有待明确。对数据安全级别的定义不统一,信息披露审批机制有待完善。数据体系设计价值及要求针对企业目前在数据管理方面存在的问题,中电投数据体系设计目标,即实现数据整个生命周期的统一管理,实现统一数据管控,提供全面、统一的数据服务,灵活支撑业务,为企业精细化管理提供保障,为企业发展创造价值,以提升企业运营与管理能力,打造企业核心竞争力。为实现目标,要求数据管理工作达到以下六方面的要求:1)听得懂:统一数据“语言”,要求数据管理“有标准”,即具备完善的数据管理标准规范,保证在全集团内遵循并应用统一的数据标准;2)不出错:在数据整个生命周期的各个环节建立完善的数据质量稽核机制,确保数据的准确性,要求企业具备完善的数据质量管理规范;3)不乱改:明确数据的所有权及更改权限,制定完善的数据所有权管理规范,确保对数据的所有更改均有“法”可依,有“据”可查;4)不丢失:建立数据的备份机制和容灾机制,制定完善的数据安全管理规范,确保所有数据有备份,可恢复;5)不泄漏:根据内控和集团信息保密委员会的相关要求做好数据的保密工作,防止信息泄漏;6)易使用:制定完善的数据服务管理规范,保证数据易获取,易应用,以充分发挥数据作为企业资产的价值。总体技术方案方案概述总体技术要求中电投集团数据体系设计应具有国内领先水平,在可持续性方面应具有较大的发展空间和较大的升级空间,设计成果应具有一定程度的超前性。在设计中应体现“数据与应用相对分离、数据为应用服务”的理念,将数据体系作为企业信息化建设与应用的重要基础支撑,设计的数据体系要具有较好的稳定性,以保证其持续可用性。设计应结合有关信息系统对数据应用的需求,适应未来中电投集团各信息系统建设对标准数据体系的应用。数据体系设计应遵循业内标准规范,采用先进和成熟的技术。对本项目中所采用的技术及其适用的标准规范进行逐一描述,说明其对设计要求的符合性。针对本技术规范书中的数据体系建设需求提出设计方案,并对数据体系实现方法进行描述,包括数据体系中的模型设计、数据管理对象之间的接口设计等。对本项目的技术需求充分理解并提出科学、合理、符合本项目意图的项目设计方案,包括清晰的设计思路、详细的技术方案、具体的实施演进路线和有价值的建议,以及该方案所需的前提条件和实施风险分析。所提供的方案必须是完整的、具有可操作性的。设计原则先进性原则数据体系设计思想先进,设计方案既能体现出对中电投集团的深刻理解,同时能够对持续建设和对业务需求的满足提出科学合理的建议。在进行总体规划时,充分考虑技术的发展方向,选择目前业界先进和成熟的技术作为整个平台的技术架构,能够保证支撑平台的需求,并且平台有不断发展和扩充的余地。技术先进性:技术框架采用SOA体系架构,符合J2EE规范,采用B/S集中模式,在软件设计开发时,全部采用面向对象设计技术,组件化开发技术,采用MVC,ORM,WebService、XML等比较成熟而又有发展前途的先进技术。结构先进性:由于一个庞大的系统不能在短时间内开发完善,所有设计采用平台化技术,设计规范、灵活、利于扩展的系统结构,系统数据结构设计合理,灵活,并采用基于元数据设计的模式,利于扩展能够自描述。并且保证数据、界面,处理流程的数据描述一致。标准化原则咨询实施过程标准化:结合用友的开发实践经验,进行项目管理和建设使用咨询项目实施规范标准、文档标准、管理标准、质量标准,以提高设计的可靠性、可维护性、和可移植性。数据体系相关标准制定:在数据体系设计过程,与中电投信息标准化建设相融合,制定数据体系相关数据标准和管理规范。开放性原则系统架构与技术平台设计选择充分考虑其开放性,在选择产品上,遵循统一技术标准构成一个开放的、易扩充的、统一的软件平台,全面支持跨硬件平台、跨操作系统、跨数据库、跨中间件,在系统扩充和升级时能够实现平滑过渡。基于框架的组件化设计,可以随时增加新的功能模块和业务组件,基于国际标准XML的数据交换语言,支持与第三方软件的企业应用集成。数据体系本身的设计,要考虑到其开放性,包括与外部的数据交换、适应各级单位的应用特点等。兼容性原则数据体系建设应有足够的兼容性,考虑与现有的系统兼容,提供系统互通互联的标准接口,保护既有投资的同时,注重系统的扩展性,保证现有系统平滑升级。共享性原则通过信息共享实现各项资源的唯一性和跨机构可访问性,建立数据交换和共享的基础平台,为割裂业务的开展提供完整、统一和准确的数据支持。各个业务系统根据相应的权限可以查询和调用平台中的相应信息,为我所用,避免信息的重复录入,提高资源的利用率。前瞻性原则设计成果应满足中电投集团未来数据体系建设要求,满足未来不同发展阶段的建设需求,能支持多组织架构。安全可靠原则在设计中,充分考虑数据的安全性,采用多种安全防范技术和措施,保障信息安全,达到“简便、实用、快捷、安全、准确”的目的。数据安全保密原则主要体现以下几方面:数据管理系统可通过防火墙、服务器冗余、磁盘冗余、集群技术等提供系统的安全可靠性,保证硬件设备上的正常运行。根据分层管理的原则进行权限控制,提供严格的身份验证、访问控制、数字签名、多层次的保密手段等措施,权限均实行单向向下管理,确保安全性和完整性。在数据部署方面,支持分布式部署,支持服务器集群;在安全管理方面,支持防火墙和VPN,支持SSL、数字签名和CA认证,支持多种数据备份;在权限管理功能,具有公司、功能、菜单等多级安全机制,核心数据传输时,采用加密设置。充分保证系统的高稳定性,平台支持动态资源调配、监控,可以在系统不停机的状态下进行故障节点的主动监控和自维护。经过大量企业和大规模并发应用的考验,是完善的企业级信息系统,产品稳定性好,不会让用户遭遇性能瓶颈。实时性原则由于要实现集团各直营机构的数据共享,因此本系统的各项指标响应要求实时性比较高。设计时充分考虑存储容量,网络带宽,CPU消耗,IO消耗,关键应用场景,即做到单点应用效率高,又做到并发下性能高,保证各种操作模式下的应用的效果,让领导、操作人员使用轻松、方便、快捷。可扩展性原则数据体系的设计架构应具有稳定性,设计内容可方便的进行扩展,数据体系与其技术平台易于扩充,适应公司业务和管理不断发展、调整的需要。在保障数据体系设计先进性的同时,选择具有良好扩展性和升级能力的技术,以保证技术和业务的可扩展性。在本项目建设时,也要着眼于将来的具体业务,实现可扩展的数据标准定义和业务应用。可维护性原则数据体系建成后仍需要不断的修正和完成,所以设计中应当充分考虑可维护性。可维护性原则主要体现在以下几个方面:数据管理系统具备以参数化方式配置、删减、扩充、端口设置等特点,能系统地管理软件平台,系统地管理并配置应用软件。应采用分层的设计思想,可以根据需要修改某个模块,增加新的以及重组结构以达到可重用的目的;应用部署灵活,客户化定制,能支持企业全面应用和未来扩展,满足发展过程中的组织扩张、管理变革、制度重建、流程重组等必须面临的管理变化。不追求一步到位、大而全的建设方案,而是采取整体规划、分布实施、稳健操作、适度优化的原则。先解决最关键最核心的需求问题,在取得阶段性成果的情况下再进行推进和扩展。经济实用原则与中电投集团管理体制相适应,与“管控+ERP”的信息系统架构相适应,能够对实施项目起到具体的指导作用、蓝图作用、管理作用。设计成果能够对实施项目的顺利完成起到保障作用。经济实用性主要体现下面三个方面:业务管理实用性:系统设计和开发时充分考虑各业务层次、各环节管理中数据处理的便利和可行,把满足用户业务管理作为第一要素考虑。需要符合中国的企业管理模式、管理制度。操作方便实用:界面风格一致,美观大方优雅、操作简便实用。全部界面操作均充分考虑不同使用者的实际需要,使系统操作方便、维护简单、管理方便。操作统一采用浏览器界面,操作便捷,易学易用。提供快捷方式、功能导航,菜单、语言等界面元素符合国人习惯。经济性:基于平台建设,走平台化开发、平台化集成的成熟路线,系统是基于用友的成熟的技术基础上建设,方案充分考虑,采用成熟的基础组件,以最小的成本建设本项目,并且本系统有充分的灵活性,保证系统在需求变更和维护时,成本最低。采用B/S结构,降低对客户端工作站的要求,节约了硬件成本。不在客户端安装软件,系统的升级、维护只集中在服务器端,减少了维护工作量和维护成本投。设计成果设计文档类《集团数据体系总体设计方案》项目设计的指导思想,采用的技术方法和设计结果。《集团数据体系模型设计》针对中电投集团的管理和业务特点设计数据体系模型。提供集团全部的数据主题,形成集团数据资源体系框架,为集团各业务数据资源管理提供基础指导依据。提供集团全局的数据主题框架,通过对每一个数据主题进行具体细化设计,形成从数据主题到信息实体、数据元素的层次化数据资源体系。提供集团数据分层分类的体系结构,业务数据主题、实体、元素等基础数据标准体系。《集团数据体系数据获取方案设计》针对中电投集团现有数据资源,制定相应的数据获取方案。在数据采集环节,应明确采集(抽取)的数据源,分析比较ETL、ESB、业务系统数据同步等方式的特点、优缺点,明确针对不同数据类型的采集方式和技术实现方式;设计数据传输、转换、加载的技术架构,制定转换、加载的标准规范。中电投集团正在建设集中统一的主数据管理系统,在该项目中将制定主数据规范、制定主数据分发的接口规范、实现数据分发等。针对中电投集团信息化现状,可能现有信息系统和数据资源不完备,需要通过人工填报方式获取部分数据,提出人工填报(报送)数据的技术手段、明确数据内容,制定采集的接口标准规范等。《集团数据体系数据应用方案设计》根据中电投集团信息化发展规划和信息系统建设计划进行数据应用方案设计,明确各种数据类型的应用对象、数据提供方式、共享方式、数据提供的接口规范等;还应对同步实施的综合分析系统、运营监管平台、对标管理系统等的数据应用提出基本要求和合理建议。《集团数据体系数据存储部署架构设计》设计中电投集团数据体系的目标存储部署架构,明确各类数据在集团总部、二级单位、三级单位的分布、部署模式,明确所需的技术支撑环境。针对各类数据提出数据存储分布的方案,对各类数据分析论证集中部署、分布部署、集中与分布结合部署等模式的优劣性、可行性等,并确定最终的部署方案;给出在集团总部、二级单位、三级单位数据部署的类型。针对集中部署的数据类型,要提出配套的数据环境建设要求,明确相应的硬件平台、软件基础平台的规模、性能指标,针对分布部署的数据类型,提出配套数据环境的一般要求。《集团数据体系数据管理方案设计》针对中电投集团多组织、多专业/产业、多数据源、多数据环境的特点,进行数据管理方案设计,包括数据管理的组织、制度、流程、技术手段;设计数据质量监控方案,通过数据质量管理,建立科学、标准、规范、开放的数据环境,形成企业的数据资产。还应设计有针对性的数据安全管理方案,明确数据安全策略、数据安全管理的技术措施,提出技术解决方案。《集团数据体系数据体系技术架构设计》针对本项目需求进行中电投集团数据体系建设的技术架构设计,制定数据体系建设蓝图,按中电投集团三级管理模式设计数据体系技术架构,明确技术路线,提出现有数据体系、软硬件信息资产的继承、兼容方案。制定中电投集团数据仓库构建模型,明确数据仓库建设的技术路线、技术架构、数据结构、软件硬件平台环境等。针对中电投集团数据体系建设提出相应的基础软件平台、基础硬件平台建设方案,明确所需的技术路线和软硬件产品类型,提出软硬件配置方案,为有关软硬件产品选型采购提供具体参考。《集团数据体系数据体系建设实施设计》针对中电投集团数据体系建设进行实施设计,设计实施路径与资源投入方案,按照“整体设计、分阶段实施”的策略,规划不同建设内容的实施优先级和顺序,明确与相关业务系统协调推进的方案。在实施方案中需充分考虑保护和利用已有投资和IT资产。将数据体系建设分解到具体项目中(如实时数据库、数据仓库、应用集成等),并提出项目实施计划、资金测算,合理测算数据体系建设的整体资金需求。标准规范类《集团数据体系模型标准》提供集团全部的数据主题,形成集团数据资源体系框架。提供集团全局的数据主题框架,通过对每一个数据主题进行具体细化设计,形成从数据主题到信息实体、数据元素的层次化数据资源体系。提供集团数据分层分类的体系结构,业务数据主题、实体、元素等基础数据标准体系。《集团信息分类与编码标准》以信息代码标准建设为基础,保证信息的一致性,建立一个涵盖个业务范围的科学、合理的信息分类与代码体系,规范和指导信息代码标准的制定工作,逐步形成中电投的企业信息分类编码标准体系。《集团数据体系数据获取标准规范》针对中电投集团制定数据采集、转换、加载的标准规范,包括采集接口服务标准。《集团数据体系数据应用标准标准》根据中电投集团信息化发展规划和信息系统建设计划进行数据应用方案设计,明确各种数据类型的应用对象、数据提供方式、共享方式、数据提供的接口规范等;还应对同步实施的综合分析系统、运营监管平台、对标管理系统等的数据应用提出基本要求和合理建议。《集团数据模型管理规范》包括数据模型管理的组织、制度、流程、技术手段等。《集团数据管理规范》包括数据管理的组织、制度、流程、技术手段;数据质量监控规范,数据安全管理规范等。标准和规范的引用项目建设应符合最新颁布的标准和规范要求。本项目建设所涉及的技术标准和规范、产品标准和规范、工程标准和规范、验收标准和规范等必须至少符合以下现行标准和规范。《电子计算机场地通用规范》(GB2887-2000)《信息技术软件工程术语》(GB/T11457-2006)《计算机软件文档编制规范》(GB/T8567-2006)《计算机软件需求规格说明规范》(GB/T9385-2008)《计算机软件测试文档编制规范》(GB/T9386-2008)《计算机软件可靠性和可维护性管理》(GB/T14394-2008)《计算机软件测试规范》(GB/T15532-2008)《基于J2EE的应用服务器技术规范》(GB/T26232-2010)《计算机信息系统安全保护等级划分准则》(GB17859-1999)《信息安全技术术语》(GB/T25069-2010)《信息安全技术信息系统安全等级保护实施指南》(GB/T25058-2010)《计算站场地安全要求》(GB/T9361-1988)《中华人民共和国公共安全行业标准》(GA/T74-94)《微型计算机通用规范》开放系统互联国家标准其他相关的国家、行业及地方标准与规范等。以上相关标准和规范中如有内容不一致之处,则按如下优先级顺序使用:国家标准、规范国际标准、规范部颁标准、规范行业标准、规范地方标准、规范制造商使用的标准、规范当规范与数据体系设计要求之间发生冲突时,采用其中最为严格的要求。集团数据体系设计的方法与步骤基于信息工程方法论(IEM)的指导,采用工程化方法进行全企业的信息资源规划,就是按照一定的方法步骤、遵循一定的标准规范、利用有效的软件支持工具进行各职能域的信息需求和数据流分析,制定信息资源管理基础标准,建立全域和各职能域的信息系统框架--功能模型、数据模型和系统体系结构模型。信息需求和数据流分析是按职能域进行的最基础的工作,包括整理、定义网上交流数据的格式和内容,对内外、上下数据流进行量化分析。信息资源管理基础标准是指开发利用信息资源所必须遵循的最基本的标准--数据元素标准、信息分类编码标准、用户视图标准和数据库表标准。这些标准的建立,将贯穿信息需求分析、数据建模和后续应用开发的全过程。信息资源管理基础标准的建立,是从源头上做好数据环境升档工作的基础,因为从数据模型到物理数据库实现,都要贯穿和体现这些基础标准。建立全域和各职能域的信息系统框架是在大量的分析综合工作的基础上完成的,是按系统工程的思想方法,由部门领导、管理人员和系统分析人员共同从整体上构思和把握的信息网络/信息系统框架。其中功能模型是系统的功能结构框架,数据模型是系统的数据结构框架,系统体系结构模型是系统的功能和数据关联结构框架。建立企业信息网络/信息系统框架的目的,是使企业领导、信息中心负责人(CIO)和信息系统开发人员在全企业信息化建设的总体规划方面达成共识,制定发展目标和实施策略,全面推进企业信息化,实现跨越式发展。上述信息资源规划工作包括对大量复杂资料进行分析整理,尤其是在众多人员分小组进行的过程中,需要保持定义与理解的一致性。资料的存储、修改和后续应用开发更需要规划信息和知识的连续性。为此,需要有效的软件工具支持信息资源规划工作,建立计算机化的文档--信息资源元库(InformationResourceRepository,简称IRR)。需要指出的是,信息资源元库(IRR)决不是一般意义的"电子文档"(文本或超文本文件),而是经过科学严格设计的、具有稳定性数据模型的"信息资源规划信息与知识库"。IRR是一种"活化的机内文档",以它为核心的可视化、易操作程序将信息资源规划工作的人工录入、人机交互和自动化处理的工作量比例变为1:2:7,因而能高质量、高效率地支持信息资源规划工作。推广应用实践表明,该工具会帮助企业继承已有的程序和数据资源,诊断原有数据环境存在的问题,建立统一的信息资源管理基础标准和集成化信息系统总体模型,在此基础上优化提升已有的应用系统,引进、定制或开发新应用系统,高起点、高效率地建立新一代的信息网络。规划方法与步骤业务分析与IT现状评估梳理企业发展战略,明确企业战略对信息化的要求;对企业的管理现状和业务运营情况进行分析,归纳分析中国电力投资集团管理和下属单位业务运营对信息化的需求;评估企业的信息化现状,找出企业信息化建设的差距,明确企业信息化建设的重点内容。公司现状调研工作目标:对集团及下属单位的管理层和核心业务骨干进行访谈,了解企业的战略、集团管理和业务运营现状,为战略明晰、管理诊断及信息化需求分析等提供依据。工作主要内容:收集资料:在企业内部重点收集中国电力投资集团的年度报告、战略规划、信息系统资料、各项规章制度以及中国电力投资集团的统一要求及与本项目相关的材料等;内部访谈:对中国电力投资集团的中高层管理人员、信息化管理人员采取分别访谈,对一般员工采取座谈会的方式,了解公司的情况和问题;调研问卷;针对中国电力投资集团战略、组织、管理、流程、人力资源、业务运营、信息系统等方面的内容,进行全面的问卷调查,并对调查问卷进行统计分析,形成分析结果;针对中国电力投资集团关心的核心管理领域,比如集团管控模式等进行专题调研访谈。集团战略梳理工作目标:梳理企业战略体系,明确主要下属单位的发展战略,分析战略对管理和运营的要求,明确企业战略对信息化的要求。工作内容:梳理与明晰中国电力投资集团的战略,包括战略目标、愿景、使命等;梳理各个下属单位的发展规划;梳理中国电力投资集团的阶段发展规划与竞争策略;与中国电力投资集团高层确认公司的发展战略;示例:

企业战略体系分解企业战略体系分解图集团管控分析工作目标:明晰中国电力投资集团与下属单位的管控模式,确定中国电力投资集团总部定位,从集团的战略管理、风险与内控管理、财务管理、人力资源管理、IT管理等方面进行分析和诊断,提升中国电力投资集团的管控能力。工作内容:中国电力投资集团与下属单位的管控模式分析与选择;从集团的战略管理、风险与内控管理、财务管理、人力资源管理、IT管理等方面进行分析和诊断,分析差距,提出改进方向;在分析诊断的基础上,归纳总结集团总部的信息化需求。示例:管控模式一般可以划分为三大主要类别:战略管控型、操作管控型和财务管控型集团管控模式对比影响企业管控模式的因素管控模式影响要素示例明确中国电力投资集团的管控模式,在此基础上搭建未来的管控平台集团总部定位及职能示例集团管控分析维度集团管控分析示例业务现状分析工作目标:对主要下属单位的运营现状进行分析,分析差距,提出改进方向。工作主要内容:在调研基础上,对主要下属单位的内部运营价值链进行分析与诊断,并提出改进建议;在分析与诊断的基础上,归纳总结各个产业公司的信息化需求。示例:管理诊断的方法与示例管理诊断与方法示例图业务诊断的过程示例示例示例业务诊断过程示例图IT现状评估工作目标:结合同行业信息化建设先进经验,从多个方面(IT组织、IT基础建设、应用系统应用程度、安全管理、IT管理基础等)对中国电力投资集团IT现状进行评估,找出差距,明确信息化建设的重点与难点。工作内容:分析中国电力投资集团当前IT系统架构的详细信息,包括各应用系统的功能、系统集成现状、数据存储现状、硬件基础设施现状、安全控制情况以及现有标准规范体系等;对应用系统使用现状进行评估,分析业务系统对业务的支撑程度;对IT基础设施进行分析,找出存在的问题并提出改进建议;对IT的组织结构和服务流程进行诊断与分析,评估其是否满足企业信息化建设的需求;梳理IT管理制度与规范,为后续的信息化建设提供保障。模板与示例:IT现状分析示例IT现状分析示例图从应用覆盖率、功能满足度与系统集成度对应用系统进行评估应用系统评估示例图从IT定位及组织、IT职能、IT运营与管理、IT技能等方面进行评估IT组织评估示例图IT基础设施评估示例IT基础设施评估示例图总体方案设计结合同行业信息化建设的先进经验,进行数据体系设计总体规划,包括数据体系设计的愿景、使命、定位、目标、指导思想和总体原则及数据体系总体架构。工作目标:制定中国电力投资集团数据体系建设的战略,包括数据体系愿景、目标、原则及总体架构。工作内容:制定未来的数据体系建设愿景、目标等;确定中国电力投资集团未来数据体系建设的原则和指导思想;规划中国电力投资集团未来数据体系的总体框架。示例:未来数据体系战略目标示例数据体系建设原则示例图详细设计工作目标:建立统一的数据标准和管理规范,主要包括财务、人力资源和项目管理等相关数据;为主数据管理提供管理工具选择策略。工作内容:对中国电力投资集团主数据管理现状进行分析;明确主数据管理策略、制度和流程;建立数据编码规范和管理标准;示例:数据框架体系集团数据体系总体框架对于中电投集团总部,其数据源包括集团本部业务系统、外部数据、二级单位数据。而对于二级单位,其数据源包括二级单位业务系统、外部数据、三级单位数据等。1. 数据获取与交换的实现各种数据源的数据进入中电投数据体系的主题数据区有四种种方式:利用ETL工具提供的功能获取数据,利用数据交换服务进行交换,利用数据库同步进行交换,利用报表填报进行数据报送。1) ETL处理的实现集团总部业务系统、二级单位数据、和外部数据,可以经过抽取(Extract)进入数据中转区,再经过转换(Transition)和清洗(Cleansing),然后加载(Loading)到主题数据区。进行转换的目的在于解决源数据可能存在的数据不一致现象,对抽取的源数据根据数据模型的要求,进行数据的转换、清洗、拆分、汇总等处理,保证来自不同系统、不同格式的数据的一致性和完整性。因为当源数据进行抽取后,如果不进行一致性转换,会造成数据无法加载或加载后无法使用。进行清洗的目的在于检测并删除或改正将装入数据仓库的“脏数据”,使源数据元素化、标准化、并消除重复记录。2) 数据交换服务处理的实现中电投数据体系外部的系统,包括二级单位和其他机构的外部系统,通过数据交换平台提供的数据交换服务进行实时和非实时交换。这些数据主要存储在主题数据区公共数据库中,主要供内、外部业务系统使用。有些准备进入到主题数据区的主题数据库中的数据,包括二级单位数据和外部数据,当无法使用ETL工具获取时,也可以通过数据交换服务与中电投数据体系进行数据交换的方式,完成采集后,加载并存储在主题数据区的主题数据库中。2. 主题数据区数据处理主题数据区包括公共数据库、主题数据库、和数据中转库。公共数据库主要作为集团总部将新建业务系统的数据库;主题数据库中为形成数据仓库提供数据;数据中转库(StagingArea)暂存由ETL获取的数据,这些数据经过转换和清洗后加载到主题数据库中。公共数据库中的数据可以根据需要加载到主题数据库中。数据中转库是为了保证数据移动的顺利进行而开设的阶段性数据存储空间,需要进入数据仓库的各个业务系统的数据首先直接快速传输到数据中转区,再从数据中转区经过清洗、转换、映射等复杂的数据移动处理转移到目标数据仓库中。从中电投数据体系总体数据处理的角度,主题数据区兼有两种功能:其一是为各个业务应用提供了统一的OLTP环境,支持跨业务域、跨业务应用的OLTP处理的实现;其二是数据中心的数据仓库的数据准备区。从中电投数据体系BI应用数据处理的角度,主题数据区的数据中转库是存放综合业务系统的原装数据和各个异构系统转入的原始数据,对数据中转库的数据进行清洗和过虑,然后面向主题、按数据模型存放在主题数据库。(所谓面向主题,与OLTP系统面向过程有相同之处,也有不同之处,相同之处是基本按照业务类别划分,所不同的是将相关主题的业务存放在一起,并且经过清洗保证数据唯一性。)如图所示,主题数据库的数据再经过一次ETL处理,进入数据仓库区。3. 数据仓库区数据处理数据仓库区包括数据仓库、数据集市、和OLAP数据。主题数据区的主题数据库中的数据经过ETL进入数据仓库。数据集市对数据仓库中的基础数据进行逐次聚合,形成目标数据供前端数据应用或展现。在具体实施过程中,各部门业务应用的数据首先被汇总到主题数据库,然后以此为基础,构建数据仓库。从数据仓库经过各级数据集市,细节数据逐步演变为轻度综合和高度综合数据,其实质是对OLTP系统产生的历史数据进行整合、存储、处理、统计、分析,从而获取关于历史的、目前的、和未来的知识,从而获取信息、支持决策与管理的应用模式。4. 数据应用的实现数据仓库、数据集市的数据可以应用于报表、即席查询和OLAP展现;也可以应用于数据挖掘。这些数据应用的数据处理和前端展现主要是通过相应得BI工具完成的。5. 关于元数据元数据包括业务元数据、技术元数据、操作元数据等。元数据是关于数据的数据,是中电投数据体系的重要组成部分。元数据在以数据仓库为中心的中电投数据体系系统中,比在传统操作性的数据库中更重要。元数据是说明数据的数据,对系统的影响是永久性的,应用软件可以改变、工具可以替换、软硬件基础设施可以升级,但元数据永久保存在系统中(如数据模型)。元数据设计、集成、管理的系统性和规范性,是中电投数据体系功能和性能的重要保证。主题数据库的基本特征有:1.面向业务主题(不是面向单证报表)。主题数据库是面向业务主题的数据组织存储,例如,企业中需要建立的典型的主题数据库有:产品、客户、零部件、供应商、订货、员工、文件资料、工程规范等。其中,产品、客户、零部件等数据库的结构,是对有关单证、报表的数据项进行分析整理而设计的,不是按单证、报表的原样建立的。这些主题数据库与企业管理中要解决的主要问题相关联,而不是与通常的计算机应用项目相关联。2.信息共享(不是信息私有或部门所有)。主题数据库是对各个应用系统"自建自用"的数据库的彻底否定,强调建立各个应用系统"共建共用"的共享数据库。不同的应用系统的计算机程序调用这些主题数据库,例如,库存管理调用产品、零部件、订货数据库;采购调用零部件、供应商、工程规范数据库,等等。3.一次一处输入系统(不是多次多处输入系统)。主题数据库要求调研分析企业各经营管理层次上的数据源,强调数据的就地采集,就地处理、使用和存储,以及必要的传输、汇总和集中存储。同一数据必须一次、一处进入系统,保证其准确性、及时性和完整性,经由网络-计算机-数据库系统,可以多次、多处使用。4.由基本表组成。一个主题数据库的科学的数据结构,是由多个达到"基本表"(BaseTable)规范的数据实体构成的,这些基本表具有如下的特性:·原子性--基本表中的数据项是数据元素(即最小的、不能再分解的信息单元);·演绎性--可由基本表中的数据生成全部输出数据(即这些基本表是精练的,经过计算处理可以产生全部企业管理所需要的数据);·规范性--基本表中数据满足三范式(3-NF)要求,这是科学的、能满足演绎性要求、并能保证快捷存取的数据结构。数据体系与标准规范体系建设之间的关系中电投集团数据体系是为中电投打造生产、经营、综合管理及分析决策等信息系统的统一公共数据平台,是各业务应用系统的数据交换和共享平台,是企业跨业务、跨流程高级应用的重要支持平台。它的建设包括以下几个关键组成部分:公共数据模型数据中心及一体化企业级信息集成平台建设的最大价值是:提供一个统一的架构,使得当前及未来的数据和业务应用可以一致地进行整合与集成,以统一提供战略性的企业级服务(而不是停留在部门级),提供对各个管理层面的集成化应用。此时,构造一个涵盖各个业务部门的数据定义、规范,并描述数据结构和相互关系的统一的“公共数据模型”至关重要。它的建立不但能够有效规范业务应用的建设,而且将更加有利于数据的整合与集成;同时,通过与企业业务处理流程的紧密结合,提取企业“公共业务构件”,达成业务逻辑处理与数据转换处理的有效分离,真正实现针对业务应用层面的集成整合及对集成的高效、方便维护,从而满足电网企业不断涌现的跨部门、跨系统的业务流程集成的需求;而且在技术层面遵循“基于服务的架构(SOA)”,提供企业级服务的重组与发布。因此,公共数据模型的构件不但是数据中心企业的基础,也是中电投一体化企业级信息集成平台建设的关键。标准规范体系标准规范体系的制定是数据中心建设过程中的一个重要工作。由于标准规范体系涵盖技术标准、管理标准、业务标准、工作标准以及法规规范等方方面面的内容,其制订过程将是一个持续改进的过程,通过不断地修订和完善,最终形成数据中心建设的指导纲领。因此,标准规范体系是项目成功的基本保障。标准规范体系包括“数据元标准”、“信息分类与编码标准”、“数据共享和交换标准”以及“元数据管理”标准。数据的集中存储管理对总部现有各类应用系统的数据库进行集中整合,对相关应用系统数据库进行迁移,将现有分散管理的数据库迁移到集中的企业级数据库管理系统平台上,形成数据中心的“公共数据库”,从而实现数据存储管理的集中优化整合,这是数据中心建设的一个重要阶段。数据仓库对现有各个业务应用数据库进行整合,通过ETL和数据交换等技术手段,形成主题数据库,最后建立总部数据仓库,为管理决策层提供有效的数据服务。数据体系与综合分析系统的关系综合分析系统是集团数据体系建设第一阶段的重要成果表现。通过为公司领导提供灵活自由的关键指标查询、数据分析、报表生成以及图表综合查询等,以对中电投的生产经营过程提供有效的辅助决策支持。下图以公共数据模型为核心,从“建模和标准、业务应用、功能实现”的三个视角,描述了数据中心与公共数据模型、业务系统、主题数据库、全局数据字典、数据元及其相互关系、信息分类与编码、数据资源(元数据)管理以及企业信息门户的之间关系。有效理清它们的脉络关系,是该项目建设成功的关键因素。以下是几条逻辑关联主线:建模:业务分析→数据分析→建模方法(参照IEC61970/61968CIM/CIS)→公共数据模型业务:公共数据模型→数据元及其相互关系→信息分类与编码+业务系统典型设计→各个业务应用系统功能:(Based公共数据模型)业务应用系统→ETL→ODS→数据仓库→决策分析系统→企业信息门户集成:公共数据模型→业务集成构件→数据集成→ODS→数据仓库→数据挖掘→专题业务应用技术:公共数据模型→实体/关系→数据元及其相互关系→全局数据字典→数据资源管理(平台)→企业信息门户标准:基于IEC61970/61968+需求分析→数据元标准、信息分类与编码标准、数据共享和交换标准、元数据管理标准……。数据体系与业务应用系统之间的关系业务系统为数据中心提供数据源,而一体化平台中的公共数据模型和全局数据字典为业务数据库的建立提供依据。业务系统的共享数据库应以公共信息模型为基础,建立全局统一的共享数据数据库,减少数据冗余,保证全局数据的一致性。在理想状况下,全局公共数据模型和全局数据字典已经完备,各业务系统基于全局公共信息模型构建共享数据库,实现全局公共信息的统一存储,减少了数据的冗余,保证了数据的一致性。以共享数据库和全局数据字典为基础,通过业务系统的重建,逐步构建全局统一的业务系统。并以此数据模型为基础,通过ETL工具,把业务系统中的数据抽取到ODS中,在ODS上实现综合查询等业务。在ODS的基础上,再次通过ETL把全局数据汇总到DW中,在此之上实现决策支持、数据挖掘等高层应用。进行正规的信息资源规划,就可以根据统一的功能模型、数据模型和数据标准来实施不同的应用项目:1.整合应用项目:对于已成熟应用的系统,既要继续使用,又要解决"信息孤岛"问题,需要建立少量的数据转换接口,与新的数据环境交换数据,即通过数据集成实现新老应用系统的整合。2.改造应用项目:对于已成熟应用的系统,如果建立数据转换接口与新的数据环境交换数据,其接口工作量庞大且复杂,就应该按新的统一数据模型和数据标准改造老的数据结构,也相应地修改应用程序。这实际上是不通过接口实现数据集成。3.定制应用项目:按统一规划建立的功能模型、数据模型和数据标准,要求开发商为企业开发新的应用系统。4.购入应用项目:选购能与统一规划建立的功能模型、数据模型和数据标准都"对上号"的应用软件。一般要求数据模型和数据标准都相符十分困难,需要与供应商协商解决部分的定制或改制,以满足企业的需要。5.新开发应用项目:完全按统一规划建立的功能模型、数据模型和数据标准组织自行开发、联合开发或委托开发。“三级体系、两级部署”设计根据中电投集团三级管理模式,中电投集团数据体系设计将采取“三级体系、两级部署”思路进行。三级体系三级体系指数据体系模型及数据获取、应用等设计覆盖中电投集团三级组织管理体系,各级组织分为综合管理、专业管理和监督保障三类部门,包含发电(火电、水电、核电、风电)、煤矿、铝业、物流、高新(煤化工、光伏产品制造)等各产业板块。两级部署两级部署指按照集团、二级单位(控股公司/区域公司)进行数据体系的物理部署架构设计。集团和二级单位两级物理部署架构的建设目标应定位于为集团和二级单位提供数据共享平台、为管理层提供决策支持功能、并作为相关的业务系统的数据支持平台。两级物理部署架构的数据来源是各个下级业务系统,通过ETL工具逐级进行数据抽取,而两级物理部署架构的数据交换采用统一数据交换平台来实现。两级物理部署架构如下图所示:详细建设方案数据体系模型设计数据体系中的数据是从许多业务处理系统中抽取、转换而来,对于这样一个复杂的企业数据环境,如何以安全、高效的方式来对它们进行管理和访问就变得尤为重要。解决这一问题的关键是对元数据进行科学有效的管理。元数据是关于数据、操纵数据的进程和应用程序的结构和意义的描述信息,其主要目标是提供数据资源的全面指南。元数据不仅定义了数据仓库中数据的模式、来源以及抽取和转换规则等,而且整个数据仓库系统的运行都是基于元数据的,是元数据把数据仓库系统中的各个松散的组件联系起来,组成了一个有机的整体。按照传统的定义,元数据(Metadata)是关于数据的数据。在数据仓库系统中,元数据可以帮助数据仓库管理员和数据仓库的开发人员非常方便地找到他们所关心的数据;元数据是描述数据仓库内数据的结构和建立方法的数据,可将其按用途的不同分为两类:技术元数据(TechnicalMetadata)和业务元数据(BusinessMetadata)。技术元数据是存储关于数据仓库系统技术细节的数据,是用于开发和管理数据仓库使用的数据。业务元数据从业务角度描述了数据仓库中的数据,它提供了介于使用者和实际系统之间的语义层,使得不懂计算机技术的业务人员也能够“读懂”数据仓库中的数据。业务元数据主要包括以下信息:使用者的业务术语所表达的数据模型、对象名和属性名;访问数据的原则和数据的来源;系统所提供的分析方法以及公式和报表的信息。基于CWM的数据体系模型设计成立于1995年的元数据联盟(\o"MDC"MDC)组织是一个由50个厂商和最终用户组成的非赢利组织,包含\o"CA"CA、\o"NCR"NCR、\o"SAS"SAS、\o"Microsoft"Microsoft等,致力于为元数据交换提供解决方案。在1999年,元数据联盟开发了技术中立厂商无关的数据仓库标准——\o"开放信息模型"开放信息模型(OIM),并由微软公司提交。同时OMG组织在开发另一套技术中立厂商无关的通用公共仓库元模型(CWM)。在一段时间内,存在着两个标准。为了推动标准并使业界广泛认同,MDC成员决定合并进OMG,并由OMG发布同一套标准CWM,MDC不再研究自己独立的标准。同时CWM从OIM中借鉴和学习了很多设计,致力于解决数据仓库和\o"商业智能"商业智能的元数据问题。OMG成立于1989年,OMG的目标是建立一种行业标准和\o"对象管理规范"对象管理规范来为实际软件开发提供一个通用的构架。OMG在2000年采用了CWM。旨在推动数据仓库、智能商务和\o"知识管理"知识管理方面元数据的共享和交换。和OMG合作提出CWM规范的公司有:\o"IBM"IBM,\o"Unisys"Unisys,\o"NCR"NCR,\o"HyperionSolutions"HyperionSolutions,\o"Oracle"Oracle,\o"UBSAG"UBSAG,\o"GenesisDevelopment"GenesisDevelopment,\o"DimensionEDI"DimensionEDI。还有一些公司明确表示支持CWM,包括:\o"Deere&Company"Deere&Company,\o"Sun"Sun,\o"HP"HP,\o"DataAccessTechnologies"DataAccessTechnologies,\o"InLineSoftware"InLineSoftware,\o"Aonix"Aonix,\o"Hitachi"Hitachi,Ltd。CWM规范的最初目标是:使处于\o"分布式"分布式、\o"异构"异构环境下的数据仓库元数据和商业智能元数据能方便地在不同的数据仓库工具、数据仓库平台和\o"元数据仓库"元数据仓库之间进行交换。CWM覆盖设计、建立和管理数据仓库应用的整

温馨提示

  • 1. 本站所有资源如无特殊说明,都需要本地电脑安装OFFICE2007和PDF阅读器。图纸软件为CAD,CAXA,PROE,UG,SolidWorks等.压缩文件请下载最新的WinRAR软件解压。
  • 2. 本站的文档不包含任何第三方提供的附件图纸等,如果需要附件,请联系上传者。文件的所有权益归上传用户所有。
  • 3. 本站RAR压缩包中若带图纸,网页内容里面会有图纸预览,若没有图纸预览就没有图纸。
  • 4. 未经权益所有人同意不得将文件中的内容挪作商业或盈利用途。
  • 5. 人人文库网仅提供信息存储空间,仅对用户上传内容的表现方式做保护处理,对用户上传分享的文档内容本身不做任何修改或编辑,并不能对任何下载内容负责。
  • 6. 下载文件中如有侵权或不适当内容,请与我们联系,我们立即纠正。
  • 7. 本站不保证下载资源的准确性、安全性和完整性, 同时也不承担用户因使用这些下载资源对自己和他人造成任何形式的伤害或损失。

评论

0/150

提交评论