某公司数据架构优化项目总体技术方案课件

中国电财数据架构优化项目总体技术方案2010年4月

中国电财数据架构优化项目中电财数据架构优化项目的应用框架对IT技术基础设施的关键需求中电财数据架构优化的总体设计框架介绍数据架构优化的设计概述数据架构优化的总体方案设计数据架构优化的系统设计数据架构优化的门户集成设计数据架构优化的运营维护设计主要内容中电财数据架构优化项目的应用框架对IT技术基础设施的关键需求未来应用系统的框架设计对支撑其运行的IT技术基础设施的设计提出了关键需求，提出以建设以数据中心为IT技术基础设施核心的设计思想加强数据标准建设是落实集约化的必要基础建立数据交换平台是实现信息共享的坚强保障建立数据仓库是提升管理分析能力的有效手段建立数据仓库系统，提供企业级统一数据视图，在数据仓库的基础上尽量实现对外报送报表和内部固定报表的自动生成；实现自定义报表功能，满足业务部门灵活查询的需求；实现多维分析功能，满足预算集约调控和风险在线监测的要求。通过数据标准的制定和管理，对统一公司范围内所涉及的各项数据的定义与业务含义的解释，达到业务数据定义和使用的一致性，促进信息集成具有重要意义。数据标准的制定和执行可以实现全公司范围内数据的一致性和正确性，满足财务集约化的“制定和执行统一的信息标准，促进公司各类信息的互相融合“的要求。通过数据交换平台，对不同业务系统的数据进行整合和集成；数据交换平台实现总部各业务部门之间的横向共享以及公司总部与地方分公司和国网公司之间的信息共享，满足财务集约化的”建立可靠、灵活、安全、稳定的数据交换平台“的要求。未来应用系统的框架设计对支撑其运行的IT技术基础设施的设计提中电财数据架构优化项目的应用框架对IT技术基础设施的关键需求中电财数据架构优化的总体设计框架介绍数据架构优化的设计概述数据架构优化的总体方案设计数据架构优化的系统设计数据架构优化的门户集成设计数据架构优化的运营维护设计主要内容中电财数据架构优化项目的应用框架对IT技术基础设施的关键需求中电财数据架构优化项目的应用框架对IT技术基础设施的关键需求中电财数据架构优化的总体设计框架介绍数据架构优化的设计概述数据架构优化的总体方案设计数据架构优化的系统设计数据架构优化的门户集成设计数据架构优化的运营维护设计主要内容中电财数据架构优化项目的应用框架对IT技术基础设施的关键需求在进行硬件估算时，充分考虑了未来数据容量和用户数。在进行硬件估算时，充分考虑了未来数据容量和用户数。中电财数据架构优化所需硬件和软件的清单列表数据库服务器（主机,4CPU,16GRam）应用服务器（主机,4CPU,16GRam）ETL服务器（PCServer,2CPU,8GRam）OLAP服务器（PCServer,2CPU,8GRam）Web服务器（PCServer,2CPU,8GRam）磁盘阵列（600GB）开发测试服务器（主机,4CPU,16GRam）注：以上服务器仅是数据仓库应用系统理想情况下的配置，实际配置时可以根据系统性能要求，把若干项功能组合起来，由一台服务器承担。数据库软件（Oracle10GRAC）ETL产品（Informatica-PowerCenter）OLAP产品（Cognos-AnalysisStudio）报表产品（Cognos-ReportStudio）中间件产品（Weblogic-Potal）硬件清单软件清单中电财数据架构优化所需硬件和软件的清单列表数据库服务器（主机中电财数据架构优化所需硬件清单列表应用系统硬件配置操作系统用途数据仓库生产环境数据库服务器主机,4CPU,16GRamIBM-AIX5.3/Linux正式环境，安装Oracle应用服务器主机,4CPU,16GRamIBM-AIX5.3/Linux正式环境，安装WeblogicETL服务器PCServer,2CPU,8GRamNT(Windows2003)正式环境,安装InformaticaOLAP服务器PCServer,2CPU,8GRamNT(Windows2003)正式环境,安装CognosWeb服务器PCServer,2CPU,8GRamNT(Windows2003)正式环境，安装Apache磁盘阵列600GB

正式环境,数据备份、归档数据仓库开发测试环境服务器主机,4CPU,16GRamNT(Windows2003)开发测试环境，安装开发阶段使用的Oracle数据库

小计

公共数据管理平台应用服务器PCServer,2CPU,8GRamNT(Windows2003)开发阶段借用，系统上线以后作为数据交换平台使用。Web服务器PCServer,2CPU,8GRamNT(Windows2003)

合计

中电财数据架构优化所需硬件清单列表应用系统硬件配置操作系统用中电财数据架构优化所需硬件清单列表应用系统产品种类产品名称数据仓库数据库软件Oracle10G(version:10.2.0.1)1CPU,50usersETL产品PowerCenter(Informatica8.1.1)1CPU,50users报表产品Report/QueryStudioCognos8.3BIServerOLAP产品AnalysisStudioWeb服务器产品Weblogic10.1.61CPU,50users

小计

公共数据管理平台Web服务器产品Weblogic10.1.61CPU,50users

数据库软件Oracle10G(version:10.2.0.1)1CPU,50users

小计

合计

中电财数据架构优化所需硬件清单列表应用系统产品种类产品名称数中电财数据架构优化基础软件清单及其用途软件类别软件名称说明ETL工具Informatica数据抽取转换和加载工具报表工具CognosReportStudio前端展示工具OLAP工具CognosAnalysisStudio多维展示工具建模工具PowerDesignerorErwin数据模型建模工具数据库Oracle数据库产品中间件Weblogic中间件产品中电财数据架构优化基础软件清单及其用途软件类别软件名称说明E中电财数据架构优化项目的应用框架对IT技术基础设施的关键需求中电财数据架构优化的总体设计框架介绍数据架构优化的设计概述数据架构优化的总体方案设计数据架构优化的系统设计数据架构优化的门户集成设计数据架构优化的运营维护设计主要内容中电财数据架构优化项目的应用框架对IT技术基础设施的关键需求一、数据架构优化的总体逻辑架构二、数据架构优化的总体物理架构三、数据架构优化的网络拓扑架构IBM通过主导数据架构优化建设的总体设计，提供业务需求的总体分析和技术上的总体架构，为中国电财未来持续实现数据架构的应用奠定基础，为未来持续发展提供战略层面的意见和建议。四、数据架构优化的数据交换平台一、数据架构优化的总体逻辑架构二、数据架构优化的总体物理架构基于中电财的现状设计出的数据架构优化的总体逻辑架构。业务元数据（账户/客户/交易数据）应用层信息展现层数据源层企业接口层数据存储层。。。。。营业历史数据资金历史数据（与BOS的结构相同）临时数据区业务基础数据（账户/客户/交易层事实表）处理数据（业务规则/配置参数/中间结果）汇总数据（维表/汇总/账户/客户事实表）基础及汇总数据区各类中电财业务的应用数据资金数据集市其他数据集市BOS-资金BOS-营业资金结算系统财务系统信贷系统…操作型数据存储(ODS是"面向主题的、集成的、当前或接近的、不断变化的"数据。)各个业务主题数据集市（应用数据区）资金其他分析。。风险分析营业其他分析。。财务优化营业账薄查询优化资金调度展示室报表资金存款类报表多维分析灵活查询资金账户查询其他灵活查询营业账薄查询统计分析分析预测现金流量预测其他分析预测融资计划预测信贷分析资金准确性分析其他多维分析营业结算量分析管理提升其他应用银监会1104类报表其他业务报表基于中电财的现状设计出的数据架构优化的总体逻辑架构。应用层信。。。客户业务人员决策人员分析人员管理人员用户访问层—中电财企业信息门户(EIP)固定报表多维分析商业智能平台……财务系统资金结算CPFBOS临时数据区基础数据区汇总数据区应用数据区数据仓库Oracle10gR2RAC灵活查询数据抽取、转换、加载（ETL）……ODS其他部门应用分析数据交换平台业务主题客户管理财务管理信贷管理风险管理资金管理分析预测数据导出PDFXLS数据管理人员营业结算...手工数据依据中电财总体逻辑架构，我们整理出分层次、可扩展的总体物理架构图。。。。客户业务人员决策人员分析人员管理人员用户访问层—中电财IP千兆网应用层SAN存储网Web负载均衡Firewall总公司B/S用户总公司B/S用户分公司B/S用户IP千兆网IP千兆网总公司DW数据库服务器集群总公司报表数据库+分公司报表数据HA历史数据管理平台HDS(历史数据备份)存储阵列总公司分公司总公司规则设置工作站调度管理工作站Web服务器应用服务器总公司报表集中部署平台总公司报表展现功能分公司报表展现功能ETLInformatica8.3远程维护工作站调度服务器UAAP统一认证Web层用户层数据库层存储层基础设施架构基于中电财的技术架构规划的网络拓扑与硬件部署IP千兆网应SAN存储网Web负载均衡Firewall总公司数据交换平台的现阶段与未来实现FactTableFactTableProductProductDimensionDimensionTimeTimeDimensionDimensionAccountAccountDimensionDimensionGeographyGeographyDimensionDimensionIndustryIndustryDimensionDimensionAccountTypeAccountTypeDimensionDimensionFactTableProductDimensionTimeDimensionAccountDimensionGeographyDimensionAccountTypeDimensionIndustryDimension数据交换平台数据源现阶段现阶段，基于CPFBOS的各业务主体资金相关业务主题营业相关业务主题信贷相关业务主题预构建的基于角色的报表&仪表盘2000+报表，组织在200+页面中，涉及50个流程交互式用户存取界面针对所有用户的门户即席查询/编制工具即席查询+各个部门应用构建标准化的基础数据区数据层次&数据关系口径统一的公共数据账户管理信息、账户活动信息。。。7000+预构建的对象，2300+度量,5000个维基础数据下一阶段数据交换平台的现阶段与未来实现FactTableFact中电财数据架构优化项目的应用框架对IT技术基础设施的关键需求中电财数据架构优化的总体设计框架介绍数据架构优化的设计概述数据架构优化的总体方案设计数据架构优化的系统设计数据架构优化的门户集成设计数据架构优化的运营维护设计主要内容中电财数据架构优化项目的应用框架对IT技术基础设施的关键需求一、数据架构优化的系统接口设计二、数据架构优化的系统应用设计三、数据架构优化的数据层次设计IBM通过主导数据架构优化建设的总体设计，提供业务需求的总体分析和技术上的总体架构，为中国电财未来持续实现数据架构的应用奠定基础，为未来持续发展提供战略层面的意见和建议。四、数据架构优化的ETL架构设计一、数据架构优化的系统接口设计二、数据架构优化的系统应用设计接口灵活度解决方案综合考虑中电财未来的业务发展以及IT系统新老系统的演进，我们从系统设计层级充分考虑接口的灵活度，确保在外围系统变化更替过程中，对于本系统的影响程度最小，并能做到快速应对外围源系统变化。外围源系统通常的变化类型接口灵活度应对措施一、新增数据源系统由于业务发展需要,新建的业务系统,而且也需要作为信息披露或财务分析与预测的数据源二、新老系统的逐步割接最复杂的情况是按照分行逐步割接,在并行期会出现部分分行的业务在新系统,部分在老系统三、源系统自身的升级改造源系统的升级改制,也有可能造成对提供的数据接口有影响措施一:架构设计层级,采用中间层标准数据模型,隔离数据源发生变化对于整个系统的影响措施二:采用新旧线数据来源配置表,通过参数化配置来应对新老系统逐步隔接问题措施三:采用专业ETL工具(Informatica),通过参数配置调整快速应对接口变化接口灵活度解决方案综合考虑中电财未来的业务发展以及IT系统新接口灵活度解决方案-措施一:架构设计层级,采用中间层标准数据模型,隔离数据源发生变化对于整个系统的影响基础数据区为标准数据模型，是综合金融行业主流的数据建模方法,并结合IBM项目经验,确保标准数据模型能够应对未来中国电财业务发展,并在标准模型中预留足够的扩展字段来应对未来的需求.架构设计中采用标准数据层模式,将数据源变动限定在数据预处理模块内部通过与ODS的接口格式定义,预先考虑接口变化需求,预留一些将来可用的扩展字段接口灵活度解决方案-措施一:架构设计层级,采用中间层接口灵活度解决方案

措施三:采用专业ETL工具(Informatica),通过参数配置调整快速应对接口变化以图形化、参数化等直观方式，实现快速优化调整，应对数据源结构发生变化。接口灵活度解决方案

措施三:采用专业ETL工具(Info管理应用层报表分析预测信息展现层和信息发布门户其他应用加工各个业务部门资金业务数据集市数据集市营业业务数据集市WebLogicPotal客户贡献度机构/渠道贡献度产品贡献度CPFBOS资金模块其它系统…数据源层核心类系统数据接口层EAI/ETL即时/批量（日终处理/每周处理/月度处理）ETL：OracleWarehouseBuilder共享维度临时存储区PA数据库（业务数据，计算数据、结果数据）客户单一视图

客户主数据公共数据开放平台数据仓库数据库层数据加工预处理Oracle10GInformaticaPowerCenterCognosBusinessIntelligenceProductions中电财数据架构优化的总体系统应用设计架构CPFBOS营业模块资金结算系统财务系统NC基础数据区数据汇总区管理应用层报表分析预测信息展现层和信息发布门户其他应用加工各中电财数据架构优化的总体系统应用中Cognos应用：

如：固定报表、多维分析、灵活查询、分析预测等中电财数据架构优化的总体系统应用中Cognos应用：

如：固中电财数据架构优化的总体系统应用中Cognos应用：

固定报表中电财数据架构优化的总体系统应用中Cognos应用：

固定报中电财数据架构优化的总体系统应用中Cognos应用：

多维分析中电财数据架构优化的总体系统应用中Cognos应用：

多维分中电财数据架构优化的总体系统应用中Cognos应用：

灵活查询中电财数据架构优化的总体系统应用中Cognos应用：

灵活查中电财数据架构优化的总体系统应用中Cognos应用：

分析预测中电财数据架构优化的总体系统应用中Cognos应用：

分析预中电财数据架构优化的总体系统应用中的J2EE应用：

如：数据补录、人工干预等模块中电财数据架构优化的总体系统应用中的J2EE应用：

如：数据基于中电财数据架构优化的总体逻辑架构设计的整体数据层次设计以及指标库划分。基于中电财数据架构优化的总体逻辑架构设计的整体数据层次设计以各个数据区的用途编号名称用途说明1操作型数据存储(ODS)ODS是"面向主题的、集成的、当前或接近的、不断变化的"数据。2临时数据区临时数据区用于存储各个业务系统的原有机构的历史数据，包括：资金历史数据、营业历史数据等等，以保留将来在数据层面与原有业务数据进行核对时的原始痕迹。3基础数据区基础数据区用于存储中电财各个业务系统的最基础的数据单元，按照客户、账户、交易、机构、科目、凭证等最基础单元存储，与原有系统的机构不同，为了下一步按照各个维度汇总相关指标作数据准备。4汇总数据区汇总数据区用于存储中电财按照各个不同维度汇总的各种相关基础指标的汇总加工后的数据，对指标计算引擎计算出来的结果进行存储。5应用数据区应用数据区直接面对的是Cognos固定报表、多维分析、灵活查询、分析预测等展现，需要针对不同类型的应用对汇总数据区做出一些合理化的转换存储。6789各个数据区的用途编号名称用途说明1操作型数据存储(ODS)O元数据管理平台功能元数据导入 从各种元数据导入元数据管理平台，供后续过程使用元数据分析

依赖分析 通过元数据工具进行数据项之间自动关系分析或手工关系分析。同时，对指标的业务逻辑加工进行回溯分析，用图形化展现指标之间的关系及数据口径说明；

影响分析

对某一数据项的更改，可以分析到对全局的影响，能使业务或开发人员通过系统和应用的单一全局视图，积极地评估更改的影响。可以确定实施更改所需的工作量。元数据发布 应用元数据管理客户端，并通过客户化的定制，可以对需要展现的元数据分类显示修改元数据 对需要展现的元数据进行相应的修改浏览查询 使用标准Internet浏览器完成对元数据的浏览、查询、打印、下载等操作。元数据管理平台功能元数据导入中电财数据架构优化项目的ETL架构设计:

采用专业ETL工具(Informatica

PowerCenter8)InformaticaPowerCenter8PlatformInformaticaPowerCenter8DataIntegrationHubFinanceDataMartCRMDataMartMFG.DataMartSAP

RDBMSPeopleSofteBusinessSources/XMLMainframeData

WarehouseOperational

DataStorePowerConnectAdditionalServerEnginesSiebel

MQSeries

Mainframe

中电财数据架构优化项目的ETL架构设计:

采用专业ETL工具InformaticaPowerCenter8ArchitectureDesignerServerManagerRepositoryManagerServerRepositoryTargets1-nSources1-nPowerPlugsDataModels中电财数据架构优化项目的ETL架构设计:

ETL工具(Informatica

PowerCenter8)的逻辑架构InformaticaPowerCenter8Arch34数据标准流程管理元数据量化指标数据管理制度化代码标准数据分类标准数据组织标准随机状态发现状态管理控制优化阶段自动阶段数据创建数据处理数据存储数据应用数据安全归档与备份数据所有权数据标准分元数据得分流程化得分在中电财数据架构优化的实施过程中各个环节的数据质量控制设计。34数据标准流程管理元数据量化指标数据管理制度化代码标准数据35中电财数据架构优化的元数据管理：

采用专业ETL工具(Informatica),通过参数配置调整快速应对元数据的变化Informatica的知识库管理以图形化、参数化等直观方式，实现快速优化调整，应对元数据结构发生变化。35中电财数据架构优化的元数据管理：

采用专业ETL工具(I中电财数据架构优化项目的应用框架对IT技术基础设施的关键需求中电财数据架构优化的总体设计框架介绍数据架构优化的设计概述数据架构优化的总体方案设计数据架构优化的系统设计数据架构优化的门户集成设计数据架构优化的运营维护设计主要内容中电财数据架构优化项目的应用框架对IT技术基础设施的关键需求中电财数据架构优化采用的CognosBI平台与中电财现有的企业级门户的无缝集成。中电财数据架构优化采用的CognosBI平台与中电财现有的企中电财数据架构优化采用的CognosBI平台与目前主流轻型目录服务器(LDAP)的无缝集成。中电财数据架构优化采用的CognosBI平台与目前主流轻型目中电财数据架构优化采用的CognosBI平台对报表和分析的强大的数据权限控制。中电财数据架构优化采用的CognosBI平台对报表和分析的强中电财数据架构优化项目的应用框架对IT技术基础设施的关键需求中电财数据架构优化的总体设计框架介绍数据架构优化的设计概述数据架构优化的总体方案设计数据架构优化的系统设计数据架构优化的门户集成设计数据架构优化的运营维护设计主要内容中电财数据架构优化项目的应用框架对IT技术基础设施的关键需求中电财数据架构优化采用的角色以及用户的分类数据架构的各个应用的权限分类系统管理员拥有数据维护权限、参数设置权限、报表设置权限、角色定义权限、用户管理权限、系统数据验证报表查阅权限等；管理人员拥有客户信息和报表分析的查询浏览导出权限；各级业务部门拥有相应的资金业务信息、营业业务信息、资金监控分析信息、信贷信息以及风险分析信息的查询浏览权限；各级统计分析人员具有相应的报表分析的查询浏览导出权限。数据架构的系统维护的分类系统管理员拥有数据维护权限、参数设置权限、报表设置权限、角色定义权限、用户管理权限、系统数据验证报表查阅权限等；

分析人员具有相应的报表分析的查询浏览导出权限。中电财数据架构优化采用的角色以及用户的分类数据架构的各个应用谢谢！谢谢！中国电财数据架构优化项目总体技术方案2010年4月

中国电财数据架构优化项目中电财数据架构优化项目的应用框架对IT技术基础设施的关键需求中电财数据架构优化的总体设计框架介绍数据架构优化的设计概述数据架构优化的总体方案设计数据架构优化的系统设计数据架构优化的门户集成设计数据架构优化的运营维护设计主要内容中电财数据架构优化项目的应用框架对IT技术基础设施的关键需求未来应用系统的框架设计对支撑其运行的IT技术基础设施的设计提出了关键需求，提出以建设以数据中心为IT技术基础设施核心的设计思想加强数据标准建设是落实集约化的必要基础建立数据交换平台是实现信息共享的坚强保障建立数据仓库是提升管理分析能力的有效手段建立数据仓库系统，提供企业级统一数据视图，在数据仓库的基础上尽量实现对外报送报表和内部固定报表的自动生成；实现自定义报表功能，满足业务部门灵活查询的需求；实现多维分析功能，满足预算集约调控和风险在线监测的要求。通过数据标准的制定和管理，对统一公司范围内所涉及的各项数据的定义与业务含义的解释，达到业务数据定义和使用的一致性，促进信息集成具有重要意义。数据标准的制定和执行可以实现全公司范围内数据的一致性和正确性，满足财务集约化的“制定和执行统一的信息标准，促进公司各类信息的互相融合“的要求。通过数据交换平台，对不同业务系统的数据进行整合和集成；数据交换平台实现总部各业务部门之间的横向共享以及公司总部与地方分公司和国网公司之间的信息共享，满足财务集约化的”建立可靠、灵活、安全、稳定的数据交换平台“的要求。未来应用系统的框架设计对支撑其运行的IT技术基础设施的设计提中电财数据架构优化项目的应用框架对IT技术基础设施的关键需求中电财数据架构优化的总体设计框架介绍数据架构优化的设计概述数据架构优化的总体方案设计数据架构优化的系统设计数据架构优化的门户集成设计数据架构优化的运营维护设计主要内容中电财数据架构优化项目的应用框架对IT技术基础设施的关键需求中电财数据架构优化项目的应用框架对IT技术基础设施的关键需求中电财数据架构优化的总体设计框架介绍数据架构优化的设计概述数据架构优化的总体方案设计数据架构优化的系统设计数据架构优化的门户集成设计数据架构优化的运营维护设计主要内容中电财数据架构优化项目的应用框架对IT技术基础设施的关键需求在进行硬件估算时，充分考虑了未来数据容量和用户数。在进行硬件估算时，充分考虑了未来数据容量和用户数。中电财数据架构优化所需硬件和软件的清单列表数据库服务器（主机,4CPU,16GRam）应用服务器（主机,4CPU,16GRam）ETL服务器（PCServer,2CPU,8GRam）OLAP服务器（PCServer,2CPU,8GRam）Web服务器（PCServer,2CPU,8GRam）磁盘阵列（600GB）开发测试服务器（主机,4CPU,16GRam）注：以上服务器仅是数据仓库应用系统理想情况下的配置，实际配置时可以根据系统性能要求，把若干项功能组合起来，由一台服务器承担。数据库软件（Oracle10GRAC）ETL产品（Informatica-PowerCenter）OLAP产品（Cognos-AnalysisStudio）报表产品（Cognos-ReportStudio）中间件产品（Weblogic-Potal）硬件清单软件清单中电财数据架构优化所需硬件和软件的清单列表数据库服务器（主机中电财数据架构优化所需硬件清单列表应用系统硬件配置操作系统用途数据仓库生产环境数据库服务器主机,4CPU,16GRamIBM-AIX5.3/Linux正式环境，安装Oracle应用服务器主机,4CPU,16GRamIBM-AIX5.3/Linux正式环境，安装WeblogicETL服务器PCServer,2CPU,8GRamNT(Windows2003)正式环境,安装InformaticaOLAP服务器PCServer,2CPU,8GRamNT(Windows2003)正式环境,安装CognosWeb服务器PCServer,2CPU,8GRamNT(Windows2003)正式环境，安装Apache磁盘阵列600GB

正式环境,数据备份、归档数据仓库开发测试环境服务器主机,4CPU,16GRamNT(Windows2003)开发测试环境，安装开发阶段使用的Oracle数据库

小计

公共数据管理平台应用服务器PCServer,2CPU,8GRamNT(Windows2003)开发阶段借用，系统上线以后作为数据交换平台使用。Web服务器PCServer,2CPU,8GRamNT(Windows2003)

合计

中电财数据架构优化所需硬件清单列表应用系统硬件配置操作系统用中电财数据架构优化所需硬件清单列表应用系统产品种类产品名称数据仓库数据库软件Oracle10G(version:10.2.0.1)1CPU,50usersETL产品PowerCenter(Informatica8.1.1)1CPU,50users报表产品Report/QueryStudioCognos8.3BIServerOLAP产品AnalysisStudioWeb服务器产品Weblogic10.1.61CPU,50users

小计

公共数据管理平台Web服务器产品Weblogic10.1.61CPU,50users

数据库软件Oracle10G(version:10.2.0.1)1CPU,50users

小计

合计

中电财数据架构优化所需硬件清单列表应用系统产品种类产品名称数中电财数据架构优化基础软件清单及其用途软件类别软件名称说明ETL工具Informatica数据抽取转换和加载工具报表工具CognosReportStudio前端展示工具OLAP工具CognosAnalysisStudio多维展示工具建模工具PowerDesignerorErwin数据模型建模工具数据库Oracle数据库产品中间件Weblogic中间件产品中电财数据架构优化基础软件清单及其用途软件类别软件名称说明E中电财数据架构优化项目的应用框架对IT技术基础设施的关键需求中电财数据架构优化的总体设计框架介绍数据架构优化的设计概述数据架构优化的总体方案设计数据架构优化的系统设计数据架构优化的门户集成设计数据架构优化的运营维护设计主要内容中电财数据架构优化项目的应用框架对IT技术基础设施的关键需求一、数据架构优化的总体逻辑架构二、数据架构优化的总体物理架构三、数据架构优化的网络拓扑架构IBM通过主导数据架构优化建设的总体设计，提供业务需求的总体分析和技术上的总体架构，为中国电财未来持续实现数据架构的应用奠定基础，为未来持续发展提供战略层面的意见和建议。四、数据架构优化的数据交换平台一、数据架构优化的总体逻辑架构二、数据架构优化的总体物理架构基于中电财的现状设计出的数据架构优化的总体逻辑架构。业务元数据（账户/客户/交易数据）应用层信息展现层数据源层企业接口层数据存储层。。。。。营业历史数据资金历史数据（与BOS的结构相同）临时数据区业务基础数据（账户/客户/交易层事实表）处理数据（业务规则/配置参数/中间结果）汇总数据（维表/汇总/账户/客户事实表）基础及汇总数据区各类中电财业务的应用数据资金数据集市其他数据集市BOS-资金BOS-营业资金结算系统财务系统信贷系统…操作型数据存储(ODS是"面向主题的、集成的、当前或接近的、不断变化的"数据。)各个业务主题数据集市（应用数据区）资金其他分析。。风险分析营业其他分析。。财务优化营业账薄查询优化资金调度展示室报表资金存款类报表多维分析灵活查询资金账户查询其他灵活查询营业账薄查询统计分析分析预测现金流量预测其他分析预测融资计划预测信贷分析资金准确性分析其他多维分析营业结算量分析管理提升其他应用银监会1104类报表其他业务报表基于中电财的现状设计出的数据架构优化的总体逻辑架构。应用层信。。。客户业务人员决策人员分析人员管理人员用户访问层—中电财企业信息门户(EIP)固定报表多维分析商业智能平台……财务系统资金结算CPFBOS临时数据区基础数据区汇总数据区应用数据区数据仓库Oracle10gR2RAC灵活查询数据抽取、转换、加载（ETL）……ODS其他部门应用分析数据交换平台业务主题客户管理财务管理信贷管理风险管理资金管理分析预测数据导出PDFXLS数据管理人员营业结算...手工数据依据中电财总体逻辑架构，我们整理出分层次、可扩展的总体物理架构图。。。。客户业务人员决策人员分析人员管理人员用户访问层—中电财IP千兆网应用层SAN存储网Web负载均衡Firewall总公司B/S用户总公司B/S用户分公司B/S用户IP千兆网IP千兆网总公司DW数据库服务器集群总公司报表数据库+分公司报表数据HA历史数据管理平台HDS(历史数据备份)存储阵列总公司分公司总公司规则设置工作站调度管理工作站Web服务器应用服务器总公司报表集中部署平台总公司报表展现功能分公司报表展现功能ETLInformatica8.3远程维护工作站调度服务器UAAP统一认证Web层用户层数据库层存储层基础设施架构基于中电财的技术架构规划的网络拓扑与硬件部署IP千兆网应SAN存储网Web负载均衡Firewall总公司数据交换平台的现阶段与未来实现FactTableFactTableProductProductDimensionDimensionTimeTimeDimensionDimensionAccountAccountDimensionDimensionGeographyGeographyDimensionDimensionIndustryIndustryDimensionDimensionAccountTypeAccountTypeDimensionDimensionFactTableProductDimensionTimeDimensionAccountDimensionGeographyDimensionAccountTypeDimensionIndustryDimension数据交换平台数据源现阶段现阶段，基于CPFBOS的各业务主体资金相关业务主题营业相关业务主题信贷相关业务主题预构建的基于角色的报表&仪表盘2000+报表，组织在200+页面中，涉及50个流程交互式用户存取界面针对所有用户的门户即席查询/编制工具即席查询+各个部门应用构建标准化的基础数据区数据层次&数据关系口径统一的公共数据账户管理信息、账户活动信息。。。7000+预构建的对象，2300+度量,5000个维基础数据下一阶段数据交换平台的现阶段与未来实现FactTableFact中电财数据架构优化项目的应用框架对IT技术基础设施的关键需求中电财数据架构优化的总体设计框架介绍数据架构优化的设计概述数据架构优化的总体方案设计数据架构优化的系统设计数据架构优化的门户集成设计数据架构优化的运营维护设计主要内容中电财数据架构优化项目的应用框架对IT技术基础设施的关键需求一、数据架构优化的系统接口设计二、数据架构优化的系统应用设计三、数据架构优化的数据层次设计IBM通过主导数据架构优化建设的总体设计，提供业务需求的总体分析和技术上的总体架构，为中国电财未来持续实现数据架构的应用奠定基础，为未来持续发展提供战略层面的意见和建议。四、数据架构优化的ETL架构设计一、数据架构优化的系统接口设计二、数据架构优化的系统应用设计接口灵活度解决方案综合考虑中电财未来的业务发展以及IT系统新老系统的演进，我们从系统设计层级充分考虑接口的灵活度，确保在外围系统变化更替过程中，对于本系统的影响程度最小，并能做到快速应对外围源系统变化。外围源系统通常的变化类型接口灵活度应对措施一、新增数据源系统由于业务发展需要,新建的业务系统,而且也需要作为信息披露或财务分析与预测的数据源二、新老系统的逐步割接最复杂的情况是按照分行逐步割接,在并行期会出现部分分行的业务在新系统,部分在老系统三、源系统自身的升级改造源系统的升级改制,也有可能造成对提供的数据接口有影响措施一:架构设计层级,采用中间层标准数据模型,隔离数据源发生变化对于整个系统的影响措施二:采用新旧线数据来源配置表,通过参数化配置来应对新老系统逐步隔接问题措施三:采用专业ETL工具(Informatica),通过参数配置调整快速应对接口变化接口灵活度解决方案综合考虑中电财未来的业务发展以及IT系统新接口灵活度解决方案-措施一:架构设计层级,采用中间层标准数据模型,隔离数据源发生变化对于整个系统的影响基础数据区为标准数据模型，是综合金融行业主流的数据建模方法,并结合IBM项目经验,确保标准数据模型能够应对未来中国电财业务发展,并在标准模型中预留足够的扩展字段来应对未来的需求.架构设计中采用标准数据层模式,将数据源变动限定在数据预处理模块内部通过与ODS的接口格式定义,预先考虑接口变化需求,预留一些将来可用的扩展字段接口灵活度解决方案-措施一:架构设计层级,采用中间层接口灵活度解决方案

措施三:采用专业ETL工具(Informatica),通过参数配置调整快速应对接口变化以图形化、参数化等直观方式，实现快速优化调整，应对数据源结构发生变化。接口灵活度解决方案

措施三:采用专业ETL工具(Info管理应用层报表分析预测信息展现层和信息发布门户其他应用加工各个业务部门资金业务数据集市数据集市营业业务数据集市WebLogicPotal客户贡献度机构/渠道贡献度产品贡献度CPFBOS资金模块其它系统…数据源层核心类系统数据接口层EAI/ETL即时/批量（日终处理/每周处理/月度处理）ETL：OracleWarehouseBuilder共享维度临时存储区PA数据库（业务数据，计算数据、结果数据）客户单一视图

客户主数据公共数据开放平台数据仓库数据库层数据加工预处理Oracle10GInformaticaPowerCenterCognosBusinessIntelligenceProductions中电财数据架构优化的总体系统应用设计架构CPFBOS营业模块资金结算系统财务系统NC基础数据区数据汇总区管理应用层报表分析预测信息展现层和信息发布门户其他应用加工各中电财数据架构优化的总体系统应用中Cognos应用：

如：固定报表、多维分析、灵活查询、分析预测等中电财数据架构优化的总体系统应用中Cognos应用：

如：固中电财数据架构优化的总体系统应用中Cognos应用：

固定报表中电财数据架构优化的总体系统应用中Cognos应用：

固定报中电财数据架构优化的总体系统应用中Cognos应用：

多维分析中电财数据架构优化的总体系统应用中Cognos应用：

多维分中电财数据架构优化的总体系统应用中Cognos应用：

灵活查询中电财数据架构优化的总体系统应用中Cognos应用：

灵活查中电财数据架构优化的总体系统应用中Cognos应用：

分析预测中电财数据架构优化的总体系统应用中Cognos应用：

分析预中电财数据架构优化的总体系统应用中的J2EE应用：

如：数据补录、人工干预等模块中电财数据架构优化的总体系统应用中的J2EE应用：

如：数据基于中电财数据架构优化的总体逻辑架构设计的整体数据层次设计以及指标库划分。基于中电财数据架构优化的总体逻辑架构设计的整体数据层次设计以各个数据区的用途编号名称用途说明1操作型数据存储(ODS)ODS是"面向主题的、集成的、当前或接近的、不断变化的"数据。2临时数据区临时数据区用于存储各个业务系统的原有机构的历史数据，包括：资金历史数据、营业历史数据等等，以保留将来在数据层面与原有业务数据进行核对时的原始痕迹。3基础数据区基础数据区用于存储中电财各个业务系统的最基础的数据单元，按照客户、账户、交易、机构、科目、凭证等最基础单元存储，与原有系统的机构不同，为了下一步按照各个维度汇总相关指标作数据准备。4汇总数据区汇总数据区用于存储中电财按照各个不同维度汇总的各种相关基础指标的汇总加工后的数据，对指标计算引擎计算出来的结果进行存储。5应用数据区应用数据区直接面对的是Cognos固定报表、多维分析、灵活查询、分析预测等展现，需要针对不同类型的应用对汇总数据区做出一些合理化的转换存储。6789各个数据区的用途编号名称用途说明1操作型数据存储(ODS)O元数据管理平台功能元数据导入 从各种元数据导入元数据管理平台，供后续过程使用元数据分析

依赖分析 通过元数据工具进行数据项之间自动关系分析或手工关系分析。同时，对指标的业务逻辑加工进行回溯分析，用图形化展现指标之间的关系及数据口径说明；

影响分析

对某一数据项的更改，可以分析到对全局的影响，能使业务或开发人员通过系统和应用的单一全局视图，积极地评估更改的影响。可