XX商行数据中心建设Proposal

商业机密1XX商行数据中心建设宣讲人：xxx电话：xxx邮件：xxx公司介绍数据中心系统建设数据应用体系建设神州数码数据线产品神州数码项目管理体系案例分享Q&A

目录目录公司介绍数据中心系统建设数据应用体系建设神州数码数据线产品神州数码项目管理体系案例分享Q&A

神州数码控股有限公司第4页

成立于2000年，系由原联想集团分拆而来，2001年在香港联合交易所主板上市（股票代码861HK）。公司致力于为中国客户提供第一流的电子商务基础建设产品、解决方案和服务，业务范围涵盖供应链管理服务、增值服务和IT服务等多个领域。神州数码不仅多年来在IT产品分销领域稳居第一，同时也是国内最大的整合IT服务提供商。国际视野，本土服务GLOBALVISION,LOCALSERVICES国际视野，本土服务GLOBALVISION,LOCALSERVICES神码融信公司介绍第5页

神州数码融信软件有限公司是神州数码控股有限公司旗下的专业IT服务公司，专注于金融行业，提供全面整合的IT服务。公司服务涉及了规划咨询、解决方案设计与实施、IT系统运维外包等领域，为客户提供全面整合的服务。根据IDC的最新资料统计，神州数码是中国最大的整合IT服务商，第二大金融解决方案提供商，同时也是唯一能提供金融高端咨询服务的本土服务商。国际视野，本土服务GLOBALVISION,LOCALSERVICES神码融信公司BI事业部介绍第6页

神州数码融信软件有限公司是神州数码控股有限公司旗下的专业IT服务公司，专注于金融行业，提供全面整合的IT服务。公司服务涉及了规划咨询、解决方案设计与实施、IT系统运维外包等领域，为客户提供全面整合的服务。根据IDC的最新资料统计，神州数码是中国最大的整合IT服务商，第二大金融解决方案提供商，同时也是唯一能提供金融高端咨询服务的本土服务商。国际视野，本土服务GLOBALVISION,LOCALSERVICES相关领域客户和案例列表第7页

神州数码融信软件有限公司是神州数码控股有限公司旗下的专业IT服务公司，专注于金融行业，提供全面整合的IT服务。公司服务涉及了规划咨询、解决方案设计与实施、IT系统运维外包等领域，为客户提供全面整合的服务。根据IDC的最新资料统计，神州数码是中国最大的整合IT服务商，第二大金融解决方案提供商，同时也是唯一能提供金融高端咨询服务的本土服务商。目录公司介绍数据中心系统建设数据应用体系建设神州数码数据线产品神州数码项目管理体系案例分享Q&A

银行IT蓝图更新客户信息分析型CRM（ACRM）操作型CRM产品系统渠道事例平台网银语音座席手机邮件用户认证仅限管理安全管理企业门户营销管理销售管理客户管理知识库服务管理客户视图贵宾理财交易总线业务系统（群）核心信贷国结代理基金信用卡…数据集成（DW）数据总线元数据管理数据存储管理ETL运作管理客户评级个人客户机构客户资产信息事件信息交易信息产品信息联系信息企业内容渠道信息ECIF客户客户经理营销信息客户信息客户相关信息产品目录信息客户信息部分客户相关分析结果帐户数据交易数据被分析数据分析结果客户信息实时，经交易总线数据总线客户信息存储标识管理服务10基础数据平台－行业背景数据交换

数据交换体系数据加工

数据处理环境+数据整合模型数据服务

综合应用平台+多层次数据服务系统剧增；网状交换数据化经营对数据的需求

数据加工资源重复投入业务系统减负；T+1数据需求业务创新带来应用的多样化解决问题数据配套

数据治理+数据安全数据质量、数据标准、数据安全问题数据中心系统定位11建立全行的数据中心，统一为为全行的目标系统提供数据；屏蔽目标系统对源系统的直接数据需求，建立统一、层次合理的数据模型，集中管理全行的操作型应用系统的源数据；建立标准化的数据采集、数据整合、数据转换清洗的ETL体系，建立ETL调度平台和监控平台，提供统一的数据批量分发机制和平台形成完善有效的数据治理机制，包括数据质量管理、元数据管理、数据标准管理等内容，为全行提供准确、全面、可靠的数据资源，使企业的数据处于整体有序管理的状态在一定范围内承接源系统批量报表、基础性业务管理报表和即时性分析应用；提供重要性较高和时效性较高的报表和分析应用成为全行唯一的数据资源中心，提高供数的传输效率；支持新应用开发；规范全行批量数据处理的架构；加强数据管理；建立历史数据存储与应用支持基础框架1234系统定位：快速提供系统之间的批量数据，可以满足应用系统T+0的数据需求；合理地在数据线上分配数据加工功能，保证数据处理的高效、准确2快速提供数据全面准确数据标准化加工复用数据中心数据线系统关系知识库调度服务监控服务资源分配服务统一调度监控管理元数据管理系统数据标准系统数据质量管理系统企业级数据治理平台企业级数据治理元信息数据仓库EDWETL应用DW数据治理元信息ODSODSETL应用ODS数据治理元信息OLAP应用OLTP应用企业级批量数据交换平台企业级实时数据交换平台OCRMF应用ECIF应用ACRMF应用数据线建设规划——七个典型发展阶段13信息化起步阶段报表主导阶段数据整合阶段报表整合阶段应用整合阶段治理优化阶段战略提升阶段迭代推进数据线建设规划——目标体系14基础平台信息平台XML市场部

财务部客服部投资部……企业内部机构数据集成平台数据模型应用平台决策平台业务模式运营模式策略思考MissionIndustryVision合作伙伴客户关系市场竞争客户提升业务流程优化统一用户界面应用服务风险管理CRM信用卡分析绩效管理财务管理…系统监控性能监控数据标准数据质量元数据数据安全数据隐私业务连续性生命周期管理咨询平台治理平台业务咨询架构咨询项目交付产品研发应用咨询应用实施模型咨询架构实施数据线建设规划——整体思路业务创新期基础建设数据治理报表支持管理优化期业务支持期数据整合专题应用数据开放创新业务技术主导业务参与业务需求技术支持业务主动技术服务业务价值驱动从技术“推”到业务“拉”的转变养育数据、由小而大、分期建设规划勾画骨架；项目勾画血肉数据线建设规划——技术目标蓝图数据线建设规划——组织目标蓝图信息科技部管理信息部数据分析支持数据管理决策支持分行服务支持总行领导全行业务状况分析业务发展决策分析……各业务系统收集业务数据控制数据标准……总行各部门公司业务部个人业务部金融同业部风险管理部人力资源部。。。分支行机构分支机构领导分支机构业务部门分支机构管信部客户经理业务状况分析业务发展决策分析……相关业务状况分析业务统计报表……支行业务状况分析重点业务部门支持……相关客户业务分析与支持……数据管控体系战略与规划业务应用体系服务运营体系技术平台体系政策、流程、制度数据标准数据质量元数据管理数据架构业务创新战略决策运营策略管理优化应用驱动型服务数据驱动型服务运营驱动型服务数据运营治理基础数据平台数据服务平台数据应用平台数据管控平台运营管理平台数据线建设规划——技术体系数据线建设规划——应用体系数据线建设规划——数据管控、服务运营数据线建设规划——技术平台数据线建设规划——实施路线原则客户信息渠道与整合层绩效管理客户关系管理产品系统风险管理其他支持系统排定的优先级别应用模块的优先顺序中度优先最高优先高优先要点认识客户的基础，同时也是提供差异化服务的基础强化销售能力与多维度绩效管理支持销售型网点的基础产品交付的管道服务与认识客户的基础支持销售型网点及后台交易集中的基础

提供全功能的远端线上银行整合渠道管理提供差异化服务的基础强化销售能力与多维度绩效管理并且及时提供精确的绩效分析报表建构全行资金转移定价的模式提供基于活动的全成本配置机制提供覆盖全面的产品平台支持销售型网点及后台交易集中提供弹性产品组合与协销机制，建构专业产品发展过程认识客户的基础，同时也是提供差异化服务的基础强化销售能力建立风险市集以累积风险数据良好的风险防范与监督检查机制建立目标导向并且定期更新的风险评级机制支持实时市场风险模拟、贷后及全产品风险管理机制支持先进的操作性风险管理交易集中化是销售型网点的基础组织化的人力资源管理与便利的办公室自动化（需要支持异地经营）适时的人力资源开发与培养可信且实时的预算管理数据线建设规划——实施路线图整体规划规划管理规划调整与实施监控服务运营体系数据服务流程、制度制定业务应用体系业务快报业务价值驱动的专题应用（客户、运营、风险、财务、信息）政策、流程、制度制定数据治理体系数据架构管理数据安全技术平台体系基础数据平台（ODS）业务价值

数据架构

技术架构

应用架构

管控架构数据开放数据标准、元数据管理、数据质量主数据管理数据交换服务数据集成服务历史数据服务数据开放服务基础数据平台（历史数据平台）基础数据平台（EDW）数据管控平台ETL平台公共应用平台主数据管理平台基础数据平台（数据交换）专题应用系统管理驾驶舱部门报表总体设计-逻辑架构总体设计-数据架构总体设计-技术架构总体设计-物理架构总体设计-运维架构28设备容量规划性能工艺优化日常运维管理服务基线管理运维架构程序优化作业配置优化任务依赖优化实施工艺流程优化数据源来数基线时间数据处理结束时间数据传输结束时间供数基线时间目标系统要求数据时间对外服务时间定期系统运行情况报告系统规划容量规划性能规划系统维护系统配置参数管理正常启停机检查清理过期数据故障干预备份恢复管理定期维护管理报告系统运行情况监控性能监控服务状态监控作业执行情况监控源数据到达情况监控供数情况监控数据模型-总体规划企业数据模型-数据层次规划原则数据平台设计统一数据交换－架构设计数据整合－架构设计34高阶技术设计数据采集：批量采集数据标准化：格式变换赋缺省值类型变换长度变换代码转换数值转换去除空格特定字符转换去除重复记录公共属性字段增加进入ODS的时间在ODS中更新的时间创建系统号更新系统号源系统创建时间源系统更新时间数据预处理：数据关联一对一或一对多关联：直接采用外键关联多对多关联：多对多关联可以采用关系表进行关联数据拆分代码字段拆分数据字段拆分组合性记录拆分数据合并：是数据服务的一个重要内容，建议在基础数据层合并公共的ETL处理组件转码组件源数据清洗检核全量求增量增量合并全量核心帐号转换文件拆分传输文件特殊处理并传输文件合并标准代码转换增量数据机构拆并全量数据机构拆并其他组件统一ETL－架构设计36ETL设计关键环节——基本设计接口层设计功能：从面向应用和操作的环境生成完整的数据；数据的基于时间的转换；数据的聚合；对现有记录系统的有效扫描，以便以后进行追加。判断增量方法：时间戳自增长的序列号更改标志整表比较日志循环校验码通过TRIGGER实现增量识别码StagingArea设计：减少对数据源的查询压力，有助于数据整合。应用于增量处理对数据的格式进行转换时间调度上的灵活性作为ETL后续处理的统一接口37ETL设计关键环节——异常处理异常主要包括：硬件、操作系统、网络导致异常；数据源数据传输、质量导致异常；ETL过程处理导致异常；目标数据模型导致异常；人工干预导致异常等。建议处理的方法：手工干预，重新调整ETL过程；终止流程,通知管理员；拒绝数据，记录原因；清洗数据，部分入库；监控资源，反复尝试恢复策略：每条记录中有数据ETL的时间戳，对小数据量的数据表，可以通过该时间戳清除掉本次加载的数据。对于大数据量的表，可以利用时间窗口功能，如果大表某一天的数据出现错误后，可以直接进行一天数据的recover。38ETL功能模块调度模块：作业组流管理；调度管理；作业执行；日志管理。监控模块：作业监控资源监控错误处理数据源分析：跨平台能力强；代码自动生成；代码生成规范；代码质量可控；数据质量检测：与数据源数据库无关；自动生成检测报告；零编码，自动化高；模板配置的灵活性；数据处理及作业调度监控体系第39页统一数据管控－架构设计数据治理主要功能及之间的关系

41元数据资料库数据标准管理系统数据质量管理系统元数据管理系统数据读写服务调用图例数据标准管理：规范业务定义、促进数据共享、提升整体业务效率、提升整体数据质量数据质量管理：提供有效的数据质量发现及管理、提供及时的问题处理机制、有效的质量问题定位、完善的质量问题管理及共享元数据管理：企业信息资产的索引、提高数据质量、满足监管政策需、辅助开发和运维数据管控工具总体架构元数据管理数据标准管理数据质量管理影响分析、血缘分析代码标准落地提供检核对象定位检核问题检核指标存储提供映射源数据标准存储数据标准信息模型数据标准文档提供检核规则提供检核问题检核规则指标模型源系统源系统源系统ETL数据服务StageFDMADM数据服务数据服务数据平台应用系统计算规则报表元数据元数据元数据元数据元数据元数据元数据业务元数据技术元数据元数据分类及元数据管理的重要性

43元数据分类业务元数据结构化技术元数据关联类技术元数据操作型元数据业务模型主题域业务实体业务属性数据质量业务规则数据库/文件服务器表/视图/文件列/字段数据集成应用数据集成逻辑模型数据集成物理模型数据质量控制规则数据处理应用数据处理作业……分类为什么需要元数据管理？上下游系统多,变更频繁加工复杂用户访问方式复杂维护周期长元数据管理的架构

44元数据管理的基础功能

45元数据查询浏览：侧重于对元数据的内容展现和查询方式支持元数据数据分析：侧重于基于元数据的分析功能，从数据中提取对技术、业务用户有用的信息

元数据管理：元数据平台的管理功能数据质量维度

46维度说明完整性必须的数据项已经被记录时效性数据被及时更新以体现当前事实唯一性该数据在特定数据集中不存在重复值参照完整性数据项在被引用的主表中有定义依赖一致性数据项取值满足与其他数据项之间的依赖关系基数一致性数据项在子表中出现的次数符合标准正确性数据正确体系了真实情况维度说明精确性数据精度满足业务要求的程度技术有效性数据符合已定义的格式规范业务有效性数据符合已定义的业务规则可信度数据的可信依赖程度可用性数据在需要时是可用的可访问性数据易于访问适用性数据格式和展现满足用户需要数据质量改进标准流程

47启动S1.1识别已知数据问题和当前发起方S1.2确定数据质量评估范围S1.3制定数据治理评估计划S1.4获取相关资源S1.5风险评估S1.6搭建数据质量评估环境定义S2.1了解目标数据概况S2.2识别关键数据项S2.3定义数据标准和业务规则S2.4验证数据标准和业务规则S2.5定义数据质量规则评估S3.1获取评估数据S3.2使用数据质量校验规则校验数据S3.3分析数据质量问题产生的根源S3.4数据质量问题影响分析S3.5开发数据质量问题解决方案清洗S4.1搭建数据清洗环境S4.2清洗和修正问题数据S4.3评估清洗结果改进S5.1搭建新的处理环境S5.2迁移至新的处理环境S5.3评估改进结果数据质量平台功能

48管理配置平台：质量规则的管理维护，支持用户界面手工编辑方式进行维护或者文件方式批量导入检查执行平台：数据质量知识库中抽取相关质量规则，以检查脚本为载体，通过ETL服务器任务调度，完成数据检查，并将检查结果保存进数据质量知识库质检报告展示平台：以WEB页面或者文件方式查看质量检查结果基础数据平台数据标准框架

49数据标准定义数据标准执行数据标准映射数据标准管理流程数据项的主题、分类数据项的业务属性数据项的技术属性数据标准执行的架构数据平台差异和改进建议源系统差异和改进建议数据标准与源系统的字段级映射数据标准与数据平台的字段级映射日常维护更新执行和效果追踪标准定义标准映射标准执行管理流程管理工具数据标准配合数据治理平台的实施

50数据属性的抽取和管理数据衍生关系和影响分析数据和数据的关联关系元数据管理数据质量指标的定义数据质量检查规则的维护管理数据质量检查考核体系的建设数据质量管理数据标准的定义数据标准的维护与管理数据标准工具功能数据和标准的关联关系数据标准在执行过程中的影响评估数据标准的适用范围和使用情况分析数据标准检查规则和执行数据是否符合标准是一个典型的质量问题数据标准执行的综合评估数据治理平台目录公司介绍数据中心系统建设数据应用体系建设神州数码数据线产品神州数码项目管理体系案例分享Q&A

商业银行数据应用系统规划52数据中心统一报表平台历史数据平台客户信息平台其他应用集市营销服务体系ECIF－以客户为中心识别ECIF客户号客户维度统计、分析差异化服务整合跨系统、跨渠道服务集中开户综合签约全貌客户基本属性客户风险属性客户利润贡献属性等客户客户识别客户信息的多点接触一致性360度客户洞悉以客户为中心管理的需求ECIF：EnterpriseCustomerInformationFacility,企业级客户信息视图，是全行集中的、企业级的、实时的、全面的客户信息应用系统ECIF系统建设蓝图数据标准化客户主题客户信息整合建立客户信息管理规范及流程建立长效数据质量提升机制客户信息同步客户信息接口服务统一客户视图客户全貌总览综合对账单客户分层筛选一体化开户一体化签约前端信用卡客服OCRM网银VIP客户管理客户信息管理交易服务核心信贷电话银行理财运维人员技术人员批量数据服务WEB服务数据中心ACRMECIF体系规划ECIF体系规划——存储中心客户信息以中心模式为应用目标，新建系统或改造系统依此建设。OCRM存放营销活动、计划、管理、分析等数据。OCRM营销提醒不采用广播方式发布，而是将结果存放在ECIF，待客户接触渠道识别时进行提醒。数据中心、ACRM做客户的多维分析；单一客户下的单维分层则在ECIF自身实现。ECIF体系规划——识别中心ECIF是客户接触渠道后的入口。在第一接触点得到客户信息，再进行后续的业务。通过识别确认客户，得到跨系统的全貌信息和关系索引。可以完成差异分、个性化的业务服务，进行准确的数据分析统计。ECIF体系规划——管理中心客户信息集中管理，统一数据维护的业务规则，保证客户信息的数据质量。ECIF面向所有系统，能够得到完整的关系，并为各系统提供基于此关系上的服务。ECIF提供全面的服务渠道，支持所有业务系统的接入方式。通过ECIF提供的关系，实现跨系统、跨渠道的应用。如综合签约、综合对账单等。ECIF体系规划——服务中心60营销服务体系业务定位手机银行呼叫中心高柜自助终端网络银行电话银行渠道整合平台存款、取款、转帐贷款审批中间业务交易账户查询、开户、销户。。。。营销计划交互活动商机管理事件提醒市场营销活动交易处理业务处理客户营销人客户基本信息客户帐务信息营销信息关联信息利润贡献信息ECIF客户信息平台ADMFDMODM数据整合平台人客户客户经理整合数据渠道数据服务、咨询申请理财需求分析理财规划建议投资管理理财服务产品信息管理产品组合定制产品价格管理业务办理产品综合服务营销队伍前台营销服务业务处理后台人理财经理客户细分客户特征分析利润贡献分析营销关系分析客户分析、评价业绩统计绩效考评业绩计划管理绩效管理指导辅助提升改进交易请求中台管理后台数据加工营销服务体系业务流程61营销服务体系数据集市绩效管理的原理和流程1.确定信息收集的渠道，保证收集信息的真实性，信息的真实性是绩效考核的基础；2.建立沟通与反馈的渠道，强调员工参与，共同完成绩效目标；3.有针对性地提供相应的辅导与资源，改进不足，确立下一阶段的目标；4.沟通与反馈是绩效管理成败的关键；计划制定数据收集与处理考核结果应用考核与反馈沟通与辅导1.明确考核的目标；2.将目标分解成可度量、操作性强的、具有指导意义的具体目标；1.通过考核得出结果，找出差距；2.就考核结果与被考核者沟通，共同分析原因，确立下一阶段目标及改进点；（会针对改善情况制定专门的行动计划）1.劳动工资与报酬2.人力资源管理3.基础管理的健全4.岗位调动晋升5.人员培训与开发绩效管理是指管理者与员工双方就目标及如何实现目标而达成共识，并协助员工成功达到目标的管理方法。绩效管理系统应用功能业绩分配分行间业绩分配客户业绩分配帐户分配中间业务收入分配业绩分配申请分行内业绩分配客户业绩分配帐户分配中间业务收入分配业绩分配申请客户分配查询机构分配查询业绩查询指标体系管理考核方案管理业绩指标模拟业务预算客户经理等级管理机构业绩查询个人业绩查询客户业绩查询帐户业绩查询中间业务查询定量指标维护定性指标维护指标集合维护指标体系维护新增指标体系复制指标体系删除指标体系关联指标考核方案查询新增方案复制方案删除方案考核方案定制基本信息评分标准考核对象基数管理任务管理费率维护考核方案运行定量指标维护定性指标评分考核进度跟踪考核方案结果成绩结果费用结果存款业绩模拟贷款业绩模拟等级定制等级查询评级方案管理方案查询评级标准等级评定评级人员管理ChinaConstructionBank.|66管理会计系统数据集市ERPF总账FTP总账账户数据主数据分摊参数筛选中间业务流水日报数据（总行）源数据层DM01:接口区DM07:工作数据区DM02:月度数据区管理会计处理层DM10:历史数据层DM11:系统管理数据层DM05:报表准备区DM08:总行报表集市DM09:分行报表集市报表集市层应用层固定报表多维分析灵活查询批量下载预处理后的总账表、金融工具表总行主数据总行业务日报DM06:OFSA区金融工具表总账表系统表完整性检查总分核对表数据调整表主数据维护分摊参数维护报表数据报表数据分行计划监控分行主数据OFSA计算结果历史表Cognos系统管理SUP4J系统管理DataStage系统管理分摊参数DM03:分摊参数区DM04:主数据区接口区历史数据ERPF总账FTP总账账户数据主数据分摊参数筛选中间业务流水日报数据（总行）OFSA准备区数据（分摊参数）Control-M系统管理组合风险集市68市场风险集市报表模块限额管理数据分析查询展现层中间层海外分行数据/外部市场数据（Reuters,Bloomberg,Wind、Kondor+、POMS、OPICS等)ODS（数据汇总传输/数据质量检查/转换）数据仓库缓存数据仓库ETL风险计量引擎RiskManager应用层风险引擎计量接口数据整合汇总常用数据/指标快照流程与数据质量管理

元数据管理交易性市场风险数据集市ETLETLETLETL结果返回数据仓库基础层分析、报表等前端应用所需数据RWA对外供数风险计量引擎数据库ETL69SDATA数据PDATA数据接口层/报表层/中间层/数据抽取、清洗、加载与转换（ECTL）补录改写生成报送文件XLS报表模板导入报表分析平台核心信贷国结财务其他系统报表定制报表展现信息补录平衡校验手工补录应用模型区数据整合区临时存储区统一报表平台系统逻辑架构报表中心70统一报表平台系统技术架构系统运维管理平台元数据统一管理平台企业数据中心BI工具平台前端应用数据源核心系统信贷国结外部数据

BI.OfficeIntelligenceEngine应用安全管理系统监控管理数据源元数据管理ETL/DW/OLAP元数据管理商业元数据管理元数据库OracleDBDB2UDBSqlServerTeradataOracleDB2UDBSqlServerTeradataDatastageInformaticaETL*PlusWebsphereWeblogic财务ETL公司业务部报表分析报表明细数据存储报表汇总数据存储统计学分析数据挖掘EIS/仪表盘信息门户系统管理多维分析即席查询业务报表告警监控规则引擎国际业务部报表分析计划财务部报表分析零售业务部报表分析营运部报表分析管理驾驶舱商业机密71管理驾驶舱（ManagementCockpit,MC）是企业做决策时，所需要的数据以及预警的措施，就像汽车/飞机的仪表盘，随时显示我们关键业务的数据指标以及执行情况墙面显示系统对信息的迅速整理和反映抓住主要问题和问题的主要方面模拟决策结果,对潜在问题早期预警提升高层决策能力直观性可配置性方便性全面性多维性历史数据存储与企业数据生命周期规划

——实施历史系统后的企业数据规划统一规划，集中管理；按需供数，分布使用生产系统一次供数，多次使用生产系统可以随时清理不需要的非活动数据，控制数据增长，提高运行效率生产备份系统，数据仓库，审计，专业查询等系统不需要再常态保存太多原样的历史数据数据生命周期管理使数据管理成本与数据使用价值完全成正比历史数据存储访问系统的应用场景历史数据中心审计供数专项业务应用（如司法查询）风管、外管供数控制数据增长，降低生产压力各种内、外部用户对长期历史数据的查询需求历史数据的简单统计需求（长期历史范围、突发性）生产数据的选择性恢复为数据仓库瘦身历史数据存储系统-应用架构数据服务数据采集数据中心数据压缩单表查询