银行企业级数据中心咨询规划报告

1、银行企业级数据中心咨询规划报告议程数据中心项目实施阶段概览数据中心项目第二阶段工作完成情况综合展现平台设计与开发管理驾驶舱设计与开发调度及数据质量管控平台设计与开发报表设计开发数据中心项目第三阶段工作完成情况系统集成测试用户验收测试及生产试运行2目录项目实施阶段概览第一阶段第二阶段9-110-111-12-13-14-112-11-1项目管理架构设计报表需求分析数据中心建模数据源分析培训2012年11月2日仓库及ODS模型设计结束仓库ETL设计与开发测试展现平台报表设计与开发调度平台建设系统集成测试用户验收测试及上线管理架势仓需求分析2013年02月1日所有的开发和单元测试结束指标体系建设第一

2、阶段（需求设计阶段），3个月：数据中心需求分析和数据中心建模，报表需求分析，调度平台部署。第二阶段（数据中心及BI建设阶段），3个月：数据中心建设，报表设计开发，数据处理平台建设，展现平台建设。第三阶段（验收及报表迁移阶段），2个月：系统集成测试，用户验收测试，报表迁移。第四阶段（维保阶段）：自2013年3月20日起，周期12个月。2013年03月20日完成用户验收测试及上线培训第三阶段议程数据中心项目实施阶段概览数据中心项目第二阶段工作完成情况综合展现平台设计与开发管理驾驶舱设计与开发调度及数据质量管控平台设计与开发报表设计开发数据中心项目第三阶段工作完成情况系统集成测试用户验收测试及生产试

3、运行4目录第二阶段综合展现平台物理架构设计报表平台及Cognos均采用分布式集群架构设计，Cognos部署在Was集群服务器上，Was集群服务器负责完成负载均衡并避免单点故障5第二阶段综合展现平台逻辑架构设计6综合展现平台逻辑架构：展现层提供业务人员能够体验到的统一风格的操作界面，应用层实现Cognos、BO、BIEE的封装，数据层提供报表、分析的数据。展现层IE浏览器访问；单点登录；统一展现风格；与采用Cognos或BO产品无关应用层服务提供层与采用Cognos或BO产品无关服务实现层根据选用的报表工具，如Cognos、BO、BIEE而采用不同的实现方式数据层关系型数据库保存展现平台元数据；

4、Cognos多维立方体提供多维分析；仓库提供报表数据各业务系统ETL第二阶段综合展现平台功能介绍7综合展现平台功能总体介绍报表管理（管理员，IT，业务用户）报表定制报表上传部门维护机构维护机构关系维护数据维护（管理员，业务用户）报表修改报表覆盖报表状态报表审批参数维护公告维护系统管理（管理员）菜单管理角色管理用户管理用户组管理报表信息管理数据模型会话时长设置在线人员监控用户权限查询 目录权限 数据权限 功能权限日志查询 系统操作日志 报表访问明细快速查询报表批量生成报表分发报表归档报表访问统计分析应用功能（业务用户）数据补录报表访问主题分析即席查询我的收藏夹换肤功能修改密码系统公告 查询报表

5、以PDF格式查看 导出为EXCEL 导出为CSV 打印报表管理驾驶仓综合展现平台报表评论 邮件分发 FTP分发移动设备展示非结构化报表访问动态交互报表第二阶段综合展现平台功能介绍（续）8不同用户根据不同的系统权限可以登录到不同的系统，具有多个系统权限的用户可以在系统内进行切换，同时对于我行后续的报表都可以进行集成，如管理会计报表、审计系统报表等。多系统切换第二阶段综合展现平台应用功能9根据业务分类和权限定位报表，点击左侧菜单树上的报表名称查看或运行报表 -监管报表，业务报表，管理报表，即席查询，信息维护点击菜单，右侧标签页弹出报表页面多标签页模式树形机构报表导出第二阶段综合展现平台权限管理10

6、权限管理方案：通过用户管理、权限管理、角色管理的严谨机制，确保业务人员只能看到经过授权的报表中的授权数据用户隶属于不同机构，支持数据权限的管理权限管理目录权限指不同的用户登录拥有的目录权限不同，即不同的用户拥有不同的功能菜单，用户可以通过不同的菜单看到不同的报表。本系统支持一个用户在系统里面可以隶属不同组，登录不同组时权限不同，该功能可以满足系统中一个用户多种身份的需求。功能权限指不同用户在拥有相同目录权限时，拥有的目录权限相对应的报表页面上的一些功能（如报表导出、打印）不相同。数据权限指不同机构的用户查看同一张报表时，所看到的报表结果是不相同的，默认各用户只能看到用户自己所属机构辖内（辖内指

7、所属机构及所属机构的下级机构）的数据，但所看数据的范围可以由管理员给各用户调整，达到不同用户看同一张报表时候所看数据不同的效果。角色管理角色是不同权限的集合用户管理用户组管理机构管理将不同的权限组合成不同的角色可以直接将不同的权限授予不同的用户按照角色给用户授权按照角色给用户组授权第二阶段综合展现平台数据安全11认证与安全管理机制：认证管理向业务人员提供单点登录的功能，安全管理防止用户通过截获领牌等方式越过展现平台直接访问Cognos或Bo数据。认证管理安全管理展现平台支持的认证方式自身认证Active DirectoryLDAP等展现平台到Cognos认证安全性说明用户登录时展现平台会把用户

8、的账号和加密后的密码通过调用Cognos 的WebService接口的方式到Cognos进行认证，认证成功得到Cognos返回的、PASSPORT，然后后面的应用都应用该PASSPORT来实现展现平台和Cognos之间的交互。整个交互过程通过传送基于SOAP协议的WSDL方式，安全快捷。展现平台对报表调用的安全机制展现平台调用报表采用的是URL请求方式，请求时把运行报表所需要的参数和PASSPORT通过HTTP协议中的POST方法一并传给Cognos Server，隐性传递参数和参数值，Cognos Server会根据展现平台的请求来返回相应的结果，此处我们还在Cognos服务端做了防止用户用

9、PASSPORT在浏览器地址栏处直接请求其他报表设置。第二阶段综合展现平台数据管理12本系统支持授权用户（管理员，IT或业务用户）登陆系统完成与系统相关的数据维护，如部门维护，机构维护，机构汇总关系，公告信息等部门维护机构关系管理机构管理公告维护指标维护议程数据中心项目实施阶段概览数据中心项目第二阶段工作完成情况综合展现平台设计与开发管理驾驶舱设计与开发调度及数据质量管控平台设计与开发报表设计开发数据中心项目第三阶段工作完成情况系统集成测试用户验收测试及生产试运行13目录第二阶段管理驾驶舱KPI建设指标14传统报表方式基本流程 制定报表需求 分析数据获取来源 确定逻辑加工规则 展现交互界面需求

10、设计开发测试传统瀑布式流程缺点：需求必须清晰明确不适于分析型业务要求数据及加工过程冗余复杂优点：根据需求快速相应实现相对容易报表建设传统报表指标报表完善指标报表使用情况跟踪收集反馈信息意见外部情况变化报表建设 制定报表需求利用数据平台进行数据汇总加工 报表系统设计及开发指标建设 确立指标体系主干 结合实际情况确定目前可实施的指标 设计指标数据模型分析现状分析银行现有报表情况了解业务部门想法，现状差距收集其他外部同业情况及参考依据现状分析完善指标建立指标报表建设第二阶段管理驾驶舱KPI建设需求15报表现状分析整理指标初稿调研及访谈参考外部资源建立KPI指标确定报表需求KPI及需求整理步骤报表现状

11、分析指收集现有所有的报表以及各类报告性质的文档，通过对其进行多方位的分类分析，了解现阶段报表及各类报告的状况，从中总结出现阶段报表的不足参考外部资源指收集外部有关报表及指标的信息和资料，了解同业或业界先进的方法与差距，为管理驾驶舱报表建设提供参考思路报表建设展望指在现状分析和了解外部参考的基础上，对管理驾驶舱报表的建设提出概括性的要求，为后续细化工作提供指导思想调研及访谈指根据整理出的指标初稿于各个层级和各个业务部门的相关人员进行交流和沟通（通常是调研与访谈形式），收集报表最终的使用者对指标初稿的意见报表使用的期望，为最终指标KPI指标的建立和报表需求的确定提供依据确定报表需求指通过与业务部门

12、沟通的结果，整理报表的功能需求、非功能需求报表建设展望整理指标初稿指在现状分析和外部参考的基础上，根据银行经营的特点，总结出管理驾驶舱指标的轮廓主干以及具体的指标定义第二阶段管理驾驶舱KPI指标16根据业务访谈结合我行实际数据和现阶段行领导关注重点，梳理出符合我们实际的KPI指标体系指标类别指标名称指标数资产负债类各项存款、各项存款(日均)、各项贷款、各项贷款(日均)、各项贷款无贴、各项贷款无贴(日均)、银行承兑汇票、资产总额、负债总额、核心负债总额、流动性缺口、90天内到期表内外资产、流动性资产、流动性负债、资本净额、所有者权益、超额准备、普通贷款余额（日均）、票据贴现余额（日均）、债券投资

13、余额（日均）、其他投资余额（日均）、存放央行款项余额（日均）、存放及拆放同业余额（日均）、普通贷款收入（日均）、票据贴现收入（日均）、债券投资收入（日均）、其他投资收入（日均）、存放央行款项收入（日均）、存放及拆放同业收入（日均）、各项存款余额（日均）、同业存放及拆入（日均）、发行债券余额（日均）、再贷款/再贴现（日均）、存款利息支出（日均）、同业存放及拆入支出（日均）、发行债券支出（日均）、再贷款/再贴现支出（日均）、现金及存放中央银行款项、存放同业款项、贵金属、拆出资金、交易性金融资产、衍生金融资产、买入返售金融资产、应收利息、发放贷款和垫款、可供出售金融资产、持有至到期投资、长期股权投资

14、、投资性房地产、固定资产、无形资产、递延所得税资产、其他资产、向中央银行借款、同业及其他金融机构存放款项、拆入资金、交易性金融负债、衍生金融负债、卖出回购金融资产款、吸收存款、应付职工薪酬、应交税费、应付利息、预计负债、应付债券、递延所得税负债、其他负债68盈利类利息收入、利息支出、利息净收入、手续费及佣金收入、手续费及佣金支出、手续费及佣金净收入、其他业务收入、营业支出、营业税金及附加、业务及管理费、其他业务支出、投资收益、营业外收入、抵债资产收入、营业外支出、营业外净收入、每股净资产、每股净收益、拨备前利润、资产减值损失、利润总额、所得税、净利润、公允价值变动收益、汇兑收益、各项收入、各项

15、支出27风险类不良资产率、不良贷款率、正常贷款迁徙率、次级类贷款迁徙率、可疑类贷款迁徙率、单一集团客户授信集中度、授信集中度、全部关联度、资产损失准备充足率、贷款损失准备充足率、资产利润率、资本利润率、成本收入率、风险资产利润率、流动性比例(本外币)、核心负债依存度、流动性缺口率、人民币超额备付金率、本外币合计存贷款比例、利率风险敏感度、累计外汇敞口头寸比例、存款前十大客户、贷款前十大客户、最大十家授信客户、最大十家同业拆借客户25客户类法人客户数、个人客户数、新增法人客户数、新增个人客户数、新增理财客户数、账户数、新增账户数、新增销户数、新增对公存款、新增个人存款、存量对公存款、存量个人存款

16、、存款交易笔数、存款交易金额、贷款交易笔数、贷款交易金额16产品类正常贷款、关注贷款、次级贷款、可疑贷款、损失贷款、个人贷款、公司贷款、票据贴现、涉农贷款、中小型企业贷款、小微型企业贷款、逾期贷款、到期贷款、到期贷款回收、到期贷款回收率、累计发放贷款、累计回收贷款、发卡量、睡眠卡量、银行卡交易笔数、银行卡交易金额、银行卡存款、银行卡存款（日均）、会员制担保贷款24第二阶段管理驾驶舱IPAD展示17通过同业比对，客户统计，经营分析等多方位多角度的数据分析，展现我行关键指标，为决策层提供直观的数据支持第二阶段管理驾驶舱PC展示18管理驾驶舱首页，展现最近5天的数据变化趋势，通过机构转取查看各级机构

17、详细变化趋势，收缩菜单设计，更直观的展现数据机构逐层转取标签页展示自动收缩菜单议程数据中心项目实施阶段概览数据中心项目第二阶段工作完成情况综合展现平台设计与开发管理驾驶舱设计与开发调度及数据质量管控平台设计与开发报表设计开发数据中心项目第三阶段工作完成情况系统集成测试用户验收测试及生产试运行19目录数据管控组成模块管控支撑技术规范实施办法支撑平台管控流程流程目标流程任务流程分级管控组织管控架构管控层次管控职责管控机制管控政策规章制度管控办法考核机制数据质量数据质量提升数据质量监控与优化数据质量主动保证元数据业务元数据技术元数据操作元数据管控手段完善与落地保障与规范第二阶段数据管控数据管控各组成

18、部分的意义：管控机制定义数据管控各个领域的工作方法和步骤明确各个相关部门在数据管控各个领域中的分工和协作关系管控流程通过政策和规范的方式发布数据管控各个相关部门的责任明确数据管控各领域的政策、规范和实施办法确保数据管控的管理原则和执行是一致地贯穿全行改变或规范各个部门数据管控人员的行为管控政策提供一套数据管理的支撑工具支撑数据质量的监控，规则和问题的集中管理支撑元数据的发布，查询等流程管控工具明确某类数据的责任人定义不同数据责任人的职责，对某一特定数据范围内的信息的正确性，一致性和及时性负责管控组织第二阶段数据管控数据管控各组成部分的意义：管控手段一致和准确的数据是业务运营与决策分析的基础良好

19、的、高质量的数据可以有效降低系统建设成本外部的监管和规范，如1104、反洗钱、CRM等，对数据的质量提出了越来越高的要求数据质量管理业务术语、标准等的统一定义、管理、引用各式数据流（像文件交换、点对点直连、企业数据总线等）的管理数据的创建引用关联、血缘的分析对其它数据管理领域，像数据质量、数据生命周期的支撑元数据管理第二阶段数据管控实施细则：元数据管理元数据梳理技术元数据由ETL开发人员进行梳理，业务元数据由业务分析人员进行梳理。在元数据管理的初始阶段，划定元数据的管控范围，就本项目而言，技术元数据包括各源业务系统数据结构，数据中心的数据结构，以及贯穿于从源系统到数据中心系统的ETL程序及应用

20、。业务元数据包括应用系统范围内的指标。梳理应以实际情况为依据，将范围内的元数据清晰划分，由元数据管理员按照元数据管理流程，将元数据初始化加载到元数据管理平台中。元数据发布就技术元数据来讲，在元数据相关的内容上线后，即可由元数据管理员启动发布流程。元数据管理员根据开发人员提交的元数据清单，判断元数据录入的方式，决定手工录入或启动抽取程序进行自动抽取。录入后，检查元数据是否正确，确认正确后，即可将元数据发布。业务分析人员从业务部门获取的需求文档中，整理出业务元数据清单，提交给元数据管理员以启动业务元数据流程元数据维护在数据中心系统的持续建设过程中，元数据有可能发生改动、新增或删除，元数据管理员应将

21、元数据的管理工作重视起来，使元数据的管理和实际系统的变化想吻合。在每次系统变更上线后，将元数据的变化及时发布到元数据管理平台中，保持和实际系统的一致性。第二阶段数据管控实施细则：数据质量管理制定检查规则数据质量检查规则可按ETL流程分为两大类，一类是对源业务系统的数据质量进行梳理，另一类是数据中心系统中关键检查点的数据质量监控。数据质量管理员应广泛收集数据源分析需求，将其转换为数据质量检查规则，在数据质量管理平台中进行数据源数据质量的分析，并将分析结果囊括在数据质量报告中，敦促源业务系统进行数据的整理，促进数据质量的稳步提升，逐步做到数据质量管理的事前防范。设立关键检查点，对关键技术指标进行监

22、控问题发现数据中心系统的相关使用、开发人员均有可能发现数据质量问题，不管是业务人员还是技术人员，在发现数据质量问题后，均可以启动数据质量问题管理流程，将数据质量问题提交给数据质量管理员，数据质量管理员对问题进行分类辨别后，决定是否将该问题提交给下一主体下一主体是指相关的系统负责人，由该系统负责人将数据质量问题分配给相关的开发人员进行处理问题处理数据质量管理员应定期或不定期的查看已经提交的数据质量问题，将其分配给相关系统负责人进行处理，并定期检查问题处理结果，及时跟踪问题处理状态，在收到反馈后，对该问题进行验证，验证通过后返回给问题提出人，进而关闭问题由数据质量管理员负责将问题的处理方法记录至方

23、法库中，便于在以后的处理工作中作为参考数据质量报告数据质量报告的准备和查询时数据质量管理员的主要工作之一，在对源业务系统的数据质量有要求时，数据质量报告应侧重于源业务系统的数据质量情况，便于数据质量的提升数据质量报告还应包括各检查点，数据质量监控模块产生的监控结果，由数据质量管理员进行监控结果的辨别和梳理，将监控结果整理成数据质量报告，并启动数据质量管理流程，将数据质量问题提交给相关的处理人员第二阶段数据管控管控支撑：元数据管理第二阶段数据管控技术元数据管理业务元数据管理管控支撑：数据质量监控报告,包含总分检查，字段级业务编码检查，金额字段检查，关键字段规则检查，如：客户关联关系在客户信息中无

24、相关记录，已发放贷款的信贷客户信息与核心客户信息无对照关系，贷款五级分类，贷款类型，企业类型空值的检查等第二阶段数据管控导出数据质量报告管控支撑：数据质量监控点核心系统信贷系统国际业务财务系统 票据理财数据交换区ETLREQUESTER(pull and push)客户数据账务数据流水数据汇总数据摘要数据导出数据用户外部数据样本决策、分析FTP审计管理报表绩效考核明细数据IIIIIIIVV分析型集市资金数据质量问题库数据质量异常控制数据质量报表外部数据数据中心形成监控报告第二阶段数据管控统一监控平台第二阶段调度平台作业运行实时状态统计正常作业运行时间操作元数据管理第二阶段调度平台源系统到数据中心平台字段级映射规则信息作业运行场景及并发度管理作业批量管理作业管理第二阶段调度平台作业优先级配置作业并发度管理大任务并发度管理作业批处理频率管理日常监控第二阶段调度平台作业处理实时及历史状态监控数据质量：每日核查总账分户账数据，业务编码，分户余