IBM商业智能解决方案及发展方向

IBM商业智能解决方案及发展方向刘晶炜信息管理中国区技术经理IBM软件部第一页，共三十三页。内容商业智能的发展趋势IBM商业智能的技术平台的发展IBM行业数据仓库模型第二页，共三十三页。随需应变的信息管理系统

将信息转化为业务智能洞察力信息预见能力数据主动被动业务灵活性和适应能力商业价值整合多个不同数据源的数据和内容…将它们转化为有价值的信息...进行实时业务分析支持快速准确地业务决策…第三页，共三十三页。商业智能

从消极的报表到实时的洞察力昨天今天持续,实时的商业智能开放的环境联合企业级数据仓库和交易型系统行业解决方案基于时间点的商业智能专注于基础架构互相孤立的数据集市技术的拼凑第四页，共三十三页。对商业智能系统建设思路的回顾项目建设的重要考量因素系统架构数据模型业务驱动技术实现数据集市数据仓库第五页，共三十三页。企业级数据仓库模型的价值日益重要第六页，共三十三页。内容商业智能的发展趋势IBM商业智能的战略数据仓库引擎数据仓库构建数据仓库扩展DWE集成数据仓库平台IBM行业数据仓库模型第七页，共三十三页。andmore…abc…DB2IBMContentManagerOraclexyz…异构的应用和信息商业智能流程整合业务报表综合业务应用信息服务数据和内容服务业务应用服务业务分析服务实时：在线帮助，同步的主数据…萃取的:BaselII,业务优化…基于标准：XQuery,JSR170,JDBC,WebServices...IBM信息管理战略:将信息转化为服务

破除数据孤岛，提供灵活的信息基础设施第八页，共三十三页。实时分析是关键通过联邦到达实时和异构的数据源消息队列流数据ETL，支持批处理和实时负载WebSphere信息集成器联邦,ETL实时，异构ETL运行和外部更多的用户=更多的价值高级分析实体分析挖掘预测建模+++DB2实体分析DB2打分…内嵌分析嵌入在流程中流程驱动（通过分析）DB2Alphablox门户集成易于部署和使用WebSphere门户服务器IBMWorkplace…工具和应用合作伙伴数据仓库/DWEODS/转储WII数据中心/CubeviewEDW数据仓库比以往任何时候都更加关键企业数据仓库可扩展性减少了复杂性混合负载支持IBM完整商业智能平台–数据分析更全面、更实时第九页，共三十三页。DB2数据仓库引擎－海量数据的处理能力high-speednetworktableCPUMEMCPUMEMCPUMEMCPUMEMMPP–多台机器，每台机器具有一颗CPU和独立的操作系统CPUMEMCPUCPUCPUtableCPUMEMCPUCPUCPUtableCPUMEMCPUCPUCPUhigh-speednetwork集群–

多台SMP机器SMP–在一台机器内有一个操作系统，多颗CPU第十页，共三十三页。混合分区技术1000MachinesDatabasePartitioningTable

Partitioning64GJan64GFeb64GMar64GAprMDCORDER_IDSHIP_DATEREGION,CATEGORYRowHashRangeCluster第十一页，共三十三页。DB2提供基于字典的强大数据压缩能力字典.Fred,Dept500,10000,Plano,TX,24355…Fred,(01),10000,(02),John,(01),20000,(02),Site301Dept50002Plano,TX,24355……John,Dept500,20000,Plano,TX,24355,Site3179.9GB42.5GB76%Smaller!实际用户样例国内测试结果:ERP系统:数据存储减少70%以上,同时性能提升10%电信话单:数据存储减少50%银行交易:数据存储减少50%第十二页，共三十三页。查询负载管理－QueryPatroller查询管理:在数据仓库引擎执行前进行查询状况报告:报告过去历史查询执行情况的详细及汇总信息监控:DBA可查看最近提交的查询并可对正在执行的任务进行有效干预性能提升:提升查询吞吐量及数据仓库整体效率Query提交DB2EngineDB2QueryPatrollerqueryDBA控制分析信息queryfeedback第十三页，共三十三页。数据仓库的构建企业信息整合系列产品开放的、面向服务的架构整合的数据轮廓和数据质量复杂的数据转换和路由控制可重用的组件和规则没有限制的线性扩展能力企业元数据管理任何时间、任何地点的互联符合工业标准(XML,EDI,JMS,JCA)完备的行业解决方案并行执行机制探索发现数据内容和结构准备标准化、匹配和修正数据转换和交付转换、增值和交付数据Pro™QualityStage™DataStage™元数据管理实时整合服务企业信息连接和事件管理面向服务架构第十四页，共三十三页。ETL处理-Datastage完全图形化的设计工具管道式运行模式优异并行处理能力第十五页，共三十三页。IBM数据仓库平台扩展多维分析

-Cubeview支持数十个维度以上的处理支持范围、区间的计算处理可混合多维及明细SQL数据访问数据挖掘－IntelligentMiner与数据仓库引擎集成的数据挖掘能力支持实时及闭环的挖掘分析PMMLModelDB2DataWarehouseIMScoringIMModelingIMVisualization实时决策生成模型DB2OLAPServerQMFforWindowsSQL第十六页，共三十三页。集成的数据仓库管理平台集成数据仓库、数据建模、数据挖掘、OLAP和在线分析等功能于一个统一平台同时支持包括DBA、数据架构设计师和BI专家在内的各类用户DB2V8.2&SoonVIPERWeb-basedAdministrationConsoleDataModelingSQL

WarehousingBISpecialistDataArchitectBIDesignerDataMiningOLAPEnablementIn-LineAnalyticsDBAIntegratedDesignCenterDB2DataWarehouseEdition-集成数据仓库平台第十七页，共三十三页。DWE集成的商业智能设计平台EclipseRationalDataArchitectSQLModel2,Serverexplorer,projectexplorer,physicalDBmodelETLControl-FlowEditorMiningTools(Visualization,modelsmgt.Deployment&codegen.)DataExplo-rationToolsETLTools(debug,deploy,etc...)ETLDataflowEditorDataMiningEditorDataFlowEditorFrameworkOLAPToolsAlphaBloxToolsCommonoperators第十八页，共三十三页。集成的BIDesignStudio从数据流生成SQL数据流控制流数据模型设计数据映射数据挖掘数据处理流程设计第十九页，共三十三页。商业智能要求平衡的软硬件配置

查询性能提升50%+Database

ArchitectureSystemServerStorageMemoryCPUsCluster/

SMPArchActuatorsLUNsDisk

SizeRAID100%100%IBMBCU方式System

SoftwareShare

Nothing

ArchitectureActuators

perLUNLUNs

perArrayDiskSizeRAID100%

Storage系统效率50%传统方式30%+overheadonI/OHighI/OwaitsLowerprocessutilizationBIperformanceproblemsare60%+I/Orelated++=TotalStorage®Throughput

EfficiencyBCU:BalancedConfigurationUnit

第二十页，共三十三页。更深入的XML集成，简化和统一基础设施统一数据和内容扩展资产利用利用已有技能数据库支持nativeXML文档存储XML文档保真度优化性能灵活性利用成熟的数据库服务DB2提供NativeXML存储支持,提供对XML的查询和全文搜索能力XML进一步扩展商业智能的领域复杂模式演化序列和层次XQuery和/或SQLXML和/或关系数据XML文档,交换XMLRDBColumns内容存储文件层次数据库关系数据库数字化内容性能、可伸缩性、可用性和安全…混合处理能力灵活的基础设施查询灵活性XML数据库应用无关第二十一页，共三十三页。内容商业智能的发展趋势IBM商业智能的技术平台的发展IBM行业数据仓库模型第二十二页，共三十三页。集成的企业级数据仓库应用数据集市(业务应用)EDW应用应用应用应用原子数据(范式化)ODS/StagingLayerOLTP业务系统BI应用ETL逻辑／物理集市层SQL第二十三页，共三十三页。IBM行业数据模型-提供完整数据仓库行业解决方案

数据仓库模型业务方案解决模板业务模型数据仓库经过10余年的发展，用户已认识到行业数据模型的价值IBM总结全球数据仓库实施经验，提供行业数据仓库模型采用行业数据仓库模型，借鉴国外业务及数据仓库建设经验数据仓库模型为IT人员与业务人员提供共同的交流平台IBM提供相应的数据仓库模型咨询能力银行业：BDW保险业：IIW电信业：TDW零售业：RDW行业数据模型提升数据仓库的价值第二十四页，共三十三页。IBM数据仓库应用模式ETL/MessagingSourcesBusinessApplicationsMgtReportingDataMiningPredictiveModelingDataAnalysis&ReportingPhysicalDesignLogicalDesignEnterpriseDataWarehouseSummaryAnalysisStagingAreaSystemOfRecordClassifiedSourcesFeedbackDataMartDBStructuresROLAPRelationalOtherOLAPServer*Essbase数据集市数据库的设计可以从BST生成BST与IIW的关联和匹配，可以帮助快速界定数据仓库的范围全面的企业数据仓库的生成是通过一系列易管理的、阶段性的实施得到的WarehouseMgmt&AdminMetadataMgmt&MetadataRepositoryBST可以帮助快速采集和界定业务需求及范围IIW为数据仓库的全面实施提供蓝图IIW为保险公司提供基本和全面的数据结构和内容，易于业务和技术人员间的沟通个险系统团险系统健康险财务系统呼叫中心其他第二十五页，共三十三页。保险BST：业务解决方案模板列表营销结果分析营销通讯分析营销联系人分析营销成本分析营销收益分析营销销售分析分析型CRM风险分析理赔处理效率分析追偿金支付分析核赔分析理赔月结分析理赔统计分析理赔价值变化分析延迟理赔分析损失事件分析年累计理赔比较分析盈利率/绩效长期保险的偿付能力分析偿付能力陈述

长期保险的费用长期保险的保费长期保险的负债和利润分析净资产分析利润和损失分析客户营销分析CRM事件分析交叉销售战略分析交叉销售预测分析投保人行为分析household价值分析客户继续率分析客户利益分析客户前景最优分析客户满意度分析客户风险分析高级分析业务量分析新业务量分析保单事件分析保单持久性分析退保分析资金流向分析核保分析孤儿单分析中介持续职业发展分析代理绩效/能力关键指标分析代理培训分析客户反馈中介分析中介赔偿分析中介持续分析中介产能分析中介销售绩效分析保单送达分析

资产负债分类方法分析资产负债净资产法分析资产负债流动性分析资产负债投资组合基本分析现金流直接分析现金流间接分析现金流间接FI分析长期保险的偿付能力分析利率风险分析投资风险分析。。。索赔效率分析中介绩效业务绩效合规管理财务报表分析现金流汇总报表股东资产净值变化汇总分析联合资产负债表分析收入汇总报表分析财务状况和运转结果的管理分析损益表本身分析损益表基本面分析损益表FI分析股权变动表分析第二十六页，共三十三页。数据仓库逻辑模型构成：（EnterpriseModel）第二十七页，共三十三页。企业模型和数据集市模型－EM&DataMarts核心原子数据事实表和维度企业模型营销管理快速入门客户细分和管理保险盈利性分析潜在客户管理数据集市导出业务数据模型映射指标要素需求模型财务报表数据集市中介绩效分析数据集市健康险盈利性管理数据集市第二十八页，共三十三页。相关模型的应用BDWMBM匹配数据源业务系统BSTsBST设计数据集市/业务分析应用EM设计企业数据仓库BusinessSolutionTemplateEnterpriseModelBusinessModel统一的模型管理工具第二十九页，共三十三页。模型客户化的实施方法自顶向下RM12业务驱动跨不同业务系统的数据源采样