发掘您的数字财富

1、发掘您的数字财富发掘您的数字财富郝雪莹郝雪莹微软（中国）有限公司微软（中国）有限公司 为什么要商业智能为什么要商业智能?u业务的脚步在加快业务的脚步在加快做出明智决策的可用时间越来越紧迫做出明智决策的可用时间越来越紧迫u新的洞察力很重要新的洞察力很重要 增长收入增长收入降低支出降低支出u最终用户需要更多更复杂更频繁的报告最终用户需要更多更复杂更频繁的报告新的分析应用增强了用户的主观能动性新的分析应用增强了用户的主观能动性减轻了减轻了I.T.部门的负担部门的负担分析瘫痪分析瘫痪 听起来很熟悉听起来很熟悉?u我有许多数据但我还是我有许多数据但我还是得不到足够的信息得不到足够的信息u为什么我所有的报

2、告关为什么我所有的报告关系一点也不紧密系一点也不紧密?u昨天管理工作就需要得昨天管理工作就需要得到答案了到答案了u谁有时间去做分析谁有时间去做分析?分析瘫痪分析瘫痪 你并不是唯一有这种困惑的你并不是唯一有这种困惑的u可用的商业数据正在以几何级数据在增长可用的商业数据正在以几何级数据在增长u每周需要做出关键决策的次数是五年前的三每周需要做出关键决策的次数是五年前的三倍倍u专门从事分析服务的人员在过去五年中减少专门从事分析服务的人员在过去五年中减少了了50%商业智能商业智能-将您的数字变成信息将您的数字变成信息Information Knowledge Insight Action Results

3、 Information Knowledge Insight Action Information Knowledge InsightInformation KnowledgeInformation为什么要在为什么要在DW中增加中增加OLAP?uOLAP 支持动态分析支持动态分析直接的多维模型直接的多维模型对大型数据库快速的响应时间对大型数据库快速的响应时间规则的分析查询与业务逻辑规则的分析查询与业务逻辑u提供了在不同层次上的分析提供了在不同层次上的分析可以从多个角度来观察数据可以从多个角度来观察数据可以很容易地从整体到细节来分析数据可以很容易地从整体到细节来分析数据OLAP 数据是一致的数据

4、是一致的多维数据多维数据大量的数据大量的数据快速的查询时间快速的查询时间功能强大的分析服务功能强大的分析服务强大的计算功能强大的计算功能最终用户的友好性最终用户的友好性OLAP to the RescueOLAP是跨越分析鸿沟的桥梁是跨越分析鸿沟的桥梁OLAP to the RescueOLAP 的定义的定义u联机分析处理（联机分析处理（OLAP）与与 OLTP相对相对术语由术语由 E.F. Codd 给出给出u一般来讲与一般来讲与EIS, DSS,商业智能是同义的商业智能是同义的u数据的视图是多维的数据的视图是多维的u数据模型数据模型u性能是关键性能是关键OLAP to the Rescue

5、在在OLAP中存储数据中存储数据u 数据库数据库uCubesu维度维度uMeasuresOLAP to the Rescueu数据库数据库存储用来分析的对象和数据存储用来分析的对象和数据uCube用来度量的多维阵列用来度量的多维阵列u维度维度(Dimension)层次型描述实体的集合层次型描述实体的集合时间时间,组织组织,产品产品,地点地点,等等u度量度量(Measure)数量数量,值值收入收入,花销花销,销售预算销售预算,实际销售额实际销售额,销售总数等销售总数等OLAP to the Rescue灵活的导航灵活的导航uSlice and Diceu向下钻取向下钻取, 向上钻取向上钻取uTw

6、ist and PivotOLAP to the Rescue数据的多维视图数据的多维视图OLAP to the RescueOLAP的应用的应用uOLAP可以用作可以用作:分析总结数据分析总结数据 使用类别使用类别(维度维度)来分析数字化数据来分析数字化数据uOLAP一般不用作一般不用作存储非数字的数据存储非数字的数据Transaction的处理的处理OLAP 与数据仓库与数据仓库The Big PictureuOLAP是用户可部署的是用户可部署的BrandAfri ColaRoyal CrownPepsiCoca-ColaWrangler ColaCoca-Cola24Week Endin

7、g031017ChannelMMDrugFood23.5 MM UNITS$28.3 GROSS$26.8 COSTOLAP: An ExampleFood24商业智能领先者商业智能领先者Source: Gartner Research市场表现如何？市场表现如何？Microsoft商业智能一枝独秀商业智能一枝独秀Source: OLAP Report“尽管其它几个主要厂商都在衰退，Microsoft OLAP部署在2001年增长迅猛。” OLAP Report和OLAP Survey的主笔人Nigel Pendse说，“按照OLAP许可证费（那是新增销售的最好证明）来看，Microsoft显然

8、是2001年的领先者，而这导致了Microsoft和其行业合作伙伴在相关工具、应用程序和服务方面迅猛增长。” SQL Server 2000 Analysis ServicesMicrosofts 商业智能解决方案商业智能解决方案项目管理分析点击流分析零售与市场销售分析可视化协作功能数据分斩地理空间分析完整的完整的 BI 提提供者供者SQL Server 2000 具备可扩展具备可扩展RDBMS的完整的平台的完整的平台,包括包括:Data Transformation ServicesAnalysis Services (OLAP and Data Mining)Metadata Servic

9、esEnglish QueryOffice XPExcel 内内置的置的 PivotTable Service可定制开发的可定制开发的Web组件组件SharePointMicrosoft Data AnalyzerAnalysis Services 体系结构体系结构 Analysis Services 体系结构体系结构 MS OLAP 灵活的存储灵活的存储u用户与应用只能看到用户与应用只能看到 CubesAnalysis Services 体系结构体系结构 客户客户/服务器缓存服务器缓存1) Jan01, Feb01, and Mar01 sales2) Q101 Sales3) Q100 S

10、ales1) Jan01, Feb01, and Mar01 sales3) Q100 SalesAnalysis Services 体系结构体系结构 数据存储数据存储 最小化数据爆炸最小化数据爆炸u数据爆炸数据爆炸OLAP在历史上的缺陷在历史上的缺陷u100%密集密集No heaters sold in Phoenix in July; no storage allocatedu智能化的聚集设计智能化的聚集设计 仅预聚合数据的子集仅预聚合数据的子集u压缩算法压缩算法SQL Server 2000 Analysis Services数据挖掘数据挖掘 电影租借的例子电影租借的例子u在线的电影租借

11、在线的电影租借 “电影爱好者俱乐部电影爱好者俱乐部”u会员的信息是已知的会员的信息是已知的统计信息统计信息喜好的电影喜好的电影u目标目标: 增加销售额增加销售额!u我们希望做出这样的预测我们希望做出这样的预测:客户喜欢的电影客户喜欢的电影u我们需要输入的数据我们需要输入的数据:统计信息统计信息客户喜欢的其它电影客户喜欢的其它电影u使用了什么样的算法使用了什么样的算法?Decision tree from SQL Analysis ServicesSQL Server 2000 Analysis ServicesData Mining 将相关的数据结合将相关的数据结合u将用户统计信息聚合将用户统

12、计信息聚合u与相关喜爱的电影联系在一起与相关喜爱的电影联系在一起Cust IDAgeMaritalStatusIQ135M2220S3357M2Favorite MoviesTitleScoreStar Wars8Pulp Fiction9Usual Suspects7Star Wars7Braveheart7Dr. Strangelove10The Matrix9Blade Runner10SQL Server 2000 Analysis ServicesDecision Trees First Classification婚姻状况婚姻状况个人喜好个人喜好 The Matrix飘飘已婚已婚单

13、身单身其它其它FeelingThinkingTrueFalseTrueFalse性别性别男男8095561047117582951174181451女女141113321831033924760226Gender:84% Male16% FemaleGender:23% Male77% FemaleGender:85% Male15% FemaleSQL Server 2000 Analysis ServicesDecision Trees 第二次分类第二次分类Gender:50% Male50% FemaleGender:15% Male85% FemaleMarital StatusPer

14、sonalityThe MatrixGone With the WindMarriedSingleOtherFeelingThinkingTrueFalseTrueFalseGenderMale125199414180Female302285010852600Gender:84% Male16% FemaleGender:23% Male77% FemaleGender:86% Male14% Female u理解与预测个体的相关态度理解与预测个体的相关态度 - 决策树决策树预测信用风险预测信用风险预测购买习惯预测购买习惯MarriedGood (2)Poor (0)Not marriedGo

15、od (0)Poor (1)HighGood (2)Poor (1)LowGood (0)Poor (2)IncomeGood (2)Poor (3)Data Mining Servicesu将个体行为与群体匹配将个体行为与群体匹配 聚集聚集举办一个市场活动举办一个市场活动理解不同的客户从而更好地提供相应产品与服理解不同的客户从而更好地提供相应产品与服务务Data Mining ServicesSQL Server 2000 Analysis Services性能性能u支持实时分析的性能支持实时分析的性能分析挖掘相应的可能与倾向分析挖掘相应的可能与倾向Queries lead to more

16、queriesu首先要计算聚合信息首先要计算聚合信息Answers questions ahead of timeImproves query performanceSet when cube is saved, and is reconfigurableuTrade-off: Performance against spaceMore aggregations take up more spaceAnalysis services provides estimatesAnalysis Services 体系结构体系结构 数据存储数据存储 最小化数据爆炸最小化数据爆炸u数据爆炸数据爆炸OLAP

17、在历史上的缺陷在历史上的缺陷u100%密集密集u智能化的聚集设计智能化的聚集设计 仅预聚合数据的子集仅预聚合数据的子集u压缩算法压缩算法演示：演示：DTSOLAPData MiningIntegrate with Excel/Web/Data AnalyzerFulltext Search布置数据布置数据u停止用户直接访问数据停止用户直接访问数据!u把数据展现给用户把数据展现给用户使用用户每天都使用使用用户每天都使用的工具的工具Web BrowserMicrosoft OfficePortalLOB applicationu赋予他们理解数据的能力赋予他们理解数据的能力!不同的用户与需求不同的用

18、户与需求StrategicAnalysisMonitoringInteractiveReportingDesktopToolDashboardWeb-basedActiveReports分析家分析家偶发用户偶发用户T3 Project Goalsu通过演示设计通过演示设计,布署布署,管理管理企业级企业级的的OLAP实实现来展示现来展示:真实的业务问题真实的业务问题,使用使用真实的数据真实的数据 所所有的数据有的数据都在都在cube中中!易易于使用于使用,灵活灵活,可扩展可扩展,可靠可靠 Analysis Services, ES7000 server ,EMC企业级存储平企业级存储平台台ProClarity分析工具集的分析工具集的强大功能强大功能迅速迅速对对超过超过1.2TB的原始数据构建的的原始数据构建的MOLAP进进行复杂查询行复杂查询UnisysT3 Cubeu零售业数据库零售业数据库,包括包括 7.7 billion 行行, 涵盖涵盖:716,000 产品产品3 渠道渠道71 城市城市按周计算按周计算, 超过五年的时