数据仓库概念设计和介绍PPT课件

1、事务处理环境不适宜事务处理环境不适宜DSS应用的原应用的原因因 事务处理和分析处理的性能特性不同 操作型处理对数据的存取操作频率高而每次操作处理的时间短； 在分析处理环境中，某个DSS应用程序可能需要连续几个小时，从而消耗大量的系统资源。 数据集成问题 数据动态集成问题 历史数据问题 数据的综合问题 第1页/共29页抽取程序抽取程序 用抽取程序能将数据从高性能联机事务处理方式中转移出来，在需要总体分析数据时就与联机事务处理性能不发生冲突。 用抽取程序能将数据从联机事务处理范围内移出时，数据的控制方式就发生了转变。第2页/共29页蜘蛛网问题蜘蛛网问题n缺乏将数据转化为信息所需的历史数据第3页/共

2、29页体系结构设计环境的层次体系结构设计环境的层次第4页/共29页数据仓库的概念数据仓库的概念 第5页/共29页数据仓库的特性数据仓库的特性 第6页/共29页数据仓库的结构数据仓库的结构第7页/共29页 数据仓库设计中的几个重要概念数据仓库设计中的几个重要概念 据单元属于且仅属于一个分割。第8页/共29页第9页/共29页n -种设计技术。第10页/共29页企业数据模型到数据仓库数据模型的转换企业数据模型到数据仓库数据模型的转换第11页/共29页数据模型的规范化数据模型的规范化/反规范化反规范化第12页/共29页数据仓库体系结构OLTP数据源数据仓库数据集市? 数据采集及整合数据的映射规则、模型

3、。 （元数据管理）数据仓库项目流程管理及系统性能管理和监控? 数据展现及决策生产财务结算外部航线分析总量分析市场分析InfoPump数据分析、DM终端用户终端用户第13页/共29页从操作型的现存系统到数据仓库中数从操作型的现存系统到数据仓库中数据转换工作的难点据转换工作的难点第14页/共29页概念概念：数据周期、简要记录数据周期、简要记录第15页/共29页数据仓库的建模数据仓库的建模应用于数据仓库中较小的实体。第16页/共29页Vendor dataVendor dataVendor datavendor_id供应商cust_id客户order_id发货Order dataOrder data

4、order_id订单Cust dataCust dataCust dataNonkey dataOrder dataOrder dataOrder data产品Product dataProduct dataProduct dataProduct idVendor idNonkey datacust idNonkey dataorder idNonkey dataproduct id第17页/共29页数据建模的十条戒律数据建模的十条戒律必须回答紧迫的问题；必须有正确的事实表；将有正确的维表，描述必须按最终用户的业务术语表达；必须理解数据仓库所影响的公司过程或影响数据仓库的公司过程；对于事实表，

5、应该有正确的“粒度”；根据需要存储正确长度的公司历史数据；以一种对于公司有意义的方式来集成所有必要的数据；创建必要的总结表；创建必要的索引；能够加载数据仓库数据库并使它以一种适宜的方式可用。第18页/共29页数据集市外部数据数据集市建造企业数据仓库H建设中心数据模型H一次性的完成数据的重构工作H最小化数据冗余度和不一致性H存储详细的历史数据从企业数据仓库中建造数据集市H得到大部分的集成数据H直接依赖于数据仓库的可用性操作数据问题投资效益的时间?H建设中心数据模型的必要性和可能性?初始费用 ?企业数据仓库第19页/共29页数据集市建立部门数据集市H限制在一个主题区域H快速投资收益 H区域自治 设

6、计的可伸缩性强H对相关部门的应用容易复制 H对每个数据集市需要数据重构H存在一定的冗余及不一直性逐步扩展到企业数据仓库 (EDW)H把建造EDW作为一个长期的目标存在的问题:数据集市的数据都是可用的吗?能生成数据模型吗?如何解决不一致性?外部数据操作数据 (全局)&操作数据 (局部)操作数据 (局部)数据集市企业数据仓库第20页/共29页数据仓库的开发过程数据仓库的开发过程第21页/共29页数据模型的内容数据模型的内容第22页/共29页表达数据模型的最好数据表达数据模型的最好数据第23页/共29页将数据模型变为数据仓库要做的主要工将数据模型变为数据仓库要做的主要工作作第24页/共29页在接口中需完成的工作在接口中需完成的工作第25页/共29页数据仓库开