基于CWM的数据仓库体系结构设计

基于CWM的

数据仓库体系结构设计我的工作

提出了一个基于CWM的数据仓库体系结构基于该体系结构，参与设计和实现了一个

电信综合业务信息服务平台提纲

背景介绍数据仓库、元数据理论介绍

CWM、MOF、UML、XMI规范介绍基于CWM的数据仓库体系结构设计电信综合业务信息服务平台设计背景介绍

数据仓库的应用越来越广泛不同数据仓库工具之间无法进行数据交换企业的应用受到工具的限制利用元数据可以实现数据交换提纲

背景介绍数据仓库、元数据理论介绍

CWM、MOF、UML、XMI规范介绍基于CWM的数据仓库体系结构设计电信综合业务信息服务平台设计

数据仓库理论

数据仓库的定义数据仓库的建设数据仓库的应用国内数据仓库建设的问题元数据

定义 描述数据的数据研究元数据的原因管理、使用数据的需求系统分布和互通的要求元数据重用、共享的要求元数据的建模和标准化

建模的两大方向元数据参考模型元数据模型标准化OMGMDC提纲

背景介绍数据仓库、元数据理论介绍

CWM、MOF、UML、XMI规范介绍基于CWM的数据仓库体系结构设计电信综合业务信息服务平台设计

元数据的层次

Student（“张东”，“男”，…）Student（“李芳”，“女”，…）……Record（“Student”，Field（“name”，String），(Field（“sex”，String）…)MetaClass（“Record”，[MetaAttr(（“name”）,String),MetaAttr((“fields”),list<Field>)]MetaClass（“Field”，…）通用的元元模型信息，数据（M0）模型（M1）元模型（M2）元元模型（M3）OMG规范和元元数据层层次的关关系元数据层次MOF术语示例M3元元模型MOF模型M2

元模型，元元数据UML元模型，CWM元模型M1

模型，元数据UML模型，CWM模型M0对象，数据数据仓库数据CWM和相关规规范的关关系CWM和MOF的关系CWM和UML的关系直接继承承了UML核心元模模型使用UML图形标记记使用UML中的OCL（对象约约束语言言）CWM和XMI的关系CWM的组成CWM元模型基础包资源包分析包管理包CWMDTD和CWMXMLCWMIDL提纲背景介绍绍数据仓库库、元数数据理论论介绍CWM、MOF、UML、XMI规范介绍绍基于CWM的数据仓仓库体系系结构设设计电信综合合业务信信息服务务平台设设计基于CWM的数据仓仓库体系系结构数据源OLTP数据库遗留数据据内部办公公系统数数据外部数据据数据源多种类型型：关系系型、多多维、记记录、、XML以及其它它一些工工具类型型关系型：模式，物物理表，，视图图，字段，索引，触发器器，外关关键字，主关键键字，，数据类类型，字字段值，，数据记记录，记记录的集集合Relational元模型Relational元模型（（续1）Relational元模型（（续2）关系型数数据源的的主要接接口BaseTable：查询和和修改表表的属性性、触发发器和结结构Catalog：查询和和修改包包含的元元素Column：查询和和设置属属性Row：查询和和修改一一条记录录的内容容RowSet：查询和和修改包包含的记记录ETL读取数据据清洁数据据转换数据据装载数据据ETL组件的接接口黑盒变换换：Transformation，DataObjectSet，TransformationUse白盒变换换：FeatureMap，ClassifierMap，ClassifierFeatureMap，TransformationMap变换的执执行顺序序控制：：TransformationTask，TransformationStep，TransformationActivity，StepPrecedence，PrecedenceConstraint中央数据据仓库数据粒度度最细且且多层次次数据是历历史的数据是时时间相关关的大数据量量数据是整整合的通用的、、全局的的操作数据据存储ODS操作型系统ODS1/21/2企业数据仓库数据集市市企业数据仓库最细粒度数据集市部门2粒度2数据集市部门1粒度1部门3粒度3外部数据源数据集市数据集市市的特点面向部门门应用规模小，，投资少少使用方便便且成本本低元数据库类型：中央元数数据库本地元数数据库内容：抽取过程程：任务、执执行顺序序、映射射关系、、转换规规则描述数据据：方位图图、数据据之间的的商业关关系、商商业规则则、数据据的改变变数据仓库库管理：：安全性、、运行状状态、抽抽取过程程的调度度、I/O对象及其其关系数据仓库库管理访问控制制和安全全性管理理数据增长长管理抽取过程程的管理理性能管理理故障恢复复扩充和演演变管理理数据仓库库管理接接口抽取过程程的调度度（WarehouseProcess，WarehouseEvent，InternalEvent，ScheduleEvent，ExternalEvent）抽取过程程的执行行（TransformationExecution，StepExecution，ActivityExecution）数据元素素的变化化（Measurement，ChangeRequest）OLAP组件接口口立方体的的定义：：Cube，CubeDimAssoc，CubeRegion，Dimension，Hierarchy，Level，Mearsure，LevelBasedHierarchy，HierarchyLevelAsso，ValueBasedHierarchy，MemberSelection，MemberSelGrp，立方体到到物理数数据源的的映射StructureMap，LevelBasedHierarchy，ValueBasedHierarchy数据挖掘掘组件的的主要类类及接口口MiningModel：模型属属性和模模型的输输入MiningSettings：对象属属性，输输入参数数的说明明ApplicationInputSpecification，ApplicationAttribute：使用模模型时的的参数MiningModelResult：挖掘的的结果SupervisedMiningModel:描述预言言性算法法产生的的模型StatisticsSettings,AssociationRulesSettings,ClusteringSettings,ClassificationSettings,RegressionSettings：对应模模型的设设置基于CWM的数据仓仓库体系系结构的的

特点点及优点点统一的数据集集市和数据仓仓库中央元数据库库驱动机制灵活高效的数数据交换方式式易于升级高度的可集成成性高度的可扩展展性基于CORBA的企业数据仓仓库扩展结构构对象服务企业数据仓