BI项目商业智能实施方案

商业智能实施方案Tuesday,January17,20231、实施方法?规划解决方案支持数据仓库管理(处理流程与操作)物理数据库设计数据转换应用开发数据挖掘服务设计与实现支持与增强解决方案体系结构设计元数据管理数据仓库评估应用增强逻辑数据模型回顾物理数据库回顾性能调整容量规划解决方案集成定制解决方案规划详细数据分析解决方案准备就绪解决方案实施建议现成解决方案规划数据仓库策略开发业务探索业务探索解决方案定义逻辑数据模型设计修改逻辑数据模型验证解决方案数据仓库的循环过程2、实施步骤数据仓库管理物理数据模型数据转换应用开发数据挖掘服务系统体系结构设计元数据管理解决方案集成项目具体实施步骤项目前期准备业务探索信息探索逻辑数据模型1.项目前期准备2.业务探索（BusinessDiscovery)3.信息探索（InformationDiscovery)4.逻辑数据模型设计5.系统体系结构设计6.物理数据库设计7.数据转换加载ETL8.前端应用开发9.数据挖掘服务10.元数据管理11.数据仓库管理（处理流程与操作）12.解决方案集成（测试验收与试运行）2.1项目前期准备主要任务：–项目启动会议(Kick-offMeeting)–确认项目范围和主要目标–确认项目阶段性验收及总体验收标准–确认项目实施计划–成立项目组–确定各项目小组的成员及各自的工作职责–确定各项目小组的阶段性工作目标–确定教育训练计划–确定服务流程及方式交付项目：《项目组织机构》《项目人员组成》项目前期准备业务探索信息探索逻辑数据模型2.2业务探索（BusinessDiscovery)主要任务：–确定重点用户与数据源–用户需求调研与确认–数据源确认–用户需求和数据源的筛选和分析交付项目：《业务需求说明书BRL(BusinessRequirementList)》《概念数据模型CDM（ConceptualDataModel)》项目前期准备业务探索信息探索逻辑数据模型2.3信息探索（InformationDiscovery)主要任务：–分析用户需求–数据源分析–进行工具评估–系统安全性设计–系统命名规范设计交付项目：《功能需求列表FRL(FunctionRequirementList)》《系统安全性设计说明书》《系统命名规范说明书》《数据质量分析》项目前期准备业务探索信息探索逻辑数据模型2.4逻辑数据模型设计主要任务：–进行原始数据分析–建立实体模型–建立实体间依赖关系–完善并填入所有属性–建立数据库逻辑模型利用工具：Erwin/PowerDesigner交付项目：数据仓库逻辑数据模型LDM《逻辑数据模型说明书》项目前期准备业务探索信息探索逻辑数据模型2.4逻辑数据模型概念逻辑数据模型是用来发现、记录和沟通业务的详细“蓝图”基于概念数据模型（CDM）由一系列表和实体详细描述组成通用的业务语言便于业务与业务之间的功能理解集成当前和未来数据的蓝图独立于技术为物理数据库设计作准备是IT人员和业务人员沟通的工具发现属性发现关系发现实体1.业务规则2.ER图3.ERA建模2.4逻辑数据模型(LDM)示例2.5系统体系结构设计主要任务：对业务、技术环境及企业文化的充分了解，从技术、组织、教育和支持等方面对系统进行全面评估定义业务驱动力定义数据仓库成功的关键因素定义数据仓库的实施原则对系统体系结构各个组件进行详细设计交付项目：《系统体系结构设计说明书》数据仓库管理物理数据模型数据转换应用开发数据挖掘服务系统体系结构设计元数据管理解决方案集成2.5体体系结构设设计组件用户类型拓扑结构网络存取与与互连组织机构安全性数据体系结结构逻辑数据模模型元数据数据据质质量量命名名规规范范数据据采采集集与与转转换换用户户存存取取及及工工具具备份份系系统统操作作管管理理2.6物物理理数数据据库库设设计计主要要任任务务：：转换换逻逻辑辑数数据据模模型型（（LDM））为为物物理理数数据据模模型型定义义主主索索引引、、次次索索引引非正正则则化化处处理理数据据库库建建立立设计计优优化化数据据库库功功能能测测试试使用用工工具具：：ERWwin交付付项项目目：：物理理数数据据模模型型（（LDM））《物物理理数数据据模模型型说说明明书书》》《数数据据库库描描述述语语言言DDL》》建模模方方法法：：第三三范范式式3NF星型型结结构构雪花花状状结结构构数据据仓仓库库管管理理物理理数数据据模型型数据据转转换换应用用开开发发数据据挖挖掘掘服务务系统统体体系系结结构构设设计计元数数据据管管理理解决决方方案案集集成成2.6数数据据模模型型的的演演变变概念念数数据据模模型型（CDM––ConceptualDataModel））主要要实实体体和和它它们们的的关关系系（（MajorEntitiesandTheirRelationships））逻辑辑数数据据模模型型（LDM-LogicalDataModel））业务务模模型型加加（（CDMPlus））:所有有的的表表及及简简单单的的数数据据（（AllTableswithSampleData））辅助助的的表表及及简简单单的的数数据据（（MinorTableswithSampleData））主键键与与外外键键的的关关系系（（PK&FKRelationships））数据据约约束束（（Constraints））属性性（（Attributes））扩展展逻逻辑辑数数据据模模型型（ELDM-ExtendedLogicalDataModel））逻辑辑数数据据模模型型加加（（LDMPlus））:存取取详详细细描描述述（（AccessDemographics））数据据详详细细描描述述（（DataDemographics））物理理数数据据模模型型（PDM-PhysicalDataModel））扩张张逻逻辑辑数数据据模模型型（（ELDMPlus））:索引引（（Indices））非正正则则化化（（Denormalization））2.6非非正正则则化化处处理理(Denormalization)非正正则则化化的的两两种种类类型型：物理理非非正正则则化化派生生数数据据（（DerivedData））汇总总表表（（SummaryTables））重复复的的Groups(RepeatingGroups)多物物理理表表（（MultiplePhysicalTables））预连连接接（（Pre-joins））子实实体体（（Sub-entities））逻辑辑非非正正则则化化视图图（（Views））逻辑辑星星型型结结构构（（LogicalStarSchemas））物理理非非正正则则化化对对模模型型的的灵灵活活性性会会有有影影响响逻辑辑非非正正则则化化是是一一个个优优选选的的方方法法（（OLAP实实现现））2.6物物理理数数据据模模型型（（PDM））2.7数数据据转转换换与与加加载载（（ETL））主要要任任务务：：数据据源源及及其其特特性性定定义义数据据析析取取、、转转换换和和加加载载策策略略设设计计构建建和和测测试试初始始加加载载的程程序序和和处处理理流流程程构建建和和测测试试日常常加加载载的程程序序和和处处理理流流程程40%的的工工作作量量在在数数据据转转换换与与加加载载上上使用用工工具具：：Sagent或或Datastage、、Informatic交付付项项目目：：《数数据据转转换换加加载载设设计计说说明明书书》》《数数据据映映射射（（DataMapping））说说明明书书》》数据据转转换换加加载载脚脚本本（（ETLScripts)加载流程控制制（ETLProcessControl)数据仓库管理理物理数据模型数据转换应用开发数据挖掘服务系统体系结构构设计元数据管理解决方案集成成2.7数据据清洗方法在源系统上进进行清洗（数数据析取前））在加载服务器器上进行清洗洗（数据析取取后、加载前前）在数据仓库里里进行清洗（（数据加载后后）源系统ETL服务器器数据仓库2.7数据据转换常用手手段析取Extracting条件Conditioning剔除Scrubbing合并Merging浓缩Enrichment确认Validating加载Loading评分Scoring关系识别Householding2.8前端端应用开发主要任务：前端应用体系系结构设计OLAP应用用设计(Summary/Fact表表及Cub的产生生）前端应用开发发（随机查询、预预定义报表、、OLAP应用）撰写用户使用用手册用户测试验收收使用工具：查询报表工具具(Hyperionperformancesuit)OLAP工具具（Essbase)基于Web的的开发工具(J2EE)其他开发工具具,如:Portal交付项目：《前端应用体系系结构设计说说明书》《应用模块设设计说明书》》《用户使用手手册》数据仓库管理理物理数据模型数据转换应用开发数据挖掘服务系统体系结构构设计元数据管理解决方案集成成2.10元元数据管理元数据(Metadata)是指指关于数据的的数据，即用用来描述数据据的类型、来来源、定义、、存储位置，，使得业务用用户可以正确确地使用数据据仓库。主要任务：定义元数据使使用功能设计元数据环环境逻辑结构构设计元数据环环境物理结构构选择合适的元元数据管理工工具建立元数据仓仓库（MetadataRepository)建立和测试元元数据接口使用工具：ETLTOOLS交付项目：《元数据管管理说明书》》数据仓库管理理物理数据模型数据转换应用开发数据挖掘服务系统体系结构构设计元数据管理解决方案集成成2.10元元数据开发元数据的开发发应该包含在在数据仓库实实施过程的每每一步骤中，，下图是元数数据各部分内内容与数据仓仓库开发过程程的对应关系系：2.11数数据仓库管理理主要任务：设计和开发数数据仓库支持持体系结构开发和测试数数据仓库日常常运作流程开发和测试性性能监视程序序开发和测试数数据备份与恢恢复程序开发和测试安安全系统设计和开发操操作人员/最最终用户培训训计划建立用户支持持和培训材料料使用工具：系统监控工具具和管理工具具交付项项目：：《数据据仓库库管理理过程程说明明书》》《数据据备份份过程程设计计说明明书》》《安全全管理理模块块设计计说明明书》》《用户户培训训计划划》及及《用用户使使用手手册》》数据仓仓库管管理物理数数据模型数据转转换应用开开发数据挖挖掘服务系统体体系结结构设设计元数据据管理理解决方方案集集成2.12解解决决方案案集成成主要任任务：：建立并并执行行集成成测试试计划划建立并并执行行数据据仓库库平台台测试试计划划建立并并执行行系统统验收收测试试计划划移植开开发系系统到到生产产系统统执行用用户培培训计计划实施数数据仓仓库管管理基基础设设施项目实实施完完成回顾项项目状状态交付项项目：：《数据据转换换管理理系统统测试试报告告》《数据据访问问和信信息发发布系系统测测试报报告》》《数据据仓库库平台台测试试报告告》《数据据仓库库管理理过程程测试试报告告》《系统统回顾顾报告告》数据仓仓库管管理物理数数据模型数据转转换应用开开发数据挖挖掘服务系统体体系结结构设设计元数据据管理理解决方方案集集成总结：：主要要步骤骤及文文档间间关系系BusinessDiscovery(业业务探探索)业务需需求说说明书书(BRL)