商务智能概论复旦大学课件

商务智能概论

IntroductiontoBusinessIntelligence基本内容本课程主要介绍数据仓库与数据挖掘的基本概念、基本方法以及在商务决策中的应用。强化基础，偏重应用。基本要求目的主要是掌握商务智能的核心技术基础－数据仓库、OLAP和数据挖掘的基本概念、技术和方法，并在此基础上应用于相关领域。考虑商务智能的跨学科性（统计学、人工智能、企业管理和数据库），学习本课程前要求学员预修统计学、高级数据库系统等课程。

跨学科性：统计学、数据库和人工智能教学方式课堂讲解为主，辅以上机实验、企业专业人士讲座和课堂讨论（研讨）。考核方式成绩的评定主要考虑以下因素：平时表现（出勤、研讨等）、课程论文以及相关认证（例如IBMCertifiedSolutionDesigner–705认证考试）。

教材与参考书[1]赵卫东.商务智能.北京：清华大学出版社，2009[2][3][4]DW03ChangingBusinesswithDataInsight[5]DW11ArchitectingtheDataWarehouse[6]DW35DB2DataWarehouseE9Components[7]DW820AdvancedDataWarehouseWorkshop:Multi-DimentionalModeling[8]JiaweiHan，MichelineKamber.Datamining：conceptsandtechniques（SecondEdition）.MorganKaufmann，2006[9]W.H.Inmon.Buildingthedatawarehouse.NewYork：JohnWiley&Sons，2005数据数据数据是可以记录、通信和能识别的符号，它通过有意义的组合来表达现实世界中的某种实体（具体对象、事件、状态或活动）的特征。商务智能技术可以分析结构化数据、半结构化数据以及非结构化数据、静态的历史数据和动态数据流等各种类型的数据。数据：符号、事实和数字HappyNewYear!HowareYou?事物运动数据信息记录解释Discrete,objectivefactsabouttheworldEasilystructuredandcapturedEasilytransferred信息：有用的数据SenderReceiver处理数据信息知识一个人的垃圾（数据）是另一个人的财富（信息）Dataendowedwithrelevanceandpurpose信息是经过某种加工处理后的数据，是反映客观事物规律的一些数据。数据是信息的载体,信息是对数据的解释。

MostBusinessUsersDon’tHaveConfidenceinInfo!43%ofuserssaythey’renotsureifinternalinformationisaccurate77%saidbaddecisionshadbeenmadebecauseoflackofinformationBusinessWeekstudy,2005知识Informationfromthehumanmind(includesreflection,synthesis)，知识是对信息内容进行提炼、比较、挖掘、分析、概括、判断和推论。事实性知识和经验知识（隐性和显性）。洞察力（insight）RequiresreflectionandsynthesisDifficulttostructure,captureOftentacit信息和知识隐藏在数据中商务智能要求有一个坚固、可靠的大型数据库作后盾，建立这样一个数据库的任务是极其艰巨的。数据的质量问题也是令人头疼而又不可以掉以轻心的。虽然数据是宝贵的财富，然而许多公司并不能充分利用这种财富，因为信息隐藏在数据中，并不易识别。为了在竞争中占得优势地位，必须识别和应用隐藏在所收集的数据中的信息。挖掘决策需要信息与知识情报阶段：确定问题设计阶段：找出解决方案选择阶段：选出解决方案实施阶段：实施方案返回情报阶段返回设计阶段返回选择阶段决策过程的四个阶段决策的过程发现那些需要引起注意的征兆并加以解释,如

销售滑坡、生产成本猛涨、老顾客对新产品的需求、新竞争对手带来的威胁等。最优方案由多种因素决定，如成本、实施的难易程度、对员工的要求、方案实施的时间顺序等。执行选中的方案，检测实施的结果，并作出必要的调整。

高效消费者响应(ECR)及时、准确和无纸的信息流通流畅，不间断的产品流通，满足消费者的需求供应商零售商商店消费者ERP/CM企业资源计划管理品类管理SCM供应链管理CRM客户关系管理POS销售时点系统商业企业信息系统数据爆炸，知识贫乏苦恼:淹没在数据中，不能制定合适的决策!数据知识决策模式趋势事实关系模型关联规则序列目标市场资金分配贸易选择在哪儿做广告销售的地理位置金融经济POS人口统计生命周期信息流畅通了还需要？ERP企业资源规划系统SCM供应链管理商务智能BI（businessintelligence）B2B、B2CCRMInternet等基础设施数据新一代决策支持系统交易处理系统DSS软件系统模式OLAP工具资料挖掘工具外部资料使用者使用者界面DSS资料库数据导向型决策支持系统：事务处理系统等搜集的大量数据，隐藏对决策有用的模式和规则，可以用统计方法、OLAP和数据挖掘等分析得到，以辅助决策分析用。商务智能BusinessIntelligenceisaprocessofturningdataintoknowledgeandknowledgeintoactionforbusinessgain—DataWarehouseInstitute.商务智能是企业利用现代信息技术收集、管理和分析结构化和非结构化的商务数据和信息，创造和累计商务知识和见解，改善商务决策水平，采取有效的商务行动，完善各种商务流程，提升各方面商务绩效，增强综合竞争力的智慧和能力-王茁专著《三位一体的商务智能》.商务智能不是通常的业务处理。它的目标是如何更快、更容易地做更好的决策。IBM商务智能解决方案远远不只是数据和技术的组合，BI帮助用户获得正确的数据，发现它的价值，并共享价值。商务智能的驱动力在商务智能背后有一些商业驱动力，例如：增加收入，减少费用和更有效地竞争的需求。管理和模拟当前商业环境复杂性的需求。减少IT费用和利用已有公司业务信息的需求。商务智能如何创造知识和价值IBM商务智能解决方案DataWarehouseDB2UDB

DB2WarehouseManager

DB2InformationIntegrator

OLAPDB2OLAPServerOLAPServerAnalyzerDB2Cognos

DataMiningIntelligentMinerfordataIntelligentMinerScoring/Modeling/VisualizationSAP

BusinessObjects智能平台企业数据仓库ETL(抽取、转换、加载)即席查询、预定义报表、自定义报表、OLAP、数据挖掘、专题分析模型元数据管理Web服务器客户端客户端客户端客户端客户端大客户分析数据集市财务分析数据集市客户分析数据集市...模型库业务数据库业务数据库业务数据库业务数据库业务数据库业务发展分析客户分析大客户分析用户发展分析收益情况分析服务质量分析营销管理分析财务分析渠道分析反欺诈专题分析客户流失专题分析...商务智能核心技术DatawarehousingStoreandmanageintegratedcustomerdataOLAPInteractivedataqueriesReportingDataminingInsightsintothedataDiscoveryofcorrelationsandpatternsSegmentationandclassificationPredictionandforecastingIBM商务智能产品（资料来源：美国数据仓库研究院，）美国数据仓库研究院的BI体系业务数据分析的类型Increasing#ofusersOLAPStatisticalAnalysisStandardQueryReportingDMIncreasingComplexity数据分析技术的发展可分成报表查询、在线分析处理（OLAP）和数据挖掘3个阶段。

商务智能流程销售分析仪表盘客户流失分析目标顾客群OLAP体育用品公司的数据分析企业绩效管理客户智能是商务智能的重要组成客户智能不仅包括了客户知识（客户的消费偏好、喜欢选用的接触渠道、消费行为特征等等许多描述客户的对话、观察知识）的生成，而且更强调了客户知识在企业中的分发、使用，直到产生客户智能。基于客户智能的CRM系统—分析型CRM某移动企业基于Teradata的商业智能方案各行业电子商务网站算法层商业逻辑层行业应用层商业应用商业模型挖掘算法CRM产品推荐客户细分客户流失客户利润客户响应关联规则、序列模式、分类、聚集、偏差分析…WEB挖掘网站结构优化网页推荐商品推荐……基因挖掘基因表达路径分析基因表达相似性分析基因表达共发生分析……银行电信零售保险制药生物信息科学研究……相关行业商务应用需求的推动神经网络、决策树、回归分析、粗集、遗传算法商务智能应用领域银行美国银行家协会(ABA)预测数据仓库和数据挖掘技术在美国商业银行的应用增长率是14.9％。分析客户使用分销渠道的情况和分销渠道的容量；建立利润评测模型；客户关系优化；风险控制等电子商务网上商品推荐；个性化网页；自适应网站…生物制药、基因研究DNA序列查询和匹配；识别基因序列的共发生性…电信欺诈甄别；客户流失…保险、零售……政府部门、教育机构、医疗机构和公用事业等。利用商务智能的企业现在已越来越多，遍及各行各业。商务智能驱动力商务智能用户商务智能的作用制定合适的市场营销策略改善顾客智能经营成本与收入分析提高风险管理能力改善业务洞察力提高市场响应能力商务智能系统的功能

数据集成找到特定商业问题所有的相关信息经常是一件困难而费力的事情信息呈现经营分析战略决策支持商业智能的发展趋势Gartner公司的调查表明，2000年到2004年之间，安全是企业IT投资排在第一位的主题，而商务智能项目的投资在2000年时仅排在第14位，2007年却突飞猛进，排到了第一位BI公司的收购：Oracle收购Hyperion，SAP收购BusinessObjects，IBM收购Cognos

从战略型的BI到操作型或者实时型的BI更成熟的数据分析和展现技术关注绩效、关注价值、关注数据质量

中国企业对商务智能的应用商务智能在中国的发展尚处于起步阶段，大部分企业对商务智能仍然缺乏必要的了解。据IDC预测，如果中国经济继续保持高速增长，商务智能软件在中国内地市场的年销售额平均增长至少在65.6%，但到2006年中国内地的商务智能软件市场规模仍不到一亿美元。中国虽有宝钢、中国海关以及大的银行和电信公司进行过或正在进行数据仓库和数据挖掘项目，但是大部分企业在这方面的应用还几乎为零。中国企业对商务智能的应用（续）虽说几乎每个中国的企业都需要商务智能，但大规模的分析主要集中在竞争激烈的生活消费品行业、零售业以及金融服务业（如银行、保险等）。国内的生活消费品行业和零售业利润薄，信息化程度低，资金实力不强，因而没有足够能力实施。被商务智能软件厂商们看好的反而是电信、金融、航空等行业，因为这些行业的信息化程度偏高，并且这些行业从某种意义上讲都是服务业，客户的需求扮演着重要角色。这些行业也可以利用商务智能来补充和完善它们实施的CRM和ERP系统。商务智能厂商们也看好正在实施电子政务计划的中国政府部门。商务智能的市场分额商务智能供应商AnalystPredictionsNewlicenserevenueinthebusinessintelligencemarketwillreach$3billionin2009foracompoundannu