数据挖掘商业运用现状和发展新思路课件

数据挖掘商业运用现状和发展新思路2005年12月29日李剑（上海）宏能畅然数据应用有限公司数据挖掘商业运用现状和发展新思路2005年12月29日内容关于宏能畅然数据挖掘商业运用现状及案例分析数据挖掘产品厂商的视野和新迹象几点思考2内容关于宏能畅然2内容关于宏能畅然数据挖掘商业运用现状及案例分析数据挖掘产品厂商的视野和新迹象几点思考3内容关于宏能畅然3关于宏能畅然创立时间

1998年创立者张少华博士（SAS中国公司的首任董事总经理）李剑先生（前SAS公司北京代表处经理）姜宏博士（前SAS公司北京代表处技术经理）公司专注数据仓库设计与开发企业运营与绩效考核分析系统、商业智能应用系统设计与开发业务Insightful公司的S-PLUS系列产品的独家代理销售与相关技术支持业务Unica公司的面向营销促销、客户关系管理的专业数据挖掘平台UnicaAffiniumModel和Campaign的独家代理销售与相关技术支持业务公司宗旨通过宏能畅然的工作与客户的共同努力，让数据为客户增值4关于宏能畅然创立时间4我们的典型客户零售行业通过宏能畅然持续和专注的努力，为联华超市率先在国内零售行业中完成了企业级数据仓库和商务智能系统，提升了联华超市的核心竞争力。宏能畅然公司的专业服务精神也得到了联华高层领导所组成的专家评审委员会的高度评价和赞扬！保险行业宏能畅然为中国人寿开发的保险决策支持系统增强了保险业务分析的实时性，为中国人寿保险业务的高效有序发展提供了准确科学数据支持，增强了在同行业中的竞争地位！钢铁行业国内最早的企业级数据仓库项目之一。“当我们开始开发这个系统时，我们的目标是将我们大量的数据转换成整个组织机构共享的资产。我们现在部署了决策支持功能，以帮助我们实现成为世界上最大的钢铁供应商的宏伟目标。SAS项目团队在其中发挥了不可替代的作用”——上海宝钢副总经理李海平其它行业“根据为市场部门服务多年的经验，我们设计了该系统”，智买道总裁文亨利说，“我们创造了完全可视化的界面，让用户能够直接在图表上点击，而不用使用复杂的菜单。我们有了这样的想法，然后与宏软公司合作，使这个想法成为现实。宏软的工作非常出色，使我们的产品成为世界先进的数据挖掘工具和直付营销系统！”5我们的典型客户零售行业通过宏能畅然持续和专注的努力，为联华超内容关于宏能畅然数据挖掘商业运用现状及案例分析数据挖掘产品厂商的视野和新迹象几点思考6内容关于宏能畅然6数据挖掘和商业智能产业“金字塔”

数据挖掘预测和优化固定业务报表联机动态查询OLAP分析数据仓库数据集市信息知识数据DatamartDatamartOPSSystemOPSSystemOpsSystemFlatFilesETL7数据挖掘和商业智能产业“金字塔”数据挖掘固定业务报表数据仓数据挖掘与商务智能产业链整体解决方案提供商系统集成商数据挖掘和商务智能用户咨询服务提供商专业化服务和实施维护商交付解决方案和项目规划交付产品和协助IT规划提供用户需求分析委托开发需求分析和咨询服务集成开发系统维护和数据分析服务整体解决方案提供商：NCR、IBM、Oracle、Microsoft、SAS特定解决方案提供商：DataStage等ETL工具Cognos、BO、Brio等报表工具Splus、SPSS等挖掘工具Unica等专业解决方案系统集成商：AsiaInfo、联创宝信、中软、菲奈特咨询服务提供商：埃森哲、德勤、华院、吉贝克专业化服务和实施维护提供商：首航财务……8数据挖掘与商务智能产业链整体解决方案系统集成商数据挖掘和咨询数据挖掘商业运用现状市场营销和客户关系管理领域移动、联通、电信经营分析银行信用卡分析零售商业智能和客户分析保险公司客户分析网络游戏分析BtoC电子商务网站等9数据挖掘商业运用现状市场营销和客户关系管理领域9数据挖掘商业运用现状风险管理领域银行信用风险管理个人征信局信用风险管理监管机构（如上交所、银监局、海关等）风险监管模型10数据挖掘商业运用现状风险管理领域10数据挖掘商业运用案例分析零售商会员分析系统及会员状态监控模型背景：流失会员增长速度超过了新增会员会员卡热办冷用，会员消费占比和客单价低无法及时获取会员当前最新的消费状态无法灵活自由的对会员进行细分和管理无法了解会员消费商品分布和市场占有率无法得知会员促销活动的效果和投资回报无法得知会员来自于哪……11数据挖掘商业运用案例分析零售商会员分析系统及会员状态监控模型会员特征快照和细分组群12会员特征快照和细分组群12会员空间分布13会员空间分布13数据挖掘商业运用案例分析海关风险辅助决策支持系统及欺诈识别模型背景：进出口贸易迅猛增长使海关有效监管和高效运作之间矛盾变得异常突出一方面海关必须保证税收指标的完成，加大对走私活动打击力度另一方面贸易便利最大化又要求海关必须努力提高通关速度，加快货物验放结合业务人员多年监管经验，利用统计和数据挖掘技术建立具有动态调整、自学习和自适应能力的实时风险评估模型对每一票报关单进行风险评分和可能风险来源提示。这对于海关提高监管效率和科学决策能力具有重要意义。14数据挖掘商业运用案例分析海关风险辅助决策支持系统及欺诈识别模实时智能的风险评估海关风险管理数据挖掘建模流程在线实时风险评分商品风险预警提示风险管理参数表维护及管理15实时智能的风险评估海关风险管理数据挖掘建模流程在线实时风险评基于风险评估模型形成的监管流程随机控制是否进入风险监控流程风险评估模型验证模型的数据集五星级四星级三星级二星级一星级查验放行跟踪查验率、查获率和近期走私动态关领导和总署查验监控模型绩效更新模型报关单90%10%16基于风险评估模型形成的监管流程随机控制是否进入风险评估模型验内容关于宏能畅然数据挖掘商业运用现状及案例分析数据挖掘产品厂商的视野和新迹象几点思考17内容关于宏能畅然17数据挖掘厂商的视野和新迹象挖掘和统计分析平台SASEMSPSSClementineS+MinerStatisticDataMiner与数据库集成挖掘平台IBMIMOracleNCRTeradataMinerSQL2005DM

行业运用及解决方案UnicaKXENHNC18数据挖掘厂商的视野和新迹象挖掘和统计分析平台SASEM与数SAS的视野和新迹象19SAS的视野和新迹象19S-PLUS的视野和新迹象S-PLUS7S-PLUSServer

S+EnvironmentalStatsS+NuOptS+FinMetrics

S+ArrayAnalyzerS+SeqTrial

S+WaveletsS+SpatialStatsInFact®InsightfulMiner7

S-PLUS®forArcViewGIS20S-PLUS的视野和新迹象S-PLUS7SS-PLUS对大数据量的支持TrainingScoring独特管道式架构BigDataLibrary大规模数据可视化大规模数据建模能力21S-PLUS对大数据量的支持TrainingScoring独S-PLUS全新的开发环境SplusWorkbench智能Splus代码编辑器开发项目和任务的管理原码版本控制22S-PLUS全新的开发环境SplusWorkbench22SQLServer2005的视野和新迹象SQL2000SQL2005EntertheGameCreateindustrystandard(OLEDBforDM)TargetdeveloperaudienceV1.0productwith2algorithms-Microsoft_Decision_Trees-Microsoft_ClusteringWinLeadershipContinuestandardseffort(OLEDBforDM1.1,XMLA)Comprehensivefeatureset-7algorithms-12viewers-DMXextensions-Plug-inalgorithminterfacePenetratetheEnterpriseThoughtleadership23SQLServer2005的视野和新迹象SQL2000SQL2005OLAPReports(Adhoc)Reports(Static)DataMiningBusinessKnowledgeEasyDifficultUsabilityRelativeBusinessValueSQLServer2005的视野和新迹象24SQL2005OLAPReports(Adhoc)Re创建数据挖掘结构DMX的魅力处理数据挖掘结构25创建数据挖掘结构DMX的魅力处理数据挖掘结构25创建响应模型DMX的魅力训练响应模型26创建响应模型DMX的魅力训练响应模型26DMX的魅力响应模型预测评分顾客购买Bike的概率注：DMX支持Top…Orderby语法27DMX的魅力响应模型预测评分27Unica的视野和新迹象Unica新迹象由Model

5提升到Model6Model变成其主打营销管理产品Campaign的组件之一数据挖掘和运筹运算与营销流程完全融合FullEMMSuiteScalable

ApplicationLayerPowerfulAnalytics&

IntegrationLayerPlanModelCampaignLeads

MarketingDB

OtherDBsERPSystemsAffiniumApplicationJ2EEApplicationServerAnalyticalServerDynamicInterconnectServer28Unica的视野和新迹象Unica新迹象FullEMMS内容关于宏能畅然数据挖掘商业运用现状及案例分析数据挖掘产品厂商的视野和新迹象几点思考29内容关于宏能畅然29几点思考“BusinessFirst,TechniqueSecond”数据挖掘项目的开发和实施必须要有业务专家的支持和参与企业内部需要设置专门的数据分析岗位和职责应该向非理科专业特别是管理、营销等专业学生开设统计分析和数据挖掘课程数据挖掘平民化挖掘结果要易于理解和接受挖掘结果需要有好的展现方式挖掘结果需要与业务流程紧密结合形成完整分析闭环实时预测和评分的要求30几点思考“BusinessFirst,Technique预祝各位新年快乐!31预祝各位新年快乐!31数据挖掘商业运用现状和发展新思路2005年12月29日李剑（上海）宏能畅然数据应用有限公司数据挖掘商业运用现状和发展新思路2005年12月29日内容关于宏能畅然数据挖掘商业运用现状及案例分析数据挖掘产品厂商的视野和新迹象几点思考33内容关于宏能畅然2内容关于宏能畅然数据挖掘商业运用现状及案例分析数据挖掘产品厂商的视野和新迹象几点思考34内容关于宏能畅然3关于宏能畅然创立时间

1998年创立者张少华博士（SAS中国公司的首任董事总经理）李剑先生（前SAS公司北京代表处经理）姜宏博士（前SAS公司北京代表处技术经理）公司专注数据仓库设计与开发企业运营与绩效考核分析系统、商业智能应用系统设计与开发业务Insightful公司的S-PLUS系列产品的独家代理销售与相关技术支持业务Unica公司的面向营销促销、客户关系管理的专业数据挖掘平台UnicaAffiniumModel和Campaign的独家代理销售与相关技术支持业务公司宗旨通过宏能畅然的工作与客户的共同努力，让数据为客户增值35关于宏能畅然创立时间4我们的典型客户零售行业通过宏能畅然持续和专注的努力，为联华超市率先在国内零售行业中完成了企业级数据仓库和商务智能系统，提升了联华超市的核心竞争力。宏能畅然公司的专业服务精神也得到了联华高层领导所组成的专家评审委员会的高度评价和赞扬！保险行业宏能畅然为中国人寿开发的保险决策支持系统增强了保险业务分析的实时性，为中国人寿保险业务的高效有序发展提供了准确科学数据支持，增强了在同行业中的竞争地位！钢铁行业国内最早的企业级数据仓库项目之一。“当我们开始开发这个系统时，我们的目标是将我们大量的数据转换成整个组织机构共享的资产。我们现在部署了决策支持功能，以帮助我们实现成为世界上最大的钢铁供应商的宏伟目标。SAS项目团队在其中发挥了不可替代的作用”——上海宝钢副总经理李海平其它行业“根据为市场部门服务多年的经验，我们设计了该系统”，智买道总裁文亨利说，“我们创造了完全可视化的界面，让用户能够直接在图表上点击，而不用使用复杂的菜单。我们有了这样的想法，然后与宏软公司合作，使这个想法成为现实。宏软的工作非常出色，使我们的产品成为世界先进的数据挖掘工具和直付营销系统！”36我们的典型客户零售行业通过宏能畅然持续和专注的努力，为联华超内容关于宏能畅然数据挖掘商业运用现状及案例分析数据挖掘产品厂商的视野和新迹象几点思考37内容关于宏能畅然6数据挖掘和商业智能产业“金字塔”

数据挖掘预测和优化固定业务报表联机动态查询OLAP分析数据仓库数据集市信息知识数据DatamartDatamartOPSSystemOPSSystemOpsSystemFlatFilesETL38数据挖掘和商业智能产业“金字塔”数据挖掘固定业务报表数据仓数据挖掘与商务智能产业链整体解决方案提供商系统集成商数据挖掘和商务智能用户咨询服务提供商专业化服务和实施维护商交付解决方案和项目规划交付产品和协助IT规划提供用户需求分析委托开发需求分析和咨询服务集成开发系统维护和数据分析服务整体解决方案提供商：NCR、IBM、Oracle、Microsoft、SAS特定解决方案提供商：DataStage等ETL工具Cognos、BO、Brio等报表工具Splus、SPSS等挖掘工具Unica等专业解决方案系统集成商：AsiaInfo、联创宝信、中软、菲奈特咨询服务提供商：埃森哲、德勤、华院、吉贝克专业化服务和实施维护提供商：首航财务……39数据挖掘与商务智能产业链整体解决方案系统集成商数据挖掘和咨询数据挖掘商业运用现状市场营销和客户关系管理领域移动、联通、电信经营分析银行信用卡分析零售商业智能和客户分析保险公司客户分析网络游戏分析BtoC电子商务网站等40数据挖掘商业运用现状市场营销和客户关系管理领域9数据挖掘商业运用现状风险管理领域银行信用风险管理个人征信局信用风险管理监管机构（如上交所、银监局、海关等）风险监管模型41数据挖掘商业运用现状风险管理领域10数据挖掘商业运用案例分析零售商会员分析系统及会员状态监控模型背景：流失会员增长速度超过了新增会员会员卡热办冷用，会员消费占比和客单价低无法及时获取会员当前最新的消费状态无法灵活自由的对会员进行细分和管理无法了解会员消费商品分布和市场占有率无法得知会员促销活动的效果和投资回报无法得知会员来自于哪……42数据挖掘商业运用案例分析零售商会员分析系统及会员状态监控模型会员特征快照和细分组群43会员特征快照和细分组群12会员空间分布44会员空间分布13数据挖掘商业运用案例分析海关风险辅助决策支持系统及欺诈识别模型背景：进出口贸易迅猛增长使海关有效监管和高效运作之间矛盾变得异常突出一方面海关必须保证税收指标的完成，加大对走私活动打击力度另一方面贸易便利最大化又要求海关必须努力提高通关速度，加快货物验放结合业务人员多年监管经验，利用统计和数据挖掘技术建立具有动态调整、自学习和自适应能力的实时风险评估模型对每一票报关单进行风险评分和可能风险来源提示。这对于海关提高监管效率和科学决策能力具有重要意义。45数据挖掘商业运用案例分析海关风险辅助决策支持系统及欺诈识别模实时智能的风险评估海关风险管理数据挖掘建模流程在线实时风险评分商品风险预警提示风险管理参数表维护及管理46实时智能的风险评估海关风险管理数据挖掘建模流程在线实时风险评基于风险评估模型形成的监管流程随机控制是否进入风险监控流程风险评估模型验证模型的数据集五星级四星级三星级二星级一星级查验放行跟踪查验率、查获率和近期走私动态关领导和总署查验监控模型绩效更新模型报关单90%10%47基于风险评估模型形成的监管流程随机控制是否进入风险评估模型验内容关于宏能畅然数据挖掘商业运用现状及案例分析数据挖掘产品厂商的视野和新迹象几点思考48内容关于宏能畅然17数据挖掘厂商的视野和新迹象挖掘和统计分析平台SASEMSPSSClementineS+MinerStatisticDataMiner与数据库集成挖掘平台IBMIMOracleNCRTeradataMinerSQL2005DM

行业运用及解决方案UnicaKXENHNC49数据挖掘厂商的视野和新迹象挖掘和统计分析平台SASEM与数SAS的视野和新迹象50SAS的视野和新迹象19S-PLUS的视野和新迹象S-PLUS7S-PLUSServer

S+EnvironmentalStatsS+NuOptS+FinMetrics

S+ArrayAnalyzerS+SeqTrial

S+WaveletsS+SpatialStatsInFact®InsightfulMiner7

S-PLUS®forArcViewGIS51S-PLUS的视野和新迹象S-PLUS7SS-PLUS对大数据量的支持TrainingScoring独特管道式架构BigDataLibrary大规模数据可视化大规模数据建模能力52S-PLUS对大数据量的支持TrainingScoring独S-PLUS全新的开发环境SplusWorkbench智能Splus代码编辑器开发项目和任务的管理原码版本控制53S-PLUS全新的开发环境SplusWorkbench22SQLServer2005的视野和新迹象SQL2000SQL2005EntertheGameCreateindustrystandard(OLEDBforDM)TargetdeveloperaudienceV1.0productwith2algorithms-Microsoft_Decision_Trees-Microsoft_ClusteringWinLeadershipContinuestandardseffort(OLEDBforDM1.1,XMLA)Comprehensivefeatureset-7algorithms-12viewers-DMXextensions-Plug-inalgorithminterfacePenetratetheEnterpriseThoughtleadership54SQLServer2005的视野和新迹象SQL2000SQL2005OLAPReports(Adhoc)Reports(Static)DataMiningBusinessKnowledgeEasy