数据统计分析与数据挖掘课件

数据统计分析与数据挖掘课件目录市场统计分析概论市场分析基础与软件工具介绍常用市场分析模型及案例分析常用统计分析方法案例及应用市场统计分析综合运用与报告撰写3这是什么？报纸比杂志好。海边比大街好。一开始就跑比走好。你可能得试几次，也可能需要借助某种技巧，但很容易学，就连孩子都能享受其中的乐趣。一旦成功了，它就一点儿都不复杂。鸟儿很少会离太近。雨能迅速把它浸透。如果有很多人做同样的事就会引发问题，因为仅仅一个人就需要许多空间。不过，只要不发生纠纷，一切就会很祥和。岩石可以当停放的地方。可一旦挣脱开，你就不会有第二次机会。41－0≠8－75什么是市场分析6全业务下市场分析的重点与目的分析企业经营业务的性质分析应着眼于未来研究过去和现在的信息在历史资料中寻找先导指标注意有关未来的信息掌握管理当局的意图分析企业报告信息的相对可靠性了解相对于竞争对手和其他企业的业绩及时了解影响企业的重大变动7中国通信市场的发展机遇和格局3G因素全业务因素移动互联网三网融合8大家应该也有点累了，稍作休息大家有疑问的，可以询问和交流9三大纬度决定全业务市场竞争格局业务纬度用户规模指标业务收入指标业务量指标注册用户数过网用户数新增用户数客户数各业务收入本地话音业务收入长途话音业务收入数据业务收入结算收入等通话次数上网次数通话时长计费时长上网时长指标纬度宽带固定业务移动＋＋10成功的分析需要具备的关键条件数据提取和收集选取正确的数据来源，同时不影响正常的生产环境必须对现有计费系统和数据结构有明确的了解在数据提取效率和提取深度之间进行权衡数据挖掘和分析做出适当的假设，并对各类假设进行优先排序尝试所有的分析纬度，各种变量之间进行排列组合对数值进行合理的归类或近似处理数据表达和说明选取合适的图表类型，一张图表胜过千言万语突出重点，能直接为决策提供支撑依据为进一步分析留有足够的空间11解释清楚以下问题是合格分析师台湾某媒体报道：平均水深到膝盖，却淹死了人30%车祸是持驾照三年以下者所为，所以新驾驶员容易闯祸出生在上半年的人更容易成为球星出动消防员越多火灾损失就越大限购使北京交通拥堵状况下降了15%我国航班正点率属国际中上水平学历高的人收入高人民币33年贬值6倍多白银的投资挣钱空间仍然巨大12莫学国家统计局坏榜样指标构成原始数据采集不当调查范围走偏调查方式错误计算方法杜撰数据报告和谐平均遮掩差距13问题出在哪里14做好市场分析的针对性建议15全业务运营情况下的分析理念变革适应全业务和3G移动互联网发展需要适应三网融合下的电信市场新格局分析为以客户为中心的精确化营销活动提供支持点面结合、逐层深化的问题本源挖掘思路适应不同层级对数据分析结果的使用使用定量与定性方法相结合的科学分析16Starbucks2for1Christmasdrinks从11月2日（本周五）到11月5日（下周一），每天下午2点到5点之间，随便进一家Starbucks星巴克店里，不管大中小size的下列任何一款Christmasdrinks都可以2for1，就是买一送一（2杯中，最便宜的那一款免费送）～～～～很适合和一个好朋友一起去哦～～～只用花一杯的钱，就能一人一杯啦～～

17我们可以采用的主要分析方法统计串连比较合成拆分推理反证18目录市场统计分析概论市场分析基础与软件工具介绍常用市场分析模型及案例分析常用统计分析方法案例及应用市场统计分析综合运用与报告撰写19应该掌握的数据分析工具场20多渠道多途径获取足够信息和情报21二手资料的使用：怀疑的尊重精确性可获性时效性相关性可比性可信性22国八条与京十五条国务院总理温家宝26日主持召开国务院常务会议，研究部署进一步做好房地产市场调控工作。会议指出，自去年4月份《国务院关于坚决遏制部分城市房价过快上涨的通知》印发后，房地产市场出现积极变化，房价过快上涨势头得到初步遏制。为巩固和扩大调控成果，逐步解决城镇居民住房问题，继续有效遏制投资投机性购房，促进房地产市场平稳健康发展，必须进一步做好房地产市场调控工作。为巩固和扩大调控成果，坚决贯彻落实《国务院办公厅关于进一步做好房地产市场调控工作有关问题的通知》(国办发〔2011〕1号)精神，进一步做好本市房地产市场调控工作，逐步解决城镇居民住房问题，促进房地产市场平稳健康发展，结合本市实际，经市政府同意，现就有关问题通知如下：23公开资料中的洞察秋毫运营商高管分工对比：中国联通董事长常小兵：（中国联合网络通信集团有限公司董事长、党组书记）负责公司全面工作，分管董事会办公室，人力资源部（高管人员部分）；中国移动董事长、党组书记王建宙主持公司全面工作。中国联通总裁陆益民（中国联合网络通信集团有限公司总经理、副董事长、党组副书记）分管综合部、战略投资部，人力资源部（高管人员外的部分）、国际业务部、联通研究院、国家工程实验室；中国移动总裁、党组成员李跃主持公司生产经营管理工作，组织实施董事会决议。2425确保数据质量是做好分析的关键基础精度：最低的抽样误差或随机误差准确性：最小的非抽样误差或偏差关联性：满足用户决策、管理和研究的需要及时性：在最短的时间里取得并公布数据一致性：保持时间序列的可比性最低成本：以最经济的方式取得数据26认真看下面的数据27数据整理和统计分析来源甄别配额核实加权处理检查逻辑问题检查分布情况特异值遗漏项重复数据删除多余数据缺失值处理信度28观察这个29将定性资料转化为定量资料进行研究30数据特征与测度是分析的第一步数据的特征和测度分布的形状集中趋势离散程度众数中位数均值离散系数方差和标准差峰度四分位差异众比率偏态31离散程度的测度：异众比率非众数组的频数占总频数的比率解：在所调查的200人当中，关注非手机广告的人数占44%，异众比率还是比较大。因此，用“手机广告”来反映城市居民对广告关注的一般趋势，其代表性不是很好

Vr=200-112200

=1-

112

200

=0.44=44%32离散程度的测度：四分位差上四分位数与下四分位数之差QD=QU–QL反映中间50%数据的离散程度解：设非常不满意为1,不满意为2,一般为3,满意为4,非常满意为5已知QL=不满意=2，

QU=

一般=3四分位差：

QD

=QU

=

QL

=3–2

=133离散程度的测度：方差及标准差组距分组数据：未分组数据：组距分组数据：方差的计算公式标准差的计算公式未分组数据：34标准差与其相应的均值之比消除了数据水平高低和计量单位的影响测度了数据的相对离散程度用于对不同组别数据离散程度的比较计算公式为离散系数35标准化可以帮助完善考核合理性给出某一个值在一组数据中的相对位置可用于判断一组数据是否有离群点用于对变量的标准化处理计算公式为36

【例】某省移动用户数，2006年、2007年、2008年和2009年增长率分别为4.5%、2.0%、3.5%、5.4%。计算该省在这四年内的平均用户增长率。平均增长率＝103.84%-1=3.84%几何平均数计算用户增长率37方差分析测量数据的离散程度A、B两组各有6位客户的ARPU：A组为95、85、75、65、55、45B组为73、72、71、69、68、67382010年11月运营商用户数39HHI指数评估市场竞争态势式中：X——市场的总规模Xi——i企业的规模Si=Xi/X——第i个企业的市场占有率n——该产业内的企业数40主要高级统计分析方法介绍41度量变量之间关联程度的方法叫相关分析。如果考虑的是两个变量之间关系时，称为简单相关；如果讨论一个变量与两个或多个其他变量的关系时，就称为复相关或偏相关相关分析只是测定变量之间的相关程度。它考虑的是随机变量之间的共同变动，不必区分自变量和因变量我们通过观察相关系数的大小和双侧检验的值来分析变量间相关程度的大小。一般来说，sig的值小于0.005,我们可以认定变量间存在比较强的正相关或者负相关。应用：1、销售与广告支出的关联程度2、市场份额与销售队伍3、顾客的质量观与价格观相关分析（Correlations）42回归分析是根据已知的一个或一个以上变量(自变量)的值来估计另一个变量(因变量)的值，并且算出估计的误差，所建立的数学模型及所进行的统计分析。回归分析是希望得出一个有关各个变量之间联系的数字表达式，其中只有目标变量因变量假设为随机变动，而自变量均为已知常数回归分析可以分为线性回归分析和曲线回归分析应用：销售差异能够用广告支出、价格、分销水平上的差异解释市场份额的差异能够用销售力量的强弱，广告支出和促销额来解释消费者对产品质量判断是由产品价格、品牌形象和属性决定度量影响程度的大小回归分析43一元回归分析44案例：中金对房价的分析45富士康事件的Logistic回归46时间序列预测法47弹性分析48弹性分析农村居民需求与收入关系49弹性分析农村通信需求与收入关系50数据分析应注意的几个问题要注意每种统计分析方法的适用范围在选择一种分析方法的同时，要按照方法的要求整理数据库如果必要，可以使用不同的研究方法对同一问题进行解释，来互相验证结论的真伪片面的相信任何高级分析方法，哪怕是世界上最先进的分析模型，研究失误都是必然的数据分析结果要使用通俗易懂的语言或图表进行描述哪怕是一点点的失误，都可能产生“蝴蝶效应”，让研究变的一钱不值统计分析方法高级不一定是最好的，简单有效能够解决问题才是最好的51目录市场统计分析概论市场分析基础与软件工具介绍常用市场分析模型及案例分析常用统计分析方法案例及应用市场统计分析综合运用与报告撰写52结构化的思维方式非常重要10张5张2张53战略举措优先排序法分析业务前景54家庭客户业务的市场分析55业务营销钟摆理论信任价值安全自主便捷56PEST分析模型分析经营环境竞争环境分析政治因素分析主要分析国家对电信行业实施的相关政策，例如管制政策和资费政策的变化给电信企业带来的机遇和挑战。主要分析经济发展与通信业发展的互动关系，以经济发展对通信业发展的影响，以及给电信企业带来的机遇与挑战。经济因素分析主要分析人口规模和结构、消费模式等的变化对通信业发展的影响，以及给电信企业带来的机遇与挑战。社会因素分析主要分析通信技术、信息技术等的发展对电信运营环境带来的影响，以及给电信企业带来的机遇与挑战。技术因素分析57P/政治E/经济S/社会T/技术胡锦涛总书记提出“大力发展战略性新兴产业”，温家宝总理提出“感知中国”，十二五规划将物联网列为战略性新兴产业，物联网专项资金扶持政策出台。金融危机的影响；产业结构调整及经济发展方式转型升级；物联网产业发展带来产业集聚效应；各地产业园区如雨后春笋出现。中国互联网发展迅猛，网民数量全球第一，奠定物联网发展基础；用户需求刺激，物联网各项应用潜在市场巨大；城市的发展需要物联网相关技术及应用来辅助政府管理。在无线智能传感器网络通信技术、微型传感器、传感器终端机和移动基站等方面取得重大进展；标准方面与德、美、韩一起成为国际标准制定的主导国之一；在通信、网络等领域申请了大量具有自主知识产权的技术专利。中国物联网行业发展分析58价格分道扬镳59电信运营商的十面埋伏与中原突围电信联通移动广电GOOGLE/百度金融阿里巴巴SNS携程QQ苹果/诺基亚海尔微软联想60问题树分析方法分析问题症结根源满意度下降网络问题渠道问题价格问题…固定移动宽带固话3G问题树是为了证明或证伪某个假设而罗列出的一系列问题。问题树在结构和假设之间搭起了桥梁。利用结构框架，每个问题可以分解为若干子问题，子问题可进一步细分。通过创建问题树，所有的问题和子问题都以一种看得见的方式展示出来。这样一来，就可以根据迅速消除分析过程中的一些死角，因为依据对问题的回答你可以立刻删除某些不必要的分枝。2G61房价上涨的症结在哪里62PDCA分析模型用于项目管理和分析63销售任务执行流程控制营销过程监控机制营销方案逐级传达及本地化流程控制方案设计阶段方案传递阶段销售执行阶段效果评估阶段营销策划流程控制营销策划成果控制营销方案培训机制服务问题预防机制一线营销支撑机制营销策划营销执行营销评估辅助相关部门构架及工作职责岗位职责营销过程管控管控工具方案文本标准模板工作互动响应时限实施条件关键检核定期汇报沟通规范支撑系统指标分析基层营销单位及人员职责营销系统持续提升机制营销管控体系构成64KANO模型分析影响客户需求的因素65客户需要怎样的智能终端网络系统芯片电池摄像头这些可能是必须考虑的关键因素3GMOBILE屏幕WIFI网络功能能力66随手拍……67BCG矩阵68SCP模型分析竞争对手和外部冲击69三网融合给运营商带来的冲击70SWOT分析寻找企业战略发展目标WT风险Threats

机会Weaknesses

劣势Weaknesses优势Strengths内部能力外部因素SOWOSTWT扭转性策略增长性策略多元性策略防御性策略71系统分析运营商渠道体系72波特五力模型分析企业竞争战略73运营商的应用程序商店发展分析74战略钟模型分析企业竞争战略75产品的钻石定位法则76以客户为中心的分析77LBS：我在哪？和谁一起？附近有啥？78一样的优惠，不一样的说法公司七位领导可以选任何一款套餐送最贵的价值5800元的手机79目录市场统计分析概论市场分析基础与软件工具介绍常用市场分析模型及案例分析常用统计分析方法案例及应用市场统计分析综合运用与报告撰写80数据统计分析的核心1.总量：有多少2.趋势：去何处3、结构：变哪里4、对比：找差距5、关系：晓因果8182对比分析法了解企业经营发展状况根据经济现象之间的内在联系，对相关指标进行对比，以分析其数量关系及形成原因的分析方法，是最基本的分析方法。主要的参照系有三种：历史标准：说明其增长或发展速度计划标准：说明其工作目标完成情况行业标准：与行业平均标准比较以说明横向的优劣和先进标准比较说明其差距对比分析包括：绝对数的对比：业务发展增长幅度相对数的对比：主线普及率的增长情况通过office系列软件制作直观的图表进行表现表格——业务、工作情况饼图——结构比例曲线——发展趋势柱状图——横向比较分析或目标完成情况线柱组合图——业务的双指标完成情况示例：发展情况绝对数总体累计增长情况——电话用户数增长一定时段内规模增长——本年放号相对数较基期倍数：表现为发展业绩整体比较等较基期增加：表现为发展业绩在基期基础上的增加幅度多用柱线图表示示例：完成情况（战略－－规划－－计划目标）绝对数：预定目标完成数量相对数：计划完成比例——售卡收入完成年度计划的90%时间进度——按照每月完成1/12年计划的进度多用柱线图表示具体内容与计划对比与上期对比与去年同期、上期对比与历史最好水平对比与总体平均水平对比与国际、国内最好水平对比83运营商之间竞争的实力对比数据来源：2008年工信部统计月报、中国联通月度统计资料

842009年底用户数占有率与2008年底对比85收入变化分析86运营商区县公司满意度横向对比87环比分析88同比分析89定基比分析90预测值与真实值比较91三家运营商的品牌对比分析9293三家运营商的客户俱乐部比较94相对价格感受才是关键25-18455-44895平衡分析法综合评价企业经营绩效平衡就是协调、和谐，是可持续。主要的平衡有两种：动态I/O平衡对单一事物而言，均有一个新陈代谢和动态平衡的过程如：盈亏平衡、收支平衡综合协调对于一个总体集合而言，其中各部分之间按照其数量关系、重要性关系等均有一个综合协调的问题，这种协调就是一种平衡。96战争与美国经济97营业费用效益评估方法98动态分析法时刻关注企业发展趋势企业经营是动态的过程，指标基本都是在动态变化过程中。围绕动态现象进行分析就是动态分析。传统动态指标发展速度增长速度平均发展速度平均增长速度其他动态指标：主要是考虑资金的时间价值与变动幅度。99三大运营商用户数的发展变化100运营商市场份额101瑞银对中国移动通信市场份额的预测102不同时段的在线人数透露出的信息103指数分析法实现同类指标的可比较主要用于分析数量的相对变化程度。反映内容数量指数质量指数项目多少个体指数综合指数对比场合时间指数区域指数计算形式简单指数加权指数注意指数的构成变化了解指数的权重分配104谷歌指数&百度指数105德尔菲法运营商业务运营能力指数106客户投诉处理速度107客户投诉强度108因素分析法明晰各因素的影响程度分析有明确数量关联关系的各因素之间的变动对总变动量的影响程度，从而揭示现象动态中的具体情况和原因。注意：因素之间要有明确的函数关系各因素之间相关作用，相互独立注意各因素之间的连环替代的顺序，基期数量要注意选择分因素影响量之和等于总变化量分析某一因素影响时，必须假设其他因素不变109因素分析法探究收入未完成的原因收入＝单价×MOU×年度平均用户数110因素分析法计算各部分的贡献程度语音收入变动对总收入变动的影响程度为

比重法=0.457*0.2154=0.0984或9.84（个百分点）

差额法=（5246.91-4316.86）÷9436.34=930.05÷9436.34=0.0985或9.85个百分点

计算结果表明收入增长了20.61%，其中语音收入贡献了9.84个百分点，数据业务贡献了10.77个百分点。111中国经济增长得益于人口红利112异常分析法发现经营中的突出问题对企业生产经营管理中的各种经济现象中比较突出的部分进行分析，就基本可以找到问题所在和解决办法。如客户流失预警。异常主要的情况：TOP标准：按照全部（或分组）排名，找出前n名和后n名设定标准：按照“同一把尺子”观察分析不同的对象注意：标准要选择恰当，泰勒把最优作为标准何为“异常”应明确，一般还是正常多异常少113客户流失预警的有效识别关键时点果断出击关键表现协议到期预存款额不足对手针对营销异网客服通话消费骤降长期或频繁呼转密切跟踪114对离网用户的分析分析离网用户的离网原因分析离网用户的离网去向分析三家运营商的流动趋势分析离网用户的新入网原因分析离网用户的在网使用行为分析用户多机使用的行为规律分析离网用户的在网时评价分析离网用户曾经的投诉行为分析用户对新入网运营商的评价分析用户离网后对我公司的评价预测用户的未来回归可能性归纳离网用户的群体特征和关键因素附加信息业务信息行为习惯账务信息接触记录数据库聚类分析判别分析因子分析其他分析提炼客户识别规则115分组分析法实现多侧面的结构剖析按照统计分组原则，对于一个总体或集合，其各层次的组成部分之间都有内在的联系，有互补关系。对这些指标的分析就可以从不同的侧面、按照不同的标志去解剖总体、分析总体，以便从总体的内部结构和内在联系中去发现问题。主要的参照系有三种：数量标准：说明应关注的重点区域标准：不同的区域一般代表不同的市场特征专业标准：如固网、增值、宽带、移动116细分标准也许只在游戏之间有1到9九个数，将它们分类，如1，3，5，7，92，4，6，8是按奇偶数分的，现问1，3，7，85，92，4，6是按什么把它们分成3类的呢？

117适合全业务运营需要的客户细分118趋势分析法预测未来的客观走向趋势线法趋势线是已经发生的事件和可能发生的事件之间的简单指示器。趋势线是为了将未来与历史数据进行比拟，若一条直线或曲线与历史上有过的数据类似，就可以进行预测。方法简单只能对正常情况下短期的事件作出估计移动平均法在各个时间所得到的数据常常具有周期的和因时间不同而异的特点，这种特点扰乱了数据所服从的基本趋势，对数据进行平滑或修匀处理就可以消除上述特点，移动平均则是其中一种方法。移动平均法是建立在列表法基础上的。运用简单结果不太准确最小平方