数据分析讲座课件

1、 数据分析讲座 一、概述1、建立数据分析系统的意义数据分析： 有目的地收集各种数据、事实、通过整理、归纳、分析，转化为信息的过程。信息：有意义的数据。 信息是组织的重要资源，开发利用信息资源（包括适当运用统计技术）有助于： 科学决策； 及时观察并分析变异，从而识别并把握改进机会； 改善组织绩效、提升效率。2、数据分析过程和产品实现过程的关系 数据分析过程是管理体系的支持过程，是手段、方法、工具而不是目的；在产品的整个寿命周期，包括从市场调研到顾客服务和最终处置的各个过程都需要适当运用。设计和开发过程策划采购生产和服务提供验证包装和存储营销和市场调研最终处置或再生利用售后服务技术支持和服务安装和

2、投入运行销售图1：一般产品寿命周期内产品实现的主要过程过程： 由输入、资源及活动、输出组成输入资源和活动输出图2：过程的概念图为确保过程的有效，对过程输入、输出进行监视、评审资源的合理配置，活动方式的优化和控制等，都可以适当运用数据分析3、数据分析的作用及方法的变迁管理目标的多元化，需要运用数据分析的范围越来越广，方法越来越多。管理重心检验生产设计开发市场调研目标多元化代表性方法抽样控制图试验设计预测技术图论、各种计算技术 除定量数据 以外，需要对大量的定性数据（包括事实、概念）进行分析。 为不失时机把握改进机会，需要在数据相对有限的情况下进行数据分析。4、用过程方法建立、实施、改进信息系统识

3、别信息需求收集数据分析数据评价改进系统图3：数据分析过程图二、识别信息需求 识别信息需求是确保信息系统有效的首要条件。识别信息需求是管理者的职责。管理者应考虑决策、过程控制的需要提出对信息的需要。为收集数据，分析数据提供清晰的目标。1、借助GB/Z19027识别 GB/T19001-1994的统计技术指南GB/Z190272001对组织可能需要进行定量数据分析的情况做了识别。 生产系统开发系统采购系统营销系统检验系统改进系统储运系统组织(略） 识别、评审设计输入评价设计输出识别关键设计特性设计验证设计确认 确保设备适应性 监控过程参数、产品特性认可过程和设备对设备的适当维护(略）(略）图4（根

4、据GB/Z19027）统计技术需求系统图 (略）(略）3、GB/Z 19027的局限性管理者应意识到GB/Z 19027的局限性缺少2000版标准新要求对信息的需求，如顾客满意等；缺少对于业绩提高方面的需求识别；陷于定量数据，没有识别定性数据的需求；没有考虑其他管理体系的需求。三、收集数据 有目的地收集数据，选择并确定合适的收集渠道和方法是确保信息系统有效地基础。组织需要对收集数据进行策划，策划应考虑： 1、将识别的需求转化具体的要求，如为评价组织的业绩，需要收集的数据可能包括：有关顾客满意的数据、市场占有率的数据、竞争对手的信息、组织目标实现情况的数据等 2、明确由谁、何时、何处/何渠道、何

5、种方式收集数据。如，有关竞争对手的信息，可以由组织内部人员负责收集，也可以委托其他组织代为收集。可以从行业协会公布的信息获得数据，也可以从其使用者或组织解剖其产品种获得信息。 3、设计好记录表式（包括调查提纲）。表式设计注意事项： 便于记录； 便于使用； 文件数量的最小化，信息容量的最大化 其他管理要求（如：日期、编号、数据 提供人等）； 4、注意事项： 防止有用数据的丢失； 防止假数据对系统的干扰 四、分析数据 分析数据是将收集的数据，通过加工、整理、分析转化为信息，实现过程增值的关键活动。 1、常用的数据分析方法 七种工具：排列图、因果图、分层法、调查表、散布图、直方图、控制图； 新七种工

6、具：关联图、系统图、矩阵图、KJ法、计划评审技术、PDPC法、矩阵数据图法 其他：决策树、事故树2、选择数据分析方法的原则： 组织选用数据分析方法应考虑以下因素：适用性原则：每一种分析方法都有一定的适用范围和局限性。选用时应充分考虑其适用性，如SPC图种类很多，一部分适用计量值数据分析，一部分适用计数值数据分析，不能错用 ；经济性原则：数据分析是手段不是目的。评估数据分析关注的是其增值作用，而不是分析方法的技术含量。可行时，选用的方法应该时越简便越好；风险可接收性原则：统计、分析、推断存在一定的风险。组织应考虑置信区间和可信性的关系、灵敏度和可信度的关系。第一类风险和第二类风险的关系等，确保风

7、险在可接收范围之内。描述性统计回归分析时间序列分析决策树过程能力分析X项目的市场分析及投资风险评价供方能力分析方法信息需求图5：信息需求和分析方法矩阵图图6：GB/T 19027识别的统计技术矩阵图（略）3、提供资源 为进行数据分析，组织应提供以下资源培训；适宜的测量设备；计算设备；必要时，应编制作业指导书。岗位分析方法信息需求图7：数据分析技术培训需求识别 五、测量、分析改进数据分析过程 数据分析是管理体系的基础。组织需要适时评估信息系统的有效性，并持续改进。管理者应分析、评估以下问题： 提供决策的信息是否充分、可信，是否存在信息不足、信息失准、信息滞后而导致决策失败； 对数据分析时的作用认

8、识上是否一致，信息对持续改进质量管理体系、过程、产品所发挥的作用和期望是否一致； 对数据分析需求识别是否充分； 收集数据的目的是否清晰、收集的数据是否真实、数据量是否足够，信息系统是否畅通； 分析方法是否合理，误差能否接受，有更方便的方法吗； 数据分析所需资料是否有保障； 六、结束语 用管理的系统方法、过程方法识别并管理数据分析过程，有助于提升组织的绩效。良好的数据分析系统可以为组织实现信息化改造提供平台。 识别信息需求是管理者的职责，可以为收集数据提供清晰的目标，正确的分析方法是数据分析过程的关键活动，数据分析过程需要持续改进。第二部分一、数理统计概念二、数据分类计量值数据计数值数据总体样本

9、数据统计判断抽样检测三、数据的特征值水平特征值：平均数 中位数中 值 众 数 (1) 离散特征值：极差偏差平方和 无偏方差标准偏差(2)(3)(4)四、排列图 例：某卷烟厂外观质量不合格的排列图。1）收集数据 项 目 不合格数切口贴口空松短烟过紧钢印油点软腰表面 80 297 458 35 28 10 15 12 552）作不合格品统计表 卷烟外观不合格的统计表项目频数累计频数累计百分比空松贴口切口表面短烟过紧其他458297805535283745875583589092595399046.376.384.389.993.496.3100合计9903）绘制排列图，并标注必要的说明 图6 卷烟

10、不合格的排列图 4、排列图应用中的注意事项a）关键项目占应少数项。通常为一、二项，不宜超过三项，关键项应占累计频率的80%左右。当需要分析的项目很多时，关键项目以不超过项目数的20%。如项目数为100项，其15项为关键项目是可行的。b）当关键项目不明显时。应采取加权统计，改变分层方法重新制作排列。务必使分析的结果。凸现“关键的少数”。c）其它项应放置在最后。排列图的注意事项原理：关键的少数，次要的多数不同性质的问题，不宜简单排列当关键项不属少数时，应考虑：改变分层方法收集数据是否足够（详见教材： P53）五、因果图因果图的注意事项集思广益，不要反驳和排列图配套使用问题要具体一个问题作一张图分析

11、到可以采取措施为止可能时记上数据（详见教材： P54）注意事项特性（结果）要具体；一个特性作一张图；原因分析尽可能深入、细致、彻底、多向“其原因何在？”“进一步的原因在哪里？”原因与对策且勿混淆，因果图只记原因，不记对策；原因的表述应具体而简练；应采纳各方面的意见，尤其是当事人的意见；作图不是目的，可尽活应用，使使用者容易接受。六、调查表的注意事项应用要灵活，可行时画图例：曲轴箱平面超差的调查表（详见教材： P52）图 曲轴箱平面超差调查表工人漏气不漏气漏气率A61332B3925C10953合计193138工厂漏气不漏气漏气率甲91439乙101737合计193138七、分层法的注意事项同一

12、层次内数据波动尽可能小，层与层之间差别尽可能大交互作用，综合分层例：缸垫漏气问题表1表2B乙组合最优？ 工厂工人甲乙A漏气60不漏气211漏气率750B漏气03不漏气54漏气率043C漏气37不漏气72漏气率3078结论：A乙组合或B甲组合为最优方案八、直方图及过程能力分析（1）直方图的做法例：某产品的重量标准要求在1000克1050克之间。试作直方图并分析过程能力1、收集数据43282726332918243214342230292224222848124293536303414423862832222536392418281638362120262018812374028281230313

13、0262847423234202834202427242918214614102122342228282038123219302819302024352028242432402、计算极差3、适当分组，取K=104、确定组距h5、确定各组界限第一组下限为：第一组上限为：第二组下限即为第一组上限类推6、编制频数分布表组号组界组中组fuf uf u210.55.5311-5-52525.510.581113-4-1248310.515.5131111116-3-1854415.520.5181111111111111114-2-2856520.525.523111111111111111111119

14、-1-1919625.530.52811111111111111111111111111127000730.535.533111111111111111411414835.540.53811111111111022040940.545.543111339271045.550.548111341248100-273317、计算8、画图及图形分析（见教材 P17）（2）过程能力分析过程能力是指生产过程处于一定条件下（5MIE）的实际加工能力 B=6过程能力指数的分级及应用CP对应的不合格品率如下表CP1.671.3310.670.33P(%)610561030.34.5531.75 过程能力指数的

15、分级及应用范围措施条理CP 1.67降低设备精度、免检等1.67CP 1.33简化检验1.33CP 1用控制图监控1CP 0.67全数检验0.67 CP纠正措施例 计算：查表（P48） （3）注意事项过程应在受控状态限于计量值数据数据量不宜过少测量设备的精度应用范围：ISO9001:2000之6.2/6.3/7.2/7.3/7.4/7.5等九、控制图1、控制图的种类xr 控制图xr 控制图x-Rs 控制图p 控制图Pn 控制图u 控制图c 控制图九、控制图2、控制图的基本构成中心线CL上控制线UCL下控制线LCL3、3原则及两类风险3、判断准则（1）点子均在控制界线内；（2）点子排列无异常。以

16、下为排列异常：链：连续7点及以上在中心线一侧； 连续11点中有10点在一侧；连续14点中有12点在一侧。趋势连续7点及以上呈上升或下降趋势周期周期性排列靠近控制界限连续3点中2点； 连续7点中3点； 连续10点中4点。例： 控制图（1）收集数据时间x1x2x3x4x5xR1420419415418418418.052419424423420421421.453420420419418420419.424421421420419417419.645420423422420419420.846420420420419421420.027423423419421418420.858418417419

17、415423418.489423420418420421420.4510416418420419417418.0411417418416420423418.8712421420418413421418.68（2）计算x 图：R图：（3）画图123456UCLCLLCLCL4.910.36416.69419.52422.35UCL（4）注意事项在受控状态下才有意义注意数据的性质，选用控制图的适用范围P图、图的UCL和n有关勿忘后继活动！十、相关与回归分析1）变量间存在相关关系，如： 国民生产总值与轿车需求的关系； 轿车需求与钢铁工业的关系； 某种设备台数与其维修备件的关系； 钢铁热处理温度与硬度

18、的关系。 组织可以通过相关系数分析和建立数学模型，从而实现根据一个或几个变量预测或控制另一个变量。2)一元线性回归方程和相关系数 计算公式：3) 例： xy13.82.9715.12.9725.05.1726.35.4329.66.5030.76.7534.77.9536.97.974)多元线性回归及非线性回归5)注意事项：-置信区间-范围十一、试验设计目的：以有限次试验，达到最佳方案例1：已知某种溶液的浓度应在1:1.81:2.6之间，需确定最佳配比。解：系单因素，可用0.618法优选 第一次试验：（大数小数）0.618小数 （2.6-1.8)0.6181.8 2.292.3 第二次试验： （大数小数）0.382小数 （2.6-1.8)0.3821.82.1 比较结果：第二次试验效果好。 第三次试验： （大数小数）前次留下好的 试验点 （2.3-1.8)2.12例2: 某化工产品的转化率受反应温度（A）、反应时间（B）、用碱量（C）影响，其中每个因素选用三水平，如下： A：80 85 90 B：90分