培训评估意义和技巧全面解析

培训评估意义和技巧全面解析第一页，共79页。作用原则含义反馈第二页，共79页。“上帝”用什么方法判断部队的战斗力？“上帝”用什么方法判断人的胆量？第三页，共79页。问题：如何判断某大学的综合办学实力？（“211工程”大学评定方法）如何判断培训机构的培训能力？培训水平？如何判断培训师的授课水平？如何判断培训是否达到预期的目的？第四页，共79页。第五页，共79页。评估：对某一事物的价值给予判断的过程教育评估：20世纪30年代美国教育家泰勒（R.M.Tyler）首先提出培训评估是其组成部分培训评估：…判断培训的价值和质量的过程（P126）不是判断培训正确与否第六页，共79页。信息反馈与调节：可以发现与解决问题目标导向：为培训指明方向指导与促进：可以提高培训效能鉴定与考核：学员水平的确认——培训效果如何？

培训机构的认可——是否允许办学？第七页，共79页。第一线路：由行政系统反馈给受训者第二线路：各培训支援部门——争取更多支持第三线路：教师——不断提升第八页，共79页。培训评估的主要原则（P126）社会需求原则方向性原则客观性原则指导性原则系统性原则第九页，共79页。过分依赖评估人员的良心和职业道德观念不正确强调“控制”和“监督”，忽视了“服务”没有良好反馈，缺乏跟踪没有持续性评估制度“一次性”评估，会让人感到形式主义，从而产生一系列消极行为第十页，共79页。——……对评估内容、范围、方法、手段和程序等方面加以规范的基本文件第十一页，共79页。评估目的评估标准集是评价方案的核心部分和技术性最强的部分评估权重集量表和评判依据（如：达什么程度可算优良）各类表格（包括调查问卷、访谈方案等）第十二页，共79页。内容：搜集信息、资料，并汇总整理按照评估标准进行评估工作注意：制定评估工作计划了解评估目的前提下搜集信息、资料信息的有效性第十三页，共79页。第十四页，共79页。评估分为几级？各级评估方法及评估内容？第十五页，共79页。柯氏4R评估Kaufman五层次评估CIRO四项目评估CIPP评估模型第十六页，共79页。反应层评估——学员对培训项目满意吗？

（P144案例）四大部分：项目、课程、教师、设施学习层评估——学员学到东西吗？学习获得程度

（P145案例）两大部分：学习成果、学习质量行为层评估——对学员工作产生什么影响？

（P146案例）两大部分：行为变化、知识运用结果层评估——对公司经营产生什么影响？

（P147）培训对组织绩效的影响第十七页，共79页。一级：每个培训项目必做一级、二级：仅仅为了增长知识、提升技能、转变态度时做一～四级：未来通过行为的转变得到更好的结果时做不能跳级评估模型（P151表——重点应用）第十八页，共79页。柯氏4R评估的作用只能有限地发挥在前两个层次——应该发挥后两个层次的作用柯氏4R评估仅对一般的培训课程和项目的评估有效——应该与企业发展战略紧密结合柯氏4R评估与培训教学设计、胜任特征及绩效管理毫无关系他们联系在一起，可以增加柯氏4R评估的运用深度，形成战略协同性——使培训成为企业发展战略的“业务伙伴”第十九页，共79页。培训资源评估＋柯氏4R评估第二十页，共79页。背景评估:培训的必要性输入评估：培训的可能性反应评估：学员反馈信息输出评估：培训的结果第二十一页，共79页。背景评估：分析培训需求及所需的方法输入评估：对培训方案的可行性进行评估过程评估：反馈培训过程信息，以便及时改进成果评估：对目标实现的程度进行评估第二十二页，共79页。第二十三页，共79页。一：结合案例，拟定一份《培训师教学管理能力》课程的评估方案二：结合案例，设计一套反映层和学习层两级评估方案三:某企业英语培训案例，设计对该培训项目采用柯氏培训评估模式进行学习层评估的问卷，及培训前后能力自评表。15分第二十四页，共79页。第二十五页，共79页。所用的评估模型？评估目的：培训项目的有效性评估工具：培训反应问卷、培训内容问卷、跟踪联系、跟踪访谈第二十六页，共79页。评估方案所需回答的问题：（P374）※评估目的※谁评估※评估标准何处获取信息※评估方法※调查工具※何时何地实施评估向谁反馈评估结果核心内容：评估策略（评估目的、谁评估、何时评估）、评估标准、评估方法、评估工具评估策略第二十七页，共79页。为什么评估？为谁评估？评估报告谁读？谁关心评估结果？关心什么？谁根据评估结果采取行动？谁来评估？谁设计？谁收集信息？从谁那里收集信息？谁分析？谁反馈？何时评估？——前、中、后、工作第二十八页，共79页。原则：以培训目标为基础；与培训计划相匹配；可操作；可信确定评估指标（例如：培训师授课能力；办学实力）构建指标体系（分解指标，注意科学性与可行性的结合。P377案例）设立指标等级（5级或10级）确定权重系数（P378案例）进行试评第二十九页，共79页。指标指标体系等级权重（％）ⅠⅡⅢⅣⅤ办学基本条件占地面积330建筑面积5教学设备10师资力量10生活设施2第三十页，共79页。指标体系（具体、可测的指标，侧重于定量描述）：从一般到特殊情境的推理（P382）量化程度高、便于操作、利于减少测量误差、控制人为因素设计要求高、影响测量效度、难于满足被评价对象多样化需求，有些也无法量化。概括性问题描述（抽象问题的定性描述，如：培训的特色；……采取的措施）：可弥补指标体系的不足信息不稳定、误差大、不易定量处理、难以获得综合性结论结合使用，就可以取长补短。第三十一页，共79页。素质指标（又称条件指标）：培训活动的基本条件如：办学指导思想、特色、实验实习条件、师资、课程、管理机构及规范等职责指标（又称过程指标）：被评价对象履行工作职能情况（从工作的全过程中获取信息）如：培训的计划安排、组织实施、协调监督等效能指标（又称效果指标）：被评价对象完成任务的结果如：职业资格鉴定合格率、毕业生对口就业率、创业率等（P384）指标体系的构成第三十二页，共79页。诊断性评估：培训之前的准备性评价

——发现培训工作可能存在的问题与缺陷形成性评估：培训过程中实施的评价

——了解培训参加者的收获情况与问题终结性评估：培训之后进行的评价

——评价培训工作是否达到预期的目标第三十三页，共79页。请结合实际设计柯氏4R评估表（柯氏4R评估方案）第三十四页，共79页。考虑因素：评估目标与方法的匹配性评估人员的技能调查对象的情况组织是否认可多种方法并用（测验法、跟踪法、成本收益分析法等）评估方法——问卷、访谈、测试、论文、课题研究、实际操作、绩效考核、观察、生产效率、合格率、事故率等第三十五页，共79页。按照评估实施方法（P385表）后测前——后测后测——对照组前后测——对照组所罗门四组：两组学员、两个对照组（可以把干扰培训效果的其他影响因素减少到最低程度）按照评估主体（P387）以学员为主体：由学员评估，形式：综合评估表、问卷等以培训组织单位为主体：由组织单位评估，形式：考试、访谈等以培训组织单位、用人单位为主体：组织单位发问卷，用人单位填写按照评估内容和时间（P387）诊断性评估形成性评估总结性评估第三十六页，共79页。请按照所“罗门四组评估法”设计柯氏四级评估方案第三十七页，共79页。第三十八页，共79页。顺序说明调查原因问卷说明一般到具体、熟悉到不熟悉问题表达：围绕目的、清晰明确问题形式：是/否；分层选择、量表等第三十九页，共79页。问题：事先设计、即时引出确定访谈对象与访谈目标设计问题：避免反问与诱导：如：你不认为…很重要吗？封闭式问题：按照预先设计的标准回答，如：培训是否有用？开放式问题：不受限制回答，如：培训有哪些好处？反馈式问题：后备问题用试探、疑问语气提出来，如：您说的是……意思，对吗？第四十页，共79页。第四十一页，共79页。培训评估的组织机构（P401）——三层组织机构：1、评估工作领导小组：

职责：组织领导、聘请专家、确定评价方案、日程、协调工作等

人员：主管领导、相关部门负责人、学员代表等2、评估工作专家小组：

职责：解决评价中的技术问题、提供专业性意见、建议，发挥参谋作用

人员：培训工作专家、评价工作专家、有经验的实际工作人员等3、评估日常工作小组：

职责：日常管理工作，按领导与专家要求收集信息，具体开展工作

人员：行政管理人员。向专家小组和领导小组负责第四十二页，共79页。明确评估对象（如：培训师）与评估主体（如：学员）明确评估目的选择评估者（如：培训机构）明确参与者（如：教务处、学生处）明确评估方案的框架思路第四十三页，共79页。第四十四页，共79页。培训评估工作的内容？时间安排如何？第四十五页，共79页。六个阶段14个步骤（P392表）：作出评估决定：评估可行性、目的、操作者与参与者制定评估方案：评估策略、标准、方法与工具、沟通收集评估信息：发放表格、收集信息信息的整理与分析撰写评估报告：撰写报告、审定报告评估反馈：提交报告、评估总结第四十六页，共79页。预评估（自我评估）由评估对象进行的自我评估再评估（确定性评估）由专家组对评估对象进行的评估评估动员与宣传收集信息评分汇集整理有关材料撰写评估报告结果反馈第四十七页，共79页。资料收集阶段资料收集法观察法访谈法问卷调查法测验法总结法追踪法评估阶段终结性与形成性评估法纵向与横向评估法单项与全方位评估法定性与定量评估法个体评估与集体讨论评估第四十八页，共79页。需要收集的材料项目提案及领导批复培训方案与实施计划课程材料过去类似的评估材料通过交谈（或现场观察）获取信息项目提案人与项目设计人项目负责人与实施人授课的培训师参与过类似评估的人员学员第四十九页，共79页。表、图、数据、文字等表达结果集中趋势分析算术平均值加权平均值众数：一组数据中出现次数最多的数据离散趋势分析极差：一组数据中最大值与最小值的差离差：一组数据中某个数据与该组平均值的差方差标准差相关度分析：各数据之间的相关程度第五十页，共79页。内容：导言：背景、目的等概述评估过程：方法、过程、步骤等阐明评估结果：文字客观、准确；数字尽可能用图表分析和建议：经验、问题、原因、改进方向附录：评估方案、调查问卷、访谈提纲、参考文献等注意：四个原则：用辩证的眼光分析问题下结论有真凭实据考虑评估者可能存在的偏见既考虑短期效果，也关注长期影响第五十一页，共79页。请撰写一份培训评估报告第五十二页，共79页。注意：尊重被评估者的知情权和隐私权既尊重评估结果，又不能作为衡量被评估者的唯一标准，更不能作为业绩考核的主要依据方法：评估总结大会（尊重隐私权的前提下）：参会人员：主管领导；项目设计者；项目负责人教学管理人员；培训师；学员代表会议主题：评估人员说明评估方法及结论听取对评估结果的看法，讨论改进措施第五十三页，共79页。第五十四页，共79页。第五十五页，共79页。——多种信息的表达方式——文字信息、图形信息、图像信息、声音信息等多种信息类型的综合第五十六页，共79页。丰富课程内容，培训形式多样化图文并茂，可随时修改完善可以“交互式教学”培训过程生动化，提高教学效果便于知识管理与共享增强了学习的能动性可以人机对话学生可以调整学习顺序、内容、进度第五十七页，共79页。视觉媒介听觉媒介触觉媒介：触摸屏、书写屏等操作模拟：如：驾驶仿真模拟器远程培训媒介：网络学习管理系统第五十八页，共79页。第五十九页，共79页。含义即：课程软件，与课程内容有直接联系经过的制作环节：教学目标确定教学内容与任务分析教学活动结构设计界面设计加工制作种类按操作流程分：顺序型、分支型、交互型、网络型按教学中作用分：全课程型、重难点型、教与学兼用型按教学中目的分：测验型、教学型、模拟型、开放型按适应年龄分：幼儿、小学、中学等按学科分：语文、数学等第六十页，共79页。MacromediaFlash——交互式矢量图。文件体积很小PPT——幻灯片制作工具AuthorWare——基于图标的课件制作工具方正奥思——可视化、交互式多媒体集成创作工具课件大师广州凯迪MacromediaDreamweaver——可视化网页设计工具第六十一页，共79页。PPT优点：内置丰富的动画、过渡效果、多种声音效果，并具有超级链接功能缺点：内置动画有些生硬、单调，交互功能实际是超级链接——对于交互要求高的课件显得力不从心第六十二页，共79页。研究教材，选题教学设计含义：分析教学问题，确定教学目标，建立解决问题的策略方案的过程以优化教学效果为目的，以学习理论、教育理论、传播学理论为基础（P186）脚本制作程序设计发布与测试第六十三页，共79页。第六十四页，共79页。第六十五页，共79页。——将多媒体技术应用于计算机辅助教学的一种应用软件——综合运用多种工具软件编制的、集各种媒体特点与一身的现代教材形式：光盘或软盘：单机使用存于服务器：在网络上传播和教学第六十六页，共79页。表现形式P428

：讲课型示范演示型主动学习型综合型特性P428

：信息集成性操作简便性学习自控性内容修改的灵活性基本类型：专题课件系列课件完整教材特点：多样性：声、像、动画、文字的综合运用智能性：模拟、演示、运算等功能交互性：人机交流重复性：可以无限重复可控性：可以控制演示内容、次数、速度第六十七页，共79页。应注意的问题（P424）教育性科学性技术性艺术性使用性