考评员技术及考评方法.ppt

考评技术及考评方法,.,引言,考评人员除具备必要的资格条件和职业道德素质外，应当重点掌握本职业的考评技术和考评方法，才能客观公正、科学规范地完成考评任务。,一、考评员的主要任务,二、考评人员的职责,（1）应严格按照规定的考核方式、方法和评分标准,完成评分任务，填写考评记录。,（5）考评人员对考评现场发生的违纪行为，视情节轻重给予处理，并向上级部门报告,（4）考评人员在执行考评任务时，实行亲属回避制度。,（3）考评人员应严格执行考评人员工作守则和考场规则负责场地等检查和检验,（2）独立判分的权利，有权拒绝任何单位和个人更改鉴定结果的非正当要求。,（6）考评人员权益受到损害时，可向职业技能鉴定指导中心申诉。,（10）考评组长应具备相应的评判水平和组织能力，每次考评工作完成后，向职业技能鉴定指导中心提交考评报告。,（9）考评组成员每次轮换不得少于三分之一，在同一职业鉴定所内不得连续超过3次,（8）职业技能鉴定指导中心采取轮换方式派遣考评人员，组成成考评小组，并制定考评组长。,（7）各级职业技能鉴定指导中心必须维护考评人员的合法权利。,二、考评人员的职责,三、考评的工作特征,考评是考评人员独立地依据考评标准和规定的考评技术方法与手段，对鉴定对象技能水平进行客观、公正的评价和评定。,考评的工作特征,1、标准性和规范性职业技能鉴定是一种标准参照型的考试，涉及到上千个职业和广大劳动者切身利益。同时，鉴定场所分散，设备条件千差万别。这些性质和特点就要求考评工作讲程序和守规范，要求每个考评流程都要引标据法，有规有则。而任何一种考试又不可能达到绝对的理想的目标，为此，只有用标准和规范加以约束，考评质量才能得到控制。这就注定了标准化和规范性是它的特色。,考评的工作特征,2、技术性和复杂性考评是一种特殊的评价，它以心理教育测量学和考试学理论为基础，具有一般考试的基本特征、规律和方法手段。同时，职业标准涉及的内容纷纭复杂，技术复杂程度又各不相同。因此，只有根据职业特点，充分认识考评工作的特点和规律，掌握考试理论科学和采用多种考评技术与方法，才能不断提高考评科学性和有效性，适应考评工作的需要,考评的工作特征,3、独立性和权威性考评工作虽然是职业技能鉴定工作的一个组成部分，但由于赋予它对鉴定对象进行客观公正考评和考试结果不受任何部门、个人的干预权利，以及考评人员独立行使考评权利和对考评人员采取资格认证的管理制度，使考评工作更加具有独立的特性和权威等特点。,考评的工作特征,4、变化性和创新性职业是随着科学技术和劳动方式的发展及改变而变化发展的。同时，科学技术的发展也带来劳动场所、工具设备的更新变化。因此，这些变化必然引起考评技术与方法的变化，使得考评工作只有不断创新和发展；考评人员不断地学习，提高自身业务素质；探索灵活多样的考评技术与方法，才能满足考评工作的需要。,四、考评的技术种类-（1）,职业标准知识和技能的分类,知识层面的分类：识记型：主要指职业技能所需的知识，即职业标准中的基础知识部分和部分心智技能。认知程度一般分为了解、熟悉、掌握三个等次。应用型：主要指运用专业知识去认识、分析和解决问题的能力。主要体现在职业标准知识的掌握和部分心智技能与技术技能的运用上。认知程度一般分为了解、掌握、运用三个等次。,职业标准知识和技能的分类,技能层面的分类：操作型：主要指借助动作的力度、协调性及敏捷性等能力进行操作的技能，是职业技能中最常见的一种技能类型。此类测评一般分为模仿、掌握、熟练三个等次。心智型：（射箭运动）它主要指需要通过判断、思维等来形成能力类的技能，它是与操作型相对应的另一种技能类型，适用于知识与技能界限比较模糊的职业。测评程度一般分为了解、掌握、应用三个等次。技术型：主要指应用知识转化为能力的技能，它适用于技术含量较高的职业，如数控加工和计算机等职业。,四、考评的技术种类-（2）,考评的技术分类（2）,综合类-考评内容上广度与深度相结合、以文字图象回答问题。它的主要方法：通过试卷试题对知识认知程度和心智类技能水平进行测试。操作类-通过现场技能操作完成考核项目。它的主要方法：是通过一个或几个考核项目对上述技能所需的熟练和准确程度进行测评。论文类-笔试与面试并用。它的主要方法：采用以深度为主、广度为辅的办法来全面检查鉴定对象现有技术知识、理论素质、学术水平、技能水平和综合分析解决实际问题的能力。,五、考评方法,考评方法：考评方法是考评技术的具体体现。问卷法（文字直接质问法）操演法：口试法：以论文、抽签题目和音像片等为测试中介题目，对鉴定对象测试结果进行评价。阅卷法：以论文为中介对鉴定对象的能力进行分析、评价。,六、技能考核评分技巧,减分法：根据评分标准设想出最完美的表现得满分，然后认真观察考生表现，当考生出现失误大或工作不理想时，按指标相应减分。此方法，考评员的心理负荷较低，但观察不认真或经验不足时，容易产生较多考生得满分。加分法：与减分法相反，先确定一个最可能出现的最低分，当考生优于基准表现时，相应加分，劣于基准表现时减分。此方法可以拉开考生得分差距，较少出现满分。实际使用加分法时，可能即要加分，以要做减分，考评员心理负荷较大。,七、评定偏差,职业技能鉴定考评工作主要靠考评人员对考生行为及其结果的判断，任何人的判断都可能发生错误，考评员也不例外。评定偏差：绩效评定中凡是非故意歪曲的判断结果与事实的偏离。控制偏差因素，将偏差的影响控制到最小，获得高质量的考评结果。,偏差产生原因,人的认识能力的局限。借助仪器弥补自己感觉能力的不足，但对仪器测量结果仍要根据自己的差别感受作出判断。人的经验和知识的局限。疲劳、厌倦、紧张、不认真等都可能增大评定偏差。,评定偏差的类型,分布偏差：评定的分布偏差偏离正态分布。宽厚偏差：评定结果偏于高水平段。评定者掌握评定标准过于宽松。苛严偏差：评定结果偏于低水平段。评定者掌握评定标准过于苛刻。集中趋势：评定成绩过于集中某一水平段。评定者观察被评定者的行为表现不够，或对评定标准的区分程度掌握不够，或不希望得罪任何人所致。,评定偏差的类型,顺序效应：先前的评定对后继评定的影响。评定者往往倾向于以前一个被评定者或评定指标的评定结果作为后一个的直接参照。心理学研究表明：任何相邻的被评定者的评定结果的相关显著高于不相邻的被害人评定者。控制措施：每个考评员每次只就一个评定指标评定所有考生；各考评员的评定指标随机排序等抵销顺序效应的影响。,评定偏差的类型,自我中心效应：评定者暗自以自己认可的评定标准取代规定标准。当评定标准较粗陋，评定者对此争议较大，或对评定标准的说明不够明确，评定者对评定标准有各自的理解时，这种偏差最容易发生。克服：加强考评员培训，树立正确的考评考评工作态度，掌握正确的考评标准，正确理解评定指标的意图。,评定偏差的类型,光晕效应（晕轮效应）：评定者对被评定者某一方面的强烈印象影响其对被评定者其他方面的判断。“先入为主、以偏概全”评定者容易被被评定者某一方面的表现所蒙蔽，而对其它的特性认识不清甚至根本无法发现，在考核中，如果存在晕轮效应，考核者只能被考核者的优（缺）点发生兴趣而无视其缺（优）点。,评定偏差的类型,相似效应：评定者对于被评定者所表现出的与自己相似的经历、思想和行为，往往有更多的兴趣，对这样的考生易产生好感，进而影响评分。,八、考评行为对考生的影响,人的活动会受到他人在场的影响。内向、缺乏自信的人，他人在场会使其活动动机降低，活动效率下降。外向、好显示自己的人，当从事精细动作操作或复杂、困难的心智操作时，他人在场也可能降低活动效率，提高差错率。考评员的言语、表情、视线、手势、体势等都可能对考生产生暗示作用，增加考生心理紧张和压力，从而影响工作行为。,考评行为对考生的影响,职业技能鉴定场所，考评员不到现场进行考评是不可能的，考场规则要求考评员和其他工作人员尽可能控制与考评工作无关行为，最大限度减少对考生应试行为的影响。考评员应注意不以任何方式暗示考生，努力控制容易被人理解为暗示作用的行为，如点头、摇头、长时间盯住某个地方、微笑、皱眉、随着考生动作做手势、考评人员彼此耳语等。不向考生提出考核中没有要求的问题，如为什么要这样做、想想看怎样做才对等。,九、鉴定实施的主要步骤,实施职业技能鉴定考试活动的全过程，粗略地分为鉴定组织、鉴定准备、鉴定施测和鉴定结果处理四个工作阶段。这里，我们重点讲鉴定施测环节。,行政管理,业务管理,具体执行,鉴定规划、鉴定公告、监督、制卷、成绩认定、核发证书等,组织报名,审查登记,考场准备,考试施测,评定,成绩登记,1）鉴定组织的内容与要求,组织鉴定考试活动的各种因素以所制定的鉴定实施方案妥善地安排各项工作内容约束鉴定活动的主体及鉴定对象，按规定的形式和要求参加职业技能鉴定活动,1）鉴定组织的内容与要求,1、制定实施方案职业技能鉴定的实施方案是确定着某次职业技能鉴定的工作方式、工作内容和要求以及整个工作安排的工作方案。方案包含内容：鉴定的范围（工种名称、定义）；鉴定的标准和方法（所依据的考试标准和所采用的考试方法）；鉴定的工作日程安排（考试的日期和时间安排）；工作事项说明（重要事项的说明、考点、考场设置和分布、耗材）,1）鉴定组织的内容与要求,2、发布鉴定公告公告包含内容：工种名称、定义和适用范围；各工种的考试标准、方法或指定的鉴定资料；报名条件和手续、时间期限、收费项目和标准；考试的科目、时间和地点或以准考证的方式确定；另外，如不能在报名当时填发准考证时，还应告知准考证的发放时间和办法。,1）鉴定组织的内容与要求,3、审查申报条件和资格查看职业技能鉴定申报表常规信息：如姓名、身份证号、年龄、照片是否符合要求等条件信息：如从事工作年限、申报鉴定工种（必须是工种目录表上有的）特殊信息：职业活动和职业培训方面的经历（查看证书）4、报名登记和分类统计,2）鉴定准备的内容与要求,合理地安排实施鉴定的人员、场地和设备，提供相应的技术手段和保障条件是保证职业技能鉴定考试活动顺利进行的必要步骤。1、试卷准备与交接职业技能鉴定试卷交接包括专业技术知识考试试卷及评分标准、操作技能考试技术准备通知单和操作技能考试试卷及评分标准、其它有关的说明材料。注意记录。2、考场准备与验收专业技术知识考试采取按工种和级别相对集中的方法安排试场；操作技能考试的考场依情况不同确定；准备好考务、考评人员胸卡,3）鉴定实施的内容与要求,鉴定施测由职业技能鉴定考评员和鉴定对象按统一的考场规则和考试方法共同完成测试，并产生测试结果。测试过程以测前准备、测试及测后清理为控制环节并按顺序进行。1、专业技术知识的测试与评分2、操作技能测试与评分的特殊要求,专业技术知识的测试与评分,测试准备要求领取试卷，核对试卷与所负责的监考任务是否吻合。进入试场时，要对试场的准备情况进行大致的检查，看试场准备工作是否符合规定的要求。考评员还要备齐试卷装订和密封所用的工具和材料。考试开考前15分钟后，考评员应及时组织鉴定对象入场，并检查准考证以免考生错场。鉴定对象入场完毕后，考评员当众宣布考场规则、重申考场纪律和注意事项，指导鉴定对象准备测试。,专业技术知识的测试与评分,测试要求从考试开始计时直到考试结束铃响，考试员和鉴定对象的行为都称为测试。测试期间考评员的工作主要是考场巡视。考评员巡视考场的行为不应干扰鉴定对象的考试过程。考评员对所负责监考的考场情况，应按要求记载。,专业技术知识的测试与评分,测后清理要求考试规则规定所有的鉴定对象应在同一时间内完成考试，考试结束时，考试员应责令所有鉴定对象立即停止考试，并退场。试卷回收、装订密封以及试卷袋密封。缺考试卷一般在开考后30分钟回收。并将缺考者的考号填写在试卷和考场情况记载表上，按序号装订成册。试卷装袋之前要核对试卷数量，确认与原发出的数量（包括备份卷和缺考卷）一致后，贴专用封条，交考场办公室。评卷、合分、统计、签字。,操作技能测试与评分的特殊要求,操作技能的测试与评分需采用多种手段和方法。测前准备，检查考场的考试条件和安全。测试过程中，考评员不仅要执行监考任务，还必须及时劝阻或制止各种违反操作规程的测试行为。测试完成后，作好测试样本的回收、分类、标号和封存工作。,操作技能测试与评分的特殊要求,考评员对评分标准有正确认识并一致，对所用测评用具的精确程度及使用方法也应统一。行为反应为测试内容时，通常只能以“考评合一”的方式进行；操作过程的行为结果主测试内容时，则可以采用“考评分开”的方式。两种不同方式施测时，样本的存在形式和保存方法不同，在检测评分时的组织方法、样本编号方法、时间安排顺序上都有较大的差异。,4）鉴定结果处理的内容与要求,考试成绩必须经过统计分析和成绩认定后，才能真正成为核发职业资格证书的有效依据。1、统计分析：评价考试的质量2、成绩认定：试题有效性认定和考试质量分析处理3、核发证书：据成绩认定结果、遵证书核发权限。,十、考评的实施要点,1）考前准备2）考评中3）实施测评4）考评后技术资料汇总,1）考评前的准备工作,召集全体考评员会议。成立考评小级，推选考评组长，拆封试卷袋，进行考题研究，制定考评实施方案（考生分组、考试流程、考评员任务安排等）；熟悉考试设备的性能及操作要领；检查考试用仪器、仪表；检查考场安全情况；检查考场材料准备情况；全体考生会议，说明考场的纪律和考试流程；考生工位抽签。,1.考题,（1）阅读考题，了解实操考题的考点、要求；（2）了解复杂程度。（3）了解考题的工艺过程