大数据支持下的课堂评价课件

大数据支持下的课堂教学评价大数据支持下的课堂教学评价11、教师为什么需要了解评价1、教师为什么需要了解评价2评价与测验评价与测验3为什么需要了解评价诊断学生的优势和不足监测学生的发展评定等级判断教师的教学效果影响公众对教育的看法有助于评价教师明确教师的教学目标为什么需要了解评价诊断学生的优势和不足影响公众对教育的看法4如何评价编制课堂教学评价工具解释测试结果对教学具有启发意义的评价如何评价编制课堂教学评价工具5评价三要素信度效度偏见的克服评价三要素信度62、评价的信度信度=一致性2、评价的信度信度=一致性7信度三要素稳定性信度复本信度内在一致性信度信度三要素稳定性信度复本信度内在一致性信度8三种信度间的关系稳定信度≠复本信度≠内在一致性信度三种信度间的关系稳定信度≠复本信度≠内在一致性信度9测量的标准误

测量的标准误

103、评价效度依据评价结果所作推论的可靠程序3、评价效度依据评价结果所作推论的可靠程序11效度三要素内容相关效度效标关联效度结构相关效度效度三要素内容相关效度效标关联效度结构相关效度12信度与效度的关系信度与效度的关系134、偏差的克服评价偏差是反映评价工具质量的重要标准，指的是某些学生由于性别、民族、种族、社会地位、宗教信仰或其它群体特性，致使在评价结果受到影响。4、偏差的克服评价偏差是反映评价工具质量的重要标准，指的是某14评价偏差的形式冒犯不公平的惩罚评价偏差的形式冒犯不公平的惩罚15差异影响与评价偏差差异影响与评价偏差16偏差判断的方法偏差审查小组单个项目的偏差判断总体偏差判断偏差判断的方法偏差审查小组单个项目的偏差判断总体偏差判断17课堂中的偏差检测课堂中的偏差检测185、决定评价什么和如何评价5、决定评价什么和如何评价19评价什么决策驱动型评价教学目标的作用认知，情感和运动能力的评价基于标准的课堂评价评价什么决策驱动型评价教学目标的作用认知，情感和运动能力的评20选择评价内容的建议1、明确与评价程序相关联的评价决策2、利用课程目标搭建一个框架3、了解评价所针对的领域4、收集相关文件5、听取专家、同事关于评估内容的建议6、通过相近似的考核制度选择评价内容的建议1、明确与评价程序相关联的评价决策21如何开展评价运用常模参照测验还是采用标准参照测验选择性反应和建构性反应多种题目类型反应测验题——判断题、多重判断题、多项选择题、匹配题建构性反应测验题——简答题、主观题表现性评价——观查方法、表现性测验档案袋评价情感测评如何开展评价运用常模参照测验还是采用标准参照测验226、反应测验题反应测验题包含了判断题、多重判断题、多项选择题、匹配题6、反应测验题反应测验题包含了判断题、多重判断题、多项选择题23编制的戒律晦涩的指导语模棱两可的陈述无意的线索复杂的句型深奥的词汇编制的戒律晦涩的指导语24判断题措辞严密，引发学生的慎重思考尽量不用否定句避免考查两个概念平衡答案的种类保持测验题的长度相近判断题措辞严密，引发学生的慎重思考25多重判断题区分测验题目组题目与题干相符合多重判断题区分测验题目组26选择题题干内容描述清晰避免使用否定句作题干关注选项的长度合理布局正确答案的位置妥善处理“以上说法都……”的选项选择题题干内容描述清晰27匹配题（连线题）使用同质性条目力求相对简洁确保反应多于前提排列反应为学生描述任务合理安排测验题目，避免跨页匹配题（连线题）使用同质性条目287、建构性反应测验建构性反应测验包括简答题和主观题7、建构性反应测验建构性反应测验包括简答题和主观题29简答题（填空题）尽量采用问句式，减少使用不完整陈述式简答题保证答案的简洁性合理设置空格限制空格的数量空格的长度要相等简答题（填空题）尽量采用问句式，减少使用不完整陈述式简答题30主观题向学生指明答案的展开程序明确描述学生的任务提供答题的参考时间并给出题目的分值避免出现选做题预测学生的回答主观题向学生指明答案的展开程序31主观题评分分项的或者整体的评份方式设计一个试行的评分要点事先确定写作基本技能的重要性一次完成对一个题目的评分尽量保证匿名评分主观题评分分项的或者整体的评份方式328、表现性评价让学生完成有关小组合作解决问题的判断让学生完成一系列的选择，用于解决问题的某一步学生简短地回答一系列关于小组合作解决问题的方式呈现给学生一个新的问题，让学生写一篇短文说明解决以前没有遇到过的某个问题学生学会通过小组合作解决问题测量学生合作技能的方法8、表现性评价让学生完成有关小组合作解决问题的判断让学生完成33表现性评价任务的选择推论和任务类推性的困境评估表现性测验任务时需要考虑的因素类推性真实性多重性可传授性公正性可行性可测性表现性评价任务的选择推论和任务34确定评分标准评分标准确定评分标准评分35评价规则任务明确规则超一般规则评价规则任务明确规则36表现评分的误差来源评分工具的缺陷程序方面的缺陷教师个人偏见表现评分的误差来源评分工具的缺陷379、档案袋评价对个人作品的系统收集9、档案袋评价对个人作品的系统收集38档案袋评价与标准化测验的区别档案袋评价较全面反映学生参与的多种活动让学生参与评价自己的进步成就，从而确定出一下步的学习目标在尊重学生个体差异的基础上评价每一个学生的成就标准化测验依据有限的任务来评价学生的能力由教师根据学生答题情况评分用相同的标准评价所有学生档案袋评价与标准化测验的区别档案袋评价较全面反映学生参与的多39档案袋评价是一种合作性评价方式学生的自我评价是一个重要的目标关注学生的进步、努力与成就将评价与教、学结合起来标准化测验评价过程是非合作性的缺少学生的自我评价只关注学生的成就教、学与评价是分离的档案袋评价是一种合作性评价方式学生的自我评价是一个重要的目标40课堂档案袋评价与大规模评价中的档案袋评分在课堂中运用谁在评价谁在大规模评价项目中的应用课堂档案袋评价与大规模评价中的档案袋评分在课堂中运用41课堂档案袋评价的关键成分1、确保学生“自己拥有”档案袋2、决定收集何种用品样本3、收集和存放作品样本4、选择评价标准5、要求学生评价自己的作品6、安排和举行档案袋会谈7、调动家长参与档案袋评价过程课堂档案袋评价的关键成分1、确保学生“自己拥有”档案袋42样本的选取家庭作业中一个开放式问题的解决方案学生绘制的图形，制作的网页、微博等用软件解决问题的方案样本的选取家庭作业中一个开放式问题的解决方案4310、情感评价学生的学习态度、学生的价值观、学生的自尊等10、情感评价学生的学习态度、学生的价值观、学生的自尊等44为什么要评价情感情感的重要性让教学关注学生情感监控学生的状态为什么要评价情感情感的重要性45评价哪些情感变量态度目标兴趣目标价值观目标情感变量评价哪些情感变量态度目标情感46怎样评价情感利克特量表多焦情感量表怎样评价情感利克特量表多焦情感量表47利克特量表由一系列陈述组成，每个陈述都需要你表明你的态度。利克特量表由一系列陈述组成，每个陈述都需要你表明你的态度。48编制利克特量表1、选择你想要评价的情感变量2、对每一情感变量都编制一系统相关的积极陈述和消极陈述3、找几个人来确定每一项陈述究竟是积极的还是消极的4、确定每一个陈述的备选答案的数量和使用的措辞5、准备好自陈量表，并指导学生如何回答6、让学生回答量表7、对量表进行评分编制利克特量表1、选择你想要评价的情感变量49例：是否喜欢学校在我每一天的生活中，学校是我生命中最快乐的部分（非常同意、同意、不确定、不同意、非常不同意）尽管偶尔我会觉得学校令人感到不愉快，不过绝大多数时候我还是喜欢他的（非常同意、同意、不确定、不同意、非常不同意）例：是否喜欢学校在我每一天的生活中，学校是我生命中最快乐的部50多焦点情感量表收集学生情感倾向信息的评价工具多焦点情感量表收集学生情感倾向信息的评价工具51编制多点情感量表1、选择要测量的情感变量2、确定每个情感变量安排多少个测量项目3、每每个变量编一一系列积极和消极的陈述4、确定答案用措辞5、为量表设计指导语编制多点情感量表1、选择要测量的情感变量52例：指导语：请表明量表中的每一条陈述而言是否真实。这当中有些陈述是积极的，而有些是消极的，请决定是否每一条陈述对你而言都是真实的。答案没有对与错之分，所以请你诚实回答。请不要在量表上写你的名字。陈述是不是不确定1、总体而言，我是喜欢学校的□□□2、和喜欢学习科学□□□3、我能写出好的报告和故事□□□4、我不喜欢阅读□□□5、我不喜欢在课堂上回答问题□□□……例：指导语：请表明量表中的每一条陈述而言是否真实。这当中有些5311、促进教师发展的评价基于评判的完善方法基于经验的完善方法11、促进教师发展的评价基于评判的完善方法54基于评判的完善方法评判自己的评价工具同事的评判学生评判五条检查标准：1、遵循编写指南或要求2、对分数推论有所贡献3、内容要准确4、内容没有遗漏5、公正基于评判的完善方法评判自己的评价工具五条检查标准：55基于经验的完善方法难度指数区分度指数难度指数：p=R/TR：回答正确的学生数量T：回答学生总数量

题目区分度指数题目评价>=0.40很好0.30-0.39较好0.20-0.29不重要的题<0.19低劣基于经验的完善方法难度指数难度指数：

题目区分度指数题目评价5612、教学导向评价评价的目的是为了作出更好的教育决策，给予学生更好的教育12、教学导向评价评价的目的是为了作出更好的教育决策，给予学57评价结果促进了什么样的教学决策？决策种类评价策略决策选项教什么在教学前进行前测是否对特定教学目标提供指导教多久对学生的学习进度进行阶段性过程评价对于某个学生或是整个班级，是否继续或停止对某个目标的指导教学效果比较学生教学前后的表现下次使用时，是否保持、抛弃或者修正原有的教学安排评价结果促进了什么样的教学决策？决策种类评价策略决策选项教什58大数据大数据59完完601、每一个成功者都有一个开始。勇于开始，才能找到成功的路。12月-2212月-22Sunday,December11,20222、成功源于不懈的努力，人生最大的敌人是自己怯懦。14:20:5214:20:5214:2012/11/20222:20:52PM3、每天只看目标，别老想障碍。12月-2214:20:5214:20Dec-2211-Dec-224、宁愿辛苦一阵子，不要辛苦一辈子。14:20:5214:20:5214:20Sunday,December11,20225、积极向上的心态，是成功者的最基本要素。12月-2212月-2214:20:5214:20:52December11,20226、生活总会给你另一个机会，这个机会叫明天。11十二月20222:20:52下午14:20:5212月-227、人生就像骑单车，想保持平衡就得往前走。十二月222:20下午12月-2214:20December11,20228、业余生活要有意义，不要越轨。2022/12/1114:20:5214:20:5211December20229、我们必须在失败中寻找胜利，在绝望中寻求希望。2:20:52下午2:20下午14:20:5212月-2210、一个人的梦想也许不值钱，但一个人的努力很值钱。12/11/20222:20:52PM14:20:5211-12月-2211、在真实的生命里，每桩伟业都由信心开始，并由信心跨出第一步。12/11/20222:20PM12/11/20222:20PM12月-2212月-22谢谢大家1、每一个成功者都有一个开始。勇于开始，才能找到成功的路。161大数据支持下的课堂教学评价大数据支持下的课堂教学评价621、教师为什么需要了解评价1、教师为什么需要了解评价63评价与测验评价与测验64为什么需要了解评价诊断学生的优势和不足监测学生的发展评定等级判断教师的教学效果影响公众对教育的看法有助于评价教师明确教师的教学目标为什么需要了解评价诊断学生的优势和不足影响公众对教育的看法65如何评价编制课堂教学评价工具解释测试结果对教学具有启发意义的评价如何评价编制课堂教学评价工具66评价三要素信度效度偏见的克服评价三要素信度672、评价的信度信度=一致性2、评价的信度信度=一致性68信度三要素稳定性信度复本信度内在一致性信度信度三要素稳定性信度复本信度内在一致性信度69三种信度间的关系稳定信度≠复本信度≠内在一致性信度三种信度间的关系稳定信度≠复本信度≠内在一致性信度70测量的标准误

测量的标准误

713、评价效度依据评价结果所作推论的可靠程序3、评价效度依据评价结果所作推论的可靠程序72效度三要素内容相关效度效标关联效度结构相关效度效度三要素内容相关效度效标关联效度结构相关效度73信度与效度的关系信度与效度的关系744、偏差的克服评价偏差是反映评价工具质量的重要标准，指的是某些学生由于性别、民族、种族、社会地位、宗教信仰或其它群体特性，致使在评价结果受到影响。4、偏差的克服评价偏差是反映评价工具质量的重要标准，指的是某75评价偏差的形式冒犯不公平的惩罚评价偏差的形式冒犯不公平的惩罚76差异影响与评价偏差差异影响与评价偏差77偏差判断的方法偏差审查小组单个项目的偏差判断总体偏差判断偏差判断的方法偏差审查小组单个项目的偏差判断总体偏差判断78课堂中的偏差检测课堂中的偏差检测795、决定评价什么和如何评价5、决定评价什么和如何评价80评价什么决策驱动型评价教学目标的作用认知，情感和运动能力的评价基于标准的课堂评价评价什么决策驱动型评价教学目标的作用认知，情感和运动能力的评81选择评价内容的建议1、明确与评价程序相关联的评价决策2、利用课程目标搭建一个框架3、了解评价所针对的领域4、收集相关文件5、听取专家、同事关于评估内容的建议6、通过相近似的考核制度选择评价内容的建议1、明确与评价程序相关联的评价决策82如何开展评价运用常模参照测验还是采用标准参照测验选择性反应和建构性反应多种题目类型反应测验题——判断题、多重判断题、多项选择题、匹配题建构性反应测验题——简答题、主观题表现性评价——观查方法、表现性测验档案袋评价情感测评如何开展评价运用常模参照测验还是采用标准参照测验836、反应测验题反应测验题包含了判断题、多重判断题、多项选择题、匹配题6、反应测验题反应测验题包含了判断题、多重判断题、多项选择题84编制的戒律晦涩的指导语模棱两可的陈述无意的线索复杂的句型深奥的词汇编制的戒律晦涩的指导语85判断题措辞严密，引发学生的慎重思考尽量不用否定句避免考查两个概念平衡答案的种类保持测验题的长度相近判断题措辞严密，引发学生的慎重思考86多重判断题区分测验题目组题目与题干相符合多重判断题区分测验题目组87选择题题干内容描述清晰避免使用否定句作题干关注选项的长度合理布局正确答案的位置妥善处理“以上说法都……”的选项选择题题干内容描述清晰88匹配题（连线题）使用同质性条目力求相对简洁确保反应多于前提排列反应为学生描述任务合理安排测验题目，避免跨页匹配题（连线题）使用同质性条目897、建构性反应测验建构性反应测验包括简答题和主观题7、建构性反应测验建构性反应测验包括简答题和主观题90简答题（填空题）尽量采用问句式，减少使用不完整陈述式简答题保证答案的简洁性合理设置空格限制空格的数量空格的长度要相等简答题（填空题）尽量采用问句式，减少使用不完整陈述式简答题91主观题向学生指明答案的展开程序明确描述学生的任务提供答题的参考时间并给出题目的分值避免出现选做题预测学生的回答主观题向学生指明答案的展开程序92主观题评分分项的或者整体的评份方式设计一个试行的评分要点事先确定写作基本技能的重要性一次完成对一个题目的评分尽量保证匿名评分主观题评分分项的或者整体的评份方式938、表现性评价让学生完成有关小组合作解决问题的判断让学生完成一系列的选择，用于解决问题的某一步学生简短地回答一系列关于小组合作解决问题的方式呈现给学生一个新的问题，让学生写一篇短文说明解决以前没有遇到过的某个问题学生学会通过小组合作解决问题测量学生合作技能的方法8、表现性评价让学生完成有关小组合作解决问题的判断让学生完成94表现性评价任务的选择推论和任务类推性的困境评估表现性测验任务时需要考虑的因素类推性真实性多重性可传授性公正性可行性可测性表现性评价任务的选择推论和任务95确定评分标准评分标准确定评分标准评分96评价规则任务明确规则超一般规则评价规则任务明确规则97表现评分的误差来源评分工具的缺陷程序方面的缺陷教师个人偏见表现评分的误差来源评分工具的缺陷989、档案袋评价对个人作品的系统收集9、档案袋评价对个人作品的系统收集99档案袋评价与标准化测验的区别档案袋评价较全面反映学生参与的多种活动让学生参与评价自己的进步成就，从而确定出一下步的学习目标在尊重学生个体差异的基础上评价每一个学生的成就标准化测验依据有限的任务来评价学生的能力由教师根据学生答题情况评分用相同的标准评价所有学生档案袋评价与标准化测验的区别档案袋评价较全面反映学生参与的多100档案袋评价是一种合作性评价方式学生的自我评价是一个重要的目标关注学生的进步、努力与成就将评价与教、学结合起来标准化测验评价过程是非合作性的缺少学生的自我评价只关注学生的成就教、学与评价是分离的档案袋评价是一种合作性评价方式学生的自我评价是一个重要的目标101课堂档案袋评价与大规模评价中的档案袋评分在课堂中运用谁在评价谁在大规模评价项目中的应用课堂档案袋评价与大规模评价中的档案袋评分在课堂中运用102课堂档案袋评价的关键成分1、确保学生“自己拥有”档案袋2、决定收集何种用品样本3、收集和存放作品样本4、选择评价标准5、要求学生评价自己的作品6、安排和举行档案袋会谈7、调动家长参与档案袋评价过程课堂档案袋评价的关键成分1、确保学生“自己拥有”档案袋103样本的选取家庭作业中一个开放式问题的解决方案学生绘制的图形，制作的网页、微博等用软件解决问题的方案样本的选取家庭作业中一个开放式问题的解决方案10410、情感评价学生的学习态度、学生的价值观、学生的自尊等10、情感评价学生的学习态度、学生的价值观、学生的自尊等105为什么要评价情感情感的重要性让教学关注学生情感监控学生的状态为什么要评价情感情感的重要性106评价哪些情感变量态度目标兴趣目标价值观目标情感变量评价哪些情感变量态度目标情感107怎样评价情感利克特量表多焦情感量表怎样评价情感利克特量表多焦情感量表108利克特量表由一系列陈述组成，每个陈述都需要你表明你的态度。利克特量表由一系列陈述组成，每个陈述都需要你表明你的态度。109编制利克特量表1、选择你想要评价的情感变量2、对每一情感变量都编制一系统相关的积极陈述和消极陈述3、找几个人来确定每一项陈述究竟是积极的还是消极的4、确定每一个陈述的备选答案的数量和使用的措辞5、准备好自陈量表，并指导学生如何回答6、让学生回答量表7、对量表进行评分编制利克特量表1、选择你想要评价的情感变量110例：是否喜欢学校在我每一天的生活中，学校是我生命中最快乐的部分（非常同意、同意、不确定、不同意、非常不同意）尽管偶尔我会觉得学校令人感到不愉快，不过绝大多数时候我还是喜欢他的（非常同意、同意、不确定、不同意、非常不同意）例：是否喜欢学校在我每一天的生活中，学校是我生命中最快乐的部111多焦点情感量表收集学生情感倾向信息的评价工具多焦点情感量表收集学生情感倾向信息的评价工具112编制多点情感量表1、选择要测量的情感变量2、确定每个情感变量安排多少个测量项目3、每每个变量编一一系列积极和消极的陈述4、确定答案用措辞5、为量表设计指导语编制多点情感量表1、选择要测量的情感变量113例：指导语：请表明量表中的每一条陈述而言是否真实。这当中有些陈述是积极的，而有些是消极的，请决定是否每一条陈述对你而言都是真实的。答案没有对与错之分，所以请你诚实回答。请不要在量表上写你的名字。陈述是不是不确定1、总体而言，我是喜欢学校的□□□2、和喜欢学习科学□□□3、我能写出好的报告和故事□□□4、我不喜欢阅读□□□5、我不喜欢在课堂上回答问题□□□……例：指导语：请表明量表中的每一条陈述而言是否真实。这当中有些11411、促进教师发展的评价基于评判的完善方法基于经验的完善方法11、促进教师发展的评价基于评判的完善方法115基于评判的完善方法评判自己的评价工具同事的评判学生评判五条检查标准：1、遵循编写指南或要求2、对分数推论有所贡献3、内容要准确4、内容没有遗漏5、公正基于评判的完善方法评判自己的评价工具五条检查标准：116基于经验的完善方法难度指数区分度指数难度指数：p=R/TR：回答正确的学生数量T：回答学生总数量

题目区分度指数题目评价>=0.40很好0.30-0.39较好0.20-0.29不重要的题<0.19低劣基于经验的完善方法难度指数难度指数：

题目区分度指数题目评价11712、教学导向评价