搜集教育评价信息的主要方法.ppt

搜集教育评价信息搜集教育评价信息 的主要方法的主要方法 付道明 广东省韩山师范学院教育系 第一节第一节 观察法观察法 q一、观察法的含义和特点 q(一)观察法的含义:是指评价者通过自身的感觉 器官或借助于一定的科学仪器,有目的,有计划地 对教育评价对象的自然活动状态进行系统,深入 地观察,以获得评价对象准确客观资料的方法. q(二) 观察法的特点 q第一,观察的目的性和计划性. q第二,观察的自然性和真实性. q第三,观察的重复性. q第四,观察的能动性. q第五,观察的凭借性. 二、观察法在搜集评价信息中的二、观察法在搜集评价信息中的 作用作用 q(一),能够获得被评对象比较充实,客观的原始资 料,为教育评价提供重要依据和前提. q第一,观察学生学习,生活,娱乐等各个方面的情况 .掌握学生的全面信息,从而作出正确的价值判断. q第二,观察教师的教育,教学活动,帮助我们系统的 了解教师的活动,从而为教师的评价提供必要的 信息和依据. q第三,通过观察学生和教师的情况,有助于建立良 好的师生关系. q第四,通过观察学校的硬件设施,从而为教育管理 部门提供现实依据. q(二) 是检验一种教育评价思想和理论是否科学的 重要依据. 三、观察法的类型三、观察法的类型 q1.根据观察时是否借助于仪器,可分为直接观察 法和间接观察法. q2.根据评价者是否直接参与观察对象所从事的活 动可分为参与性观察法和非参与性观察法. q3.按照观察的范围可分为全面观察法和抽样观察 法. q4.根据观察实施的方式可分为有结构观察法和无 结构观察法. q(1) 有结构观察法包括:一,时间取样设计;二,事件 取样设计;三,行为核查法. q(2) 无结构观察法分为实况记录法和轶事记录法 两种. 韩山师范学院 教育科学与技术系 研究案例弗兰德斯课堂观察互动分析法研究案例弗兰德斯课堂观察互动分析法 本观察研究的目的是为了解教师在是否以视频为中心 的网络课程进行教学的情况下，师生互动是否存在差 异，学生在自主学习、协作学习和探究性学习中是否 存在差异。 课堂分析方案 弗兰德斯互动分析 对一名学生的观察分析 对学生学习投入状态和非投入状态的观察 该案例摘自华南师范大学2004级教育硕士论文 韩山师范学院 教育科学与技术系 师生言语互动分析师生言语互动分析 结论：说明在课堂教学中教师处于“主导”地位。在控制组课堂 内，学生主体地位并没有得到真正的体现，而试验组学生的主 体地位则得到了较好的体现。由于二者均采用了小组协作的讨 论形式，而且教师的教学行为和方法一致，所以我们认为在试 验组教学中，以视频媒体为中心的网络课程在引导学生思维、 开展小组协作和会话，进而在意义建构方面都起到了关键的作 用。 控制组师生课堂言语互动图试验组师生课堂言语互动图 韩山师范学院 教育科学与技术系 对一名学生每分钟具体活动的观察分析对一名学生每分钟具体活动的观察分析 控制组观察结果试验组观察结果 结论：控制组学生“无关活动”出现频率较大，“动手实践”、“讨论” 和“阅读”等学习活动较少；被动接受知识的活动如“听”、“写”较为 多。因此，从该名学生的具体学习行为分析，我们认为该生处于被 动学习的状态，而且容易受到外界干扰。试验组学生的无关活动大 大减少交互类活动如讨论、思考等增多，我们认为该生处于较好的 学习的状态。 韩山师范学院 教育科学与技术系 学生学习投入状态和非投入状态分析学生学习投入状态和非投入状态分析 控制组学生学习投入状态观察表 试验组学生学习投入状态观察表 控制组学生学习非投入状态观察表 试验组学生学习非投入状态观察表 韩山师范学院 教育科学与技术系 结论：就投入状态而言，试验组学生好于控制组， 进一步对两组目标学生进行分析可以知道：控制组 中“与任务无关的闲聊”、“做其他工作”以及“打瞌睡 ”等学习非投入活动出现较为频繁。在目标学生的学 习活动中，非投入活动分别占据了60、70、40 、60和50，这表明这五位同学在整个学习活 动中处于消极学习的状态。试验组中，“做其他工作 ”成为出现最为频繁的非投入活动，在观察中每位同 学均出现过这种活动，五位同学的非投入活动比例 分别为10、20、30、30和10，这表明这 五位同学基本处于一个良好的学习状态。 第二节第二节 文献法文献法 q一、文献法的含义和种类 q文献法是指根据评价目的和内容、搜集、鉴别、 整理有关评价对象的文字记载或音像记录的材料 ,从而收集评价资料的方法. q教育评价文献根据是否具有原始性可以分为一次 性文献和二次性文献两种. 二、教育评价文献信息的来源二、教育评价文献信息的来源 q1.档案与校历. 2.会议纪实. 3.教学文案. q4.课题成果. 5.课程计划. 6.学校管理制度. 7.学 生管理文案. 三、教育评价文献信息的查询三、教育评价文献信息的查询 q(一) 教育评价文献信息查询的途径 q第一,网络查询. q第二,调查访问各地方教育行政部门. q第三,调查学校行政办公室和教导处. ( (二二) ) 教育评价信息的检索途径和教育评价信息的检索途径和 方式方式 q1.检索途径 q第一,题名途径. q第二,著者途径. q2.检索方式 q第一,传统的手工方式. q第二,计算机查询. 第三节第三节 调查法调查法 q一、调查法的含义和特点 q(一)调查法是指通过问卷、访谈、测验等科学方 式,有目的、有计划、系统地收集有关教育评价 的信息与资料的方法. q(二) 调查法的特点 q第一,调查问题的现实性. q第二,调查的真实性. q第三,调查样本的代表性. q第四,调查方法的灵活性. 二、调查的一般步骤和要求二、调查的一般步骤和要求 q第一步,明确的调查目的,确定调查范围及对象. q第二步,选择调查方式. q第三步,制定调查计划和提纲. q第四步,实施调查. q第五步,调查资料及数据的处理. 三、问卷调查法三、问卷调查法 q(一) 问卷调查法的含义:是指以书面提出问题,由 评价对象作答的方式进行搜集资料的方法. q(二) 问卷调查法的优点和局限 q1.问卷调查的优点 q第一,时间的灵活性. 第二,问卷法的取样不受限制 .第三,调查者和被调查者无须对面接触. q2.问卷调查法的局限 q第一，如果回收率低,会影响其代表性. q第二,可能出现估计作答的现象,影响答卷的准确 性. q第三,搜集到的资料往往是表面的,还需进一步的 分析. q(三) 问卷的结构 q一般包括标题、指导语、问卷的正文等几个部分 . q(四) 问题的形式 q1.封闭式的问题.包括一,是否式问题.二,单选式问 题.三,多选式问题.四,排序式问题.五,划记式问题. 六,表格题. q2.开放式问题. q(五) 问卷的编制程序与设计要求 q1.编制问卷的程序(六个基本程序) q2.问卷设计的基本要求(七个基本要求) q(六)问卷调查的实施 韩山师范学院 教育科学与技术系 案例案例西北地区远程学习者特征和学习障碍的调查报告西北地区远程学习者特征和学习障碍的调查报告 一、西北地区远程学习者特征和学习障碍调查研究的目的意义 为了有效地通过远程教育为的部地区培养本地所需的各级各类人才，构建 符合本地学习者特征和需要的远程教育模式，实施卓有成效的远程教学 ，我们有必要对西部的远程学习者的学习特征和学习障碍进行调查和分 析。 二、西北地区远程学习者特征和学习障碍调查研究的方法与过程 1样本 研究采用问卷调查的方法，以处于我国西北的宁夏、内蒙古、甘肃和陕 西等地的电大的学生为样本总体，采用分层抽样的方式，分别在护理、 机电工程、旅游、汉语言、教育技术、财务会计、电视节目制作、法律 、服装设计与制作。计算机油用、电子商务、工商管理、英语、小学教 育、市场营销、热能动力16个专业中，各随机选择一个班级的学生为样 本。抽样调查人数共为475人，回收的有效问卷是408份，有效问卷的 回收率为859。 韩山师范学院 教育科学与技术系 案例案例西北地区远程学习者特征和学习障碍的调查报告西北地区远程学习者特征和学习障碍的调查报告 2、研究过程 研究自2001年3月开始，4月设计问卷的初稿，5月 请三位远程教育研究专家对问卷设计和所有项目进 行信度论证，经修改后成为问卷的第二稿。6月进行 问卷的先行性研究，请12 位宁夏电大的在读学生填 写问卷，以了解问卷的内容和文字是否适合宁夏电 大的学生，再经修改后定稿。为了增加学生的新鲜 感，选择粉红色的纸张来印刷问卷。 3、数据处理 问卷的数据输入和分析在2001年11月12日进行， 应用的统计软件包是SPSS V10.0版本。 韩山师范学院 教育科学与技术系 案例案例西北地区远程学习者特征和学习障碍的调查报告西北地区远程学习者特征和学习障碍的调查报告 三、西北地区远程学习者特征和学习障碍调查研究结 果的分析 1、远程学习者的特征分析 学生的年龄分布 学生的工龄分布 年龄分布人数百分比 20岁以下8621.1 2125岁12530.6 2630岁7418.1 3135岁7518.4 3640岁338.1 4145岁153.7 总数408100.0 工龄分布人数百分比 从未工作过11728.7 1年以下92.2 12年225.4 23年194.7 34年266.4 45年297.1 56年256.1 67年71.7 810年348.3 10年以上12029.4 总数408100.0 韩山师范学院 教育科学与技术系 案例案例西北地区远程学习者特征和学习障碍的调查报告西北地区远程学习者特征和学习障碍的调查报告 2远程学习者的学习动机 学习动机 非常符合 /符合 有点符合 不符合 /极不符合 不适用 求职的需要198（45.8）57（14.0）21（5.1）132（32.4） 寻找更好的职业171（41.9）64（15.7）39（9.3）135（33.1） 个人的专业发展177（43.4）54（13.2）42（10.3）135（33.1） 学习的内容对工作有用200（49.0）66（16.2）23（5.6）119（29.2） 提职或评职称的需要130（31.9）73（17.9）55（13.4）150（36.8） 更好地服务社会203（49.8）66（16.2）20（4.9）119（29.2） 提高自身价值211（51.7）63（15.4）26（6.4）108（26.5） 为了一张文凭109（26.7）92（22.5）80（19.6）127（31.1） 使生活更充实177（43.4）69（16.9）34（8.3）128（31.4） 获得他人的认可132（32.4）78（19.1）45（11.0）153（37.5） 个人的兴趣111（27.2）100（24.5）52（12.7）145（35.5） 将来能赚更多的钱102（25.0）81（19.9）66（16.2）159（39.0） 领导的要求81（19.9）56（13.7）89（21.8）182（44.6） 为家人争光67（16.4）100（24.5）67（16.4）174（42.6） 到大城市工作64（15.7）65（15.9）93（22.8）186（45.6） 跳出龙门55（13.5）35（8.6）106（26.0）212（52.0） 其他（请填写）0（0）0（0）0（0）0（0） 韩山师范学院 教育科学与技术系 案例案例西北地区远程学习者特征和学习障碍的调查报告西北地区远程学习者特征和学习障碍的调查报告 3远程学习者的学习方式 组织学习材料的方式是否 阅读学习材料，但不做笔记也不在重点处做标记（如画线 ）48（16.3）246（83.7） 阅读学习材料，并在重要的内容下做表示重要的标记 316（93.8）21（6.2） 阅读学习材料，以自己的方式把学习要点贯穿起来 258（82.2）56（17.8） 在实践中找到可以应用知识的例子 226（73.4）82（26.6） 采用阅读、试图回忆、再阅读、再试图回忆的记忆方 法168（56.4）130（43.6） 学习中采用先背诵再理解的方法 66（23.2）219（76.8） 学习中采用先理解再背诵的方法 265（84.9）47（15.1） 学习中常常采用死记硬背的方法 50（17.3）239（82.7） 韩山师范学院 教育科学与技术系 案例案例西北地区远程学习者特征和学习障碍的调查报告西北地区远程学习者特征和学习障碍的调查报告 4远程学习者的学习障碍 我的学习障碍是 非常符合 /符合 有点符合 不符合 /极不符合 不适用 没有足够的学习时间135（33.1 ） 85（20.8） 102（25.0 ） 86（21.1） 家庭经济困难105（25.7 ） 63（15.4）93（22.8） 147（36.0 ） 缺乏必要的工作经验 81（19.9）59（14.5）95（23.3） 173（42.4 ） 自己的学习基础差 67（16.4） 160（27.0 ） 107（26.2 ） 124（30.4 ） 考试过分紧张 61（15.0）90（22.1） 112（27.5 ） 145（35.5 ） 缺乏学习的动力 49（12.0）85（20.8） 129（31.6 ） 145（35.5 ） 写作技能太差 45（11.0）83（20.3） 131（32.1 ） 149（36.5 ） 缺乏学习信心 26（6.4）82（20.1） 146（35.8 ） 154（37.7 ） 对所学专业缺乏兴趣 26（6.4）55（13.5） 160（39.2 ） 167（40.9 ） 韩山师范学院 教育科学与技术系 案例案例西北地区远程学习者特征和学习障碍的调查报告西北地区远程学习者特征和学习障碍的调查报告 5远程学习者寻求帮助的途径 家人/亲戚同学/朋友 班主任 /学科教师 网友 （网上聊天） 不寻求帮助 专业选择 112（44.3 ） 45（17.7）29（11.5）2（0.8）65（25.7） 工作考虑 106（45.3 ） 53（22.6）22（9.4）6（2.6）47（20.1） 家庭问题99（42.9）70（30.3）4（1.7）3（1.3）55（23.8） 社会交往27（11.0） 176（71.9 ） 2（0.8）12（4.9）28（11.4） 同学关系9（4.0） 155（69.5 ） 8（3.6）8（3.6）43（19.3） 感情问题25（10.8） 125（53.9 ） 2（0.8）21（9.1）59（25.4） 学习问题14（4.7） 183（62.0 ） 76（25.8）4（1.4）18（6.1） 学习信心38（15.1） 116（46.0 ） 32（12.7）6（2.4）60（23.8） 考试紧张18（8.8）92（44.9）20（9.8）5（2.4）70（34.1） 学习压力33（13.9） 112（47.1 ） 22（9.2）7（2.9）64（26.9） 韩山师范学院 教育科学与技术系 案例案例西北地区远程学习者特征和学习障碍的调查报告西北地区远程学习者特征和学习障碍的调查报告 6远程学习者对技术资源的了解和使用 教育技术从未使用很少使用有时使用经常使用总是使用 电脑147（36.0 ） 75（18.4）97（23.8）74（18.1）15（3.7） 录音磁带142（34.8 ） 92（22.6）84（20.6）78（19.1）12（2.9） 录像带166（40.7 ） 122（29.9 ） 73（17.9）40（9.8）7（1.7） 网上资料255（62.5 ） 86（21.0）27（6.6）30（7.4）10（2.5） 校园网或因特网252（61.8 ） 79（19.4）34（8.3）29（7.1）14（3.4） 电子邮件248（60.8 ） 82（20.1）42（10.3）24（2.9）12（2.9） 电子讨论网299（73.3 ） 74（18.1）22（5.4）6（1.5）7（1.7） CAI课件300（73.5 ） 59（14.5）18（4.4）19（4.7）12（2.9） 视频会议305（74.4 ） 73（17.9）30（7.4）0（0）0（0） 视听会议308（75.5 ） 75（18.4）25（6.1）0（0）0（0） 韩山师范学院 教育科学与技术系 案例案例西北地区远程学习者特征和学习障碍的调查报告西北地区远程学习者特征和学习障碍的调查报告 四、西北地区远程学习者特征和学习障碍调查结果的 讨论调查研究的结论 1、远程学习者的特征与涵义 2、远程学习者的学习障碍与策略性建议 四、访谈调查法四、访谈调查法 q(一) 访谈调查法是指评价人员或确定的访谈者与 评价对象或访谈对象面对面地交谈,从而了解情 况,搜集有关评价资料的信息的方法. q“访谈”就是研究者“寻访”、“访问”被研究者并且 与其进行“交谈”和“询问”的一种活动。 q访谈法是研究者通过与研究对象进行口头交谈的 方式来收集对方有关心理特征和行为数据资料的 一种研究方法。 q(二) 访谈调查法的优点与局限 q1.访谈调查法的优点 q第一,具有较好的灵活性和适应性. q第二,具有较强的可控性. q第三,调查过程具有互动性. q2.访谈调查法的局限 q第一,需要更多的时间和经费. q第二,标准化程度低,难以统计. q第三,某些因素影响结果的一致性和真实性. q前者是一种有特定目的和一定规则的研究性交 谈，而后者是一种目的性比较弱（或者说目的 主要是情感交流）、形式比较松散的谈话方式 。两种交谈方式都有自己的交流规则，交谈双 方一旦进入交谈关系，便会自动产生一种默契 ，不言而喻地遵守这些规则。 访谈与日常谈话的区别访谈与日常谈话的区别 访谈的功能访谈的功能 p与观察相比，访谈可以了解受访者的所思所想 和情绪反应。 p与问卷调查相比，访谈具有更大的灵活性以及 对意义进行解释的空间。 p与实物分析相比，访谈更具有灵活性、即时性 和意义解释功能。 访谈的特点访谈的特点 p互动性 p艺术性 p科学目的性 ( (三三) ) 访谈调查法的类型访谈调查法的类型 q1.根据访谈的人数可以分为个别访谈和集体访谈 . q2.根据访谈问题的设计可以分为标准化访谈,半 标准化访谈和非标准化访谈. q3.根据调查者和调查对象接触方式的不同可分为 直接访谈和间接访谈. 1、根据访谈内容和过程有无一定的结构 访谈法的类型访谈法的类型 p结构型访谈（封闭型） p非结构型访谈（开放型） p半结构型访谈（半开放型） 结构型访谈结构型访谈 是一种有指导性的、正式的、事先决定 了的问题项目和反应可能性的访谈形式。 非结构型访谈非结构型访谈 是一种非指导性的、非正式的，自 由提问和作出回答的访谈形式。 半结构型访谈半结构型访谈 A型要求被试自由地回答预定的访谈问题， 也可以用讨论的方式作答。 B型按有结构的方式回答无结构的问题。 是运用较多的一种访谈形式，是在运 用访谈提纲的基础上进行、事先列出所问 的问题或交谈的话题。 访谈的类型访谈的类型 2、其他分类标准 p根据正式程度，分为正轨型和非正规型。 p根据接触方式，正规型又分为直接访谈和间 接访谈。 p根据受访者的人数，分为个别访谈和集体访 谈。 p根据访谈的次数，分为一次性访谈和多次性 访谈。 访谈问题的设计访谈问题的设计 1、问题的类型 v开放式问题 v封闭式问题 开放式问题开放式问题 是在内容上没有固定的答案、允 许受访者作出多种回答的问题。 具体形式有： 自由回答式 言语联想式 封闭式问题封闭式问题 要求访谈对象在事先确定的几 个选择答案中选择一个自己认为 最适合的答案。 具体的形式有： 正误式 多种选择法 排序法 评分法 访谈问题的设计访谈问题的设计 2、问题的编制 问题要清楚明确 文字表述要适合访谈对象的文化程度 和知识经验水平 注意使每一具体提问都集中在一个单 一的变量或问题上 提问时的措辞不能流露出自己的偏见 。 ( (四四) ) 实施访谈调查的步骤实施访谈调查的步骤 q第一步,设计和制定访谈计划. q第二,试行访谈. q第三,正式访谈. q第四,整理谈话记录. q第五,撰写访谈调查报告. 访谈法实施过程与技巧访谈法实施过程与技巧 1、访谈前的准备工作 p充分熟悉访谈问卷的内容 p带齐进行访谈所需要的有关材料 p尽可能了解访谈对象 p选择好访谈的合适时间、地点。 访谈法实施过程与技巧访谈法实施过程与技巧 2、接近访谈对象 p称呼 p自我介绍 p访谈相关事宜（目的、意义、内 容、时间、原因） 访谈法实施过程与技巧访谈法实施过程与技巧 3、对付拒绝的技巧 4、谈话与提问的技巧 5、追问的技巧 6、访谈的记录 7、访谈的结束与再次访谈 ( (五五) ) 运用访谈法应注意的问题运用访谈法应注意的问题 q第一,充分作好访前准备. q第二,选择适当的时间,地点和场合进行访谈. q第三,访谈者需要由访谈对象的熟人引见. q第四,建立一个融洽的氛围. q第五,访谈者要注意提问技巧. q第六,要严守保密的原则. q第七,认真作好访谈的记录. 五、抽样的基本方法五、抽样的基本方法 q(一) 抽样调查是从全部评价对象中,抽选一部分 对总体具有代表性的对象进行调查,并椐此取得 反映总体情况的评价资料和信息. q(二)抽样调查按照不同的标准分为以下几类 q1.简单随机抽样 q2.分层抽样 q3.系统抽样 q4.整群抽样 简单随机取样法简单随机取样法 q保证总体的每一个对象有同等的被 抽取到的可能性，并要求它们之间 都是独立的。 q两种方式： q抽签 q利用随机数字表 q先将总体各单位按某一标志顺序排列编号， 然后用总体单位数除以样本单位数求得抽样 间隔，最后在第一个抽样间隔内随机抽取一 个单位作为第一个样本单位，并按抽样距离 做等距抽样，直到抽取一个样本单位为止。 q其抽样误差比简单随机抽样小，但如果总体 中存在周期性的波动或变化，就可能出现系 统偏差。 系统随机取样法系统随机取样法 q如:在1000名学生中抽取58名作为样本， 步骤如下： q编号：1-1000 q计算抽样间隔：K=N/n=1000/58=17.24 q决定起抽号：如7号 q计算抽样号组成样本： qX ，X+K，X+2K， X+3K X+(n- 1)K q7 24 41 59 990 q先将总体按一定标准分为若干类型(层)， 然后根据类型单位数与总体单位数之比率 ，确定从各类型中抽取样本单位的数量， 最后按随机原则从各类型中抽取样本。 q适用于总体单位数量较多，且内部差异较 大的研究对象。 分层随机取样法分层随机取样法 q如某校初一至高三共六个年级2100名学生，各 年级分别有300、400、400、300、400、 300人，每一年级即为一个层次。 q共抽取600名。各年级的比例：14.28%、 19.05%、19.05%、14.28%、19.05%、 14.28% q从每一年级抽取一定单位数：85、115、115 、85、115、85 q再把这六个年级中抽取的单位总数加起来组成 样本。 q随机取样是先将总体各单位按一定的标 准分成许多群，然后随机从这些群中抽 出其二群作为样本。 q样本单位比较集中，适宜于某些特定的 研究。如教学实验要求以班为单位进行 研究，而不能打乱原有的教学单位。 整群随机取样法整群随机取样法 q如某校有40个班级，把每一个班当作 一个单位，用简单随机抽样法抽出6 个班，由这6个班的学生组成样本。 通过研究这6个班学生的某方面情况 来推论全校学生这方面的情况。 优点：易于组织，节省人力、物力和时间 。 不足：样本分布不均匀，代表性差，误差 因各群间差异较大而较大。 q先将总体各单位按一定标准分为若干群，作 为抽样的第一级单位，然后再按一定标准将 第一级单位分成若干子群，作为抽样的第二 级单位，如此类推，在各级单位中依照随机 原则抽取样本。 q即从总体中抽取样本的过程分成两个或两个 以上阶段的抽取方法。 多段随机取样法多段随机取样法 q如将全校分为6个年级第一级 q从6个第一级单位(年级)随机抽取3个单位 ，如初二、初三、高二； q抽取出来的每个第一级均分为若干个班级 -第二级，如初二10个班，初三8个班， 高二6个班。 q从初二4个班，初三3个班，高二2个班。 q以此类推。 q优点：简便易行，节省经费，在总体范 围大，单位多，情况复杂情况下，十分 有用。 q不足：抽样误差较大。 第四节第四节 测验法测验法 q一、测验法的含义和类型 q(一) 测验法的含义:是指借助各种测试题对人的 知识,技能和能力以及某些心理特征进行测量,从 而获得评价信息和资料的方法. ( (二二) ) 测验法的分类测验法的分类 q1.按照测验的性质分,可分为成就测验和心理测 验. q2.按照测验时机分