课程质量评价的选择策略

课程质量评价的选择策略之一课程效能评价摘要：运用“效能”思想对课程效度进行评估，同时也为课程评估提供了有关的新理念。为得到课程效能的真实情况，需要收集和分析不同类型“效能”评量指标，这些指标包括学生的学习发展现状、学生的学习能力基线、课程实施背景和情境信息、学校教育环境信息等。在研究课程效能的领域里比较常用的几种统计分析方法各有其优缺点。有关人员需了解“效能”评量方法的局限性，以做到有效使用。关键词：课程，效能评价，增值〔基金项目〕本文系教育部人文社会科学研究规划基金项目“高校工程实训课程效能评价研究与实践”（项目编号：10YJA880033）、“高等职业教育实践课程效能评价的研究与实践”（项目编号：09YJA880062）的研究成果之一。课程质量评价对当前课程的改革及未来发展有着强大的导向作用。但如何对课程质量进行有效评价一直是个难题。现行的课程评价多是围绕着学生的考试成绩、升学率等指标衡量课程的表现。这种评价“指标”和方法显然有失公允。因为单一的学生考试成绩并不能反映课程质量水平的高低，且不同学生背景和不同学校发展水平对课程质量有很大的影响。这一问题已被广泛的认识到，随着课程改革的进行，评价从关注学生学业的结果测评转为关注学生多方面发展的考量，如发展性评价、综合素质测评等。但这种评价多运用于对学生个体的测评，并未以此对学生发展整体水平做评估，更没有对影响学生发展的主要因素一课程做进一步的质量分析。从本质上说，这是一种教学评价，而非真实意义上的课程评价。此外，仅以学生表现的结果无法确切地阐述学校课程是如何提升与保持其所有学生的成就，或者如何有能力长期性地维持一定的水平。目前，许多国家与地区已把课程效能作为课程质量的评估依据，并为政府进行教育决策与制订教育政策提供数据来源⑴。由于其评价技术的复杂性和多样性，效能评价往往是由专门的评价机构来完成。课程效能评价在我国教育实践中还是较陌生的领域。探讨不同课程或学校课程间“效能”评量结果在地方或区域的差异，可以为政府部门实施课程监控和课程政策制定提供有价值的参考。一、对课程效能评价的认识课程效能评价是指在一定条件下，对课程给学生发展产生影响程度的价值判断。“一定条件”是指对课程实施的“投入”，包括学校的生源质量、教学设施、课程资源等指标。课程效能评价就是在关注课程“投入”条件下，对课程的真实影响效果进行评判，得出输出值，从而判断课程的输入与输出是否匹配，投入的预期效果与实际是否有差距。对效能的理解基于这样两种认识思想：“增值”思想和“净影响”思想。“增值”思想是从经济学的角度来理解，它提出以学生在学校里的进步来衡量绩效。增值就是学生学业在学习前与学习后对比时变化的部分⑵。增值评价不仅要考虑课程学习完学生的学习结果，还要分析学生学习前的学习基础。它可以较好地解决因起跑线不同带来的评价不公问题。“净影响”思想就是排除了学校课程以外的因素影响获得的“纯”课程影响。⑶它源于科尔曼（1966）的研究结论，学校课程对学生学业成绩影响是有限的。这种思想认为学生的发展是受多方面因素影响的，除课程教学因素外，还有社会、环境条件和家庭经济状况、父母的学识水平等因素。以“增值”思想理解课程效能评价对课程实施者比较公平，尤其对促进教育的均衡化发展有其独有的积极意义和现实价值，其经常采用的评价技术是功效系数法。但这种认识也有不足，就是忽视了其它因素对学生发展带来的影响。而“净影响”思想，强调对课程效能的评价应重在反映课程本身的表现效果。这种认识较为客观，但这种方法遇到的最大挑战就是影响学生进步发展的因素的复杂性和考量的准确性。目前，许多学者认为，两种思想的结合、互补是较为合理的，既要考虑学生的进步程度，也要对影响学生进步的课程因素进行分析，以此判断课程效能的高低。尽管这种理解在评价技术上较为复杂，但相对较合理一些。二、课程效能评价指标信息课程效能评价应选取哪些评价指标呢？课程对学生学习进步的影响是颇为复杂的过程，既要测量学生在一段时间之内的进步情形，还要收集影响学生进步的课程性信息和非课程性信息，包括学生的背景和相关的情境资料。因此，评测课程表现的“效能”时，需要四部分资料：学生已有和现有的发展水平，背景性因素和条件性因素，每一部分又包含若干指标。不同国家、地区的课程指标选取是不同的，测评重点也有差异。如美国的课程效能评价一般把学生的种族差异、文化背景作为一个重要的影响指标，而日本则把家长的受教育水平作为重要的影响因素。学生的现有发展水平学生的现有发展水平是课程效能评价的主要指标。该指标的设定应遵循课程目标，这就要对课程各目标含义有清晰的认识，并依此设计学生是否达成目标的评测工具。这里需要清楚的是，对学生水平的考察不是仅从学生个人的成绩来考察，还应从学生团队与组织层次上考察学生整体学习的状况。因为学生知识与技能的获得不仅仅靠他们自己，还在于跟其他同学的合作。课程效能的评估尤其应当关注学生作为团队一起学习、共同发展技能在团队与组织层次上获得的效能。澳大利亚的Sofo，Francesco就认为，应从学生个人、团队和组织这三个层次上考察课程效能［4］除此之外，测量学生发展程度的评估工具必须具备公正性和有充分的信度，应当保证在不同的地区对同一水平学生施测，能得出发展水平一致的结果，也就是测评工具不应当受外部环境干扰。同时，评估工具应具备很好的效度，尽量避免使用那些难以准确、真实地度量出课程给学生进步带来多大影响、并容易引起歧义的测评工具。如主观性试卷的评分可能就颇具争议性，最主要的原因是各个教师评判尺度不尽相同。因此，相对而言，这样的评分工具在课程效能评价中就显得不太适宜。学生的已有发展水平从“增值”的含义理解，课程效能评价信息之一应当包含学生在开始进入某门课程之前的学习能力水平的信息。这些已有学习能力水平信息成分和特质的要求条件应与学生的现有发展水平测评的成分和特质要求条件相同，既要能满足“效能”评价的目的，又要有很好的可信度和效度。由于课程的评价涉及的样本数量很大，为了使同一学生的学习基线和学习结果对应、统一，在收集信息时，可以给不同地区、学校、班级以及个人建立不同层级的识别代码，以便在统计不同层级群体或个体信息数据时进行分类、比较和分析。这不仅可以评测单一学生在某一课程学习水平的增长程度，也可以评测某学校的某一课程相对于其它课程的实施效果，或某学校、某地区该课程的整体实施效果与其它地区的课程效果的横向比较，以便发现产生效果水平不同的原因和对课程的质量进行跟踪监控。学生背景信息为了能够提供直接与学生在一段时间内之课程学习进步有关的情形，评估课程效能时，应尽可能地区分出那些非学校所能控制的各种背景、情境影响因素，尽管这种区分有一定的困难。我们可以把非学校场所施加的影响，如课外补习班、父母的需求、家庭经济的支持等划分为学生的背景因素。在课程评估中，排除这些影响，以找出单一课程对学生的学习进步施加的影响。如英国的一项研究结果显示，学生的背景特性，诸如家庭社会经济地位、性别、种族、所使用的母语和流动性等，对其学习进步有显著的影响。⑸研究发现，这些背景因素是从人的出生开始到整个受教育的过程对人施加影响，且有累积叠加效果。另一项研究结果亦支持这一结论，认为家庭教育资源对教育产出有显著影响。⑹在我国，这类影响因素的存在显的尤为突出。因此，在对学生发展影响因素的统计分析上，研究者就不能仅仅考量选择一项简单且直接的进步结果评量，还应将非学校所能控制的背景因素纳入分析考量之中。这样，则评量更准确、科学，但信息的收集、分析会很复杂、繁琐，因学生的背景因素和影响其发展进步的原因是千差万别、不尽相同的。但这一问题会随着统计样本数量的增多而得以解决，例如某个单一学生特殊背景状况信息可以在一个地区或一个学校众多学生背景数据统计中忽略不计。课程条件信息估测课程效能“表现”时，还应将“增值”的课程纯影响因素一课程条件信息纳入分析考量范围内。这些因素是学校可控制的，包括课程实施条件、师资水平、班级规模和课程活动场所以及课程的管理组织等。收集这些因素信息，文件资料及访谈的方法是不可缺少的。收集完的信息要经过量化处理。我们最终的目的就是寻找学生学习发展的水平状态与这些课程条件因素信息值的关系，以便对照比较，探讨和阐释造成课程效能差异的潜在原因。课程表现评量所需的资料可用单一届学生为信息收集样本，但要调查课程对学生影响的长期趋势或者课程的“增值”程度，必须至少收集连续三年的同一届学生的初始学习水平和其学习后的发展水平的评量。当然，相应地也要连续收集包括情境背景或课程条件状况等的相关资料信息。如何确保收集、量化的资料的真实性和精确性是课程评价研究面临的困难之一，也是资料收集过程中极为重要的一部分。若资料有错误或缺失，既不可能正确地解释分析结果，又不可能获得准确的“效能”评估值。这些相关的问题将在后面的“课程效能”评价的局限性中作进一步的探讨。为了确保资料收集的真实和精确，其中很重要的一个环节是，课程实施单位一一地区教育管理部门或学校愿意与评估单位合作提供可靠的资料和信息数据，并组织和协助促进学校从事课程自我评估与改进课程质量。三、数据的处理和分析课程效能评价的数据处理多依赖于统计技术建立统计模型。主要有四种技术方法：第一，典型相关分析。这种方法是通过典型相关因素建立自变量与因变量之间的线性关系模型［7］在课程评价中，一般设定课程因素为自变量，学生的现有成绩为因变量，建立两者的线性关系模型，并寻找两类相关变量的典型相关因素；然后计算出所要评估课程的发展水平与总体平均水平的差异，从而综合获得不同课程的效能度。第二，多元回归统计方法。多元回归分析是用来估计因变量实际值与应然值之间的残差值的标准统计技术。在课程效能评价中，一般将课程和学生背景因素作为自变量，将学生的发展水平作为唯一因变量，建立两者的回归方程。依据建立的回归方程，预测出学生应有的发展水平，即应然值，然后用学生的实际水平同用回归方程计算出的应然值进行比较，从而得