语言测试中构念效度的影响因素研究获奖科研报告论文

语言测试中构念效度的影响因素研究获奖科研报告论文【关键词】效度构念效度语言测试

【基金项目】2015年黑龙江大学研究生创新科研项目，“基于社会建构主义理论的本科翻译专业教学模式研究”项目编号：YJSCX2016-012HLJU，本项目由“黑龙江省外语教育学术交流研究基地”资助。

1G641A12095-308908-0025-02

1.引言

语言测试是检验应试者语言水平的重要手段。效度指测试是否考查了设计者想要考查的内容，或者说在多大程度上考查了想要考查的内容，效度的高低是衡量语言测试最重要的指标，它是语言测试的基本出发点。什么是构念效度？影响构念效度最常见的因素有哪些？

2.构念效度及影响因素

2.1构念效度

在教育测量领域，内容效度、准则关联效度和构念效度这三种类型效度都是作为整体构念效度的不同方面。语言测试者认为这种把构念效度作为整体观点是一种新的发展。理论界对构念（construct）的定义有不同的看法，因此，通过识别他们是如何解释应答一致性来定义构念（Messick1981）。Loevinger（1957：636）最早提出要把构念效度作为整体效度来看待。在80年代，这一观点逐渐得到人们的认同：构念效度不再作为效度的一种证据，而应包括内容和标准证据、信度及其它与理论验证有关的方法（Messick1989；Anastasi1986）。一些测量学家主张把构念效度作为惟一的效度概念（Cronbach1988；Anastasi1988；Messick1988，1989）。

2.2影响因素

根据Brown（1996：188-192）指出影响信度的五种类别问题是由于测试环境、管理程序、考生、评分过程和测试结构造成的。造成效度问题的因素是可能是由于缺乏项目数量、项目编写、对测试的引导、项目分析过程、可靠性研究以及效度分析等造成。

影响构念效度的因素有很多，主要分为“构念代表不足”（constructunder-representation）和“构念无关方差”（constructirrelevantvariance）两类。在教育领域中进行评估的时候，我们总是会考虑到真实性（authenticity）和直接性（directness），因为它们对教与学产生积极的效果（ResnickandResnick，1991）。同样，真实性和直接性也构成了效度的两个标准（Messick，1996：243）。在对真实性进行测量的时候最重要的是一定要考虑到构念的评估（Messick，1994），这是最小构念代表不足的效度标准。然而，尽管真实性暗示了最小构念代表不足，但是确是不可观测的。直接性评估涉及的往往是开放式任务，这样做的目的也是使应试者行为不受限制，这个就与构念无关方差相关。因此，再考虑到直接性的测量问题时就是不要加上任何不相关因素或是污染了构念评估（Messick，1994）。构念代表不足体现在是否对测试真实性构成威胁，而构念无关方差体现在对测试直接性的威胁。

构念代表不足指测量指操作或测量方式未能涵盖该构念的全部层面，即不能代表构念所包含的某些种类的内容、所负载的某些心理过程，或者是排除了应有的某些方式的反应（Messick，1989、1995），因而会对测试分数的解释会产生不良影响。某一测试如果构念体现不足，那么该测试就没有涵盖相关构念的若干重要方面，也可以说构念体现的范围太窄了。构念无关方差指测试包含与拟测构念无关的、额外并且相对稳定的因素。此时，测试的构念比拟测的构念更宽泛，因为测试己经包括了其他构念或者测量方法因素的影响，测试分数可能受到这些因素的影响而在某种程度上系统地波动。与拟测构念无关的因素会导致测试构念无效，成为测量偏差的主要来源。这会影响到对考试分数的解释，会对测试的构念效度产生负面影响。这两方面在所有的评估中都是存在的。然而，在测试的效度中，最重要的问题就是要搜集足够多的有说服力的证据来反驳对效度构成威胁的两个因素。

3.结语