对于大学英语无提纲式写作测试的效度研究

1、    对于大学英语无提纲式写作测试的效度研究    宫雯雯摘 要：在测试学领域，对于效度与信度的关系问题一直研究不断。本文运用了效度和信度的理论，对大学英语无提纲式写作测试进行分析，以期对测试的设计有所贡献。关键词：效度 无提纲式写作测试 大学英语：h319 ：a ：1672-3791（2014）02（b）-0107-01效度、信度和可行性是语言测试学的三个基本问题。在测试学领域，人们经常会分析和讨论效度这一概念。它被看做衡量考试科学与否的重要标准。1 效度的定义及分类效度（validation）指测试的有效性，即测验分数能够代表所要测量的心理特性的程

2、度，或测验结果达到测验目的的程度，换言之，是一项测试对所要测验的特性测量到什么程度的估计。由于效度是相对于测试的研究目的和研究侧面而言的，具有多层面的特性，因此效度具有多种类型，但主要分为三类，即内容效度，效标关联效度，结构效度。内容效度是指测验项目对所要测量的内容范围的代表性程度。它是效度研究的重要问题，它决定了测试方法测试语言能力的程度。如果一项测试具有很高的内容效度，那么这项测试很有可能达到了测试目的，测量了它想要测量的内容。例如：一位教师给学生做一次英语测验，该测验的题目如果涵盖了教学所欲达成的目标，及教材的重要内容，就可以说该测验具有内容效度。目前尚没有一种数量的测量方法可以衡量测试

3、的内容效度，主要是采用逻辑的分析方法，仔细判断每一项目是否符合及涵盖所要测量的研究领域。效标关联效度是测验分数与外部效标之间的相关程度，又称准则关联效度。其中，效标表示独立于测验结果，反映测验目的的行为参照。根据选择效标的时间不同，可分为：同时效度和预测效度。如果当测量学生智力时，将学生当时的成绩作为效标，就代表其同时效度，故它表示测验分数与实施测验同一个时间所取得的效标之间的相关性，目的使用测验分数估计个人在效标方面的目前实际表现。而如果当测量学生智力时，将测量之后一段时间的学生成绩作为效标，即为预测效度，它是测验分数与实施测验后一段时间所取得效标之间的相关性，目的在于使用测验分数预测个人在

4、效标方面的未来表现。2 无提纲式写作测试在大学英语测试中的应用作为一种高效度的测试形式，长久以来写作测试被广泛应用于各种正规语言考试之中，尤其是在中国，写作是英语考试中固定的部分，比如：高考，大学英语考试和英语专业考试。大学英语四六级考试作为社会影响大，涉及面广的全国标准化考试，已有二十多年的历史，它一直在争议中不断的改革发展，然而，无论怎样变化，英语基础写作能力的考查一直占据着一席之地，且2005年改革后，写作测试被调整为答题顺序的第一部分，足见其举足轻重的地位。长期以来，写作部分的考查形式通常是指定一个命题，列出三点提纲式的要求，让学生在30分钟内完成一篇120字的作文。这种一成不变的考试

5、模式衍生了一系列应对的作文模板，模板大多用词精准，结构复杂，没有任何的语言错误，符合四六级高分作文的评分标准，并且模板中的字数会占到四级字数要求的1/31/2。如此一来，使得写作测试转变为对于英语文章背诵默写的测试，大大降低了写作测试的效度，违背了测试的初衷，此种写作测试一直沿用至2012.12的四级和2011.12的六级考试，在这两次考试当中，采取了无提纲式写作测试，改变了以往僵硬的考试形式，让学生毫无束缚地自由发挥想象力，从传统的固定写作测试模式中解脱出来。此后，在近两年的四六级考试中继续坚持了这种无提纲式写作测试。3 研究过程针对研究问题，此研究采取实证研究。该次无提纲式写作测试的研究方

6、法主要为写作测试，研究起止时间是2012年8月20日至2013年6月15日。研究对象为吉林某高校2012级体验英语中级班1、2两班，共计100名学生，把研究对象分为实验班级（eg）和对照班级（cg）。首先，在实验前同时为两个班级做一次前测，测试结果如下。通过前测，我们知道，两个班级最高分与最低分一致，平均分仅相差0.02。结果表明，在做实验前，实验班与对照班两组学生的写作能力基本为同一水平。此后，实验班级采取的是每两周一次的无提纲式写作测试，整个测试周期为一学年。每次收回写作试卷50份。测验满分根据大学英语四级写作部分的核算标准，为100分。评分教师三人均参加过全国四级考试的阅卷工作，每位学生

7、成绩取三位教师打分的平均值，作为最终成绩。在研究结束时，再次同时为实验班和对照班进行后测，测试结果如下。后测结果明显展示出，实验班的最低分比对照班高出7分，同时实验班的平均分比对照班平均分高6.16分。另外，为保证实验的有效性，所有得到的学生成绩作为研究所需的数据进行收集整理。4 结论一方面，前测结果的一致性说明无提纲式写作测试与以往的写作测试一样，可以如实反映学生的写作能力，因此它是具有很高的效度的。另一方面，后测结果显示出，通过对实验班长达一学年的无提纲式写作测试，学生的写作能力大大提高。在适应了无提纲式写作形式的同时，学生可以自己合理的安排文章结构，选择合适的词汇表达自己的意思。总而言之

8、，本次研究表明无提纲式写作测试是一种有效测试学生写作水平的方法，而且这种写作练习也可以提高学生写作水平。测试的目的是为了促进学生的学习，因此，我们的试题设计者应不断优化试题的设计。参考文献1 bachman，l.f. fundamental considerations in language testingm.oxford university press，1990.2 bachmann，l.f. and a.s. palmer.language testing in practicem.oxford： oxford university press，1996.3 hughes，a.test

9、ing for language teachersm.cambridge：cambridge university press，1989.4 蔡基刚.大学英语四，六级写作要求和评分标准对中国学生写作的影响j.解放军外国语学院学报，2002（5）.5 李筱菊，语言测试科学与艺术m.长沙：湖南教育出版社，1997.6 杨惠中，weir，c.大学英语四、六级考试效度研究m.上海：上海外语教育出版社，1998.endprint摘 要：在测试学领域，对于效度与信度的关系问题一直研究不断。本文运用了效度和信度的理论，对大学英语无提纲式写作测试进行分析，以期对测试的设计有所贡献。关键词：效度 无提纲式写作测

10、试 大学英语：h319 ：a ：1672-3791（2014）02（b）-0107-01效度、信度和可行性是语言测试学的三个基本问题。在测试学领域，人们经常会分析和讨论效度这一概念。它被看做衡量考试科学与否的重要标准。1 效度的定义及分类效度（validation）指测试的有效性，即测验分数能够代表所要测量的心理特性的程度，或测验结果达到测验目的的程度，换言之，是一项测试对所要测验的特性测量到什么程度的估计。由于效度是相对于测试的研究目的和研究侧面而言的，具有多层面的特性，因此效度具有多种类型，但主要分为三类，即内容效度，效标关联效度，结构效度。内容效度是指测验项目对所要测量的内容范围的代表性

11、程度。它是效度研究的重要问题，它决定了测试方法测试语言能力的程度。如果一项测试具有很高的内容效度，那么这项测试很有可能达到了测试目的，测量了它想要测量的内容。例如：一位教师给学生做一次英语测验，该测验的题目如果涵盖了教学所欲达成的目标，及教材的重要内容，就可以说该测验具有内容效度。目前尚没有一种数量的测量方法可以衡量测试的内容效度，主要是采用逻辑的分析方法，仔细判断每一项目是否符合及涵盖所要测量的研究领域。效标关联效度是测验分数与外部效标之间的相关程度，又称准则关联效度。其中，效标表示独立于测验结果，反映测验目的的行为参照。根据选择效标的时间不同，可分为：同时效度和预测效度。如果当测量学生智力

12、时，将学生当时的成绩作为效标，就代表其同时效度，故它表示测验分数与实施测验同一个时间所取得的效标之间的相关性，目的使用测验分数估计个人在效标方面的目前实际表现。而如果当测量学生智力时，将测量之后一段时间的学生成绩作为效标，即为预测效度，它是测验分数与实施测验后一段时间所取得效标之间的相关性，目的在于使用测验分数预测个人在效标方面的未来表现。2 无提纲式写作测试在大学英语测试中的应用作为一种高效度的测试形式，长久以来写作测试被广泛应用于各种正规语言考试之中，尤其是在中国，写作是英语考试中固定的部分，比如：高考，大学英语考试和英语专业考试。大学英语四六级考试作为社会影响大，涉及面广的全国标准化考试

13、，已有二十多年的历史，它一直在争议中不断的改革发展，然而，无论怎样变化，英语基础写作能力的考查一直占据着一席之地，且2005年改革后，写作测试被调整为答题顺序的第一部分，足见其举足轻重的地位。长期以来，写作部分的考查形式通常是指定一个命题，列出三点提纲式的要求，让学生在30分钟内完成一篇120字的作文。这种一成不变的考试模式衍生了一系列应对的作文模板，模板大多用词精准，结构复杂，没有任何的语言错误，符合四六级高分作文的评分标准，并且模板中的字数会占到四级字数要求的1/31/2。如此一来，使得写作测试转变为对于英语文章背诵默写的测试，大大降低了写作测试的效度，违背了测试的初衷，此种写作测试一直沿

14、用至2012.12的四级和2011.12的六级考试，在这两次考试当中，采取了无提纲式写作测试，改变了以往僵硬的考试形式，让学生毫无束缚地自由发挥想象力，从传统的固定写作测试模式中解脱出来。此后，在近两年的四六级考试中继续坚持了这种无提纲式写作测试。3 研究过程针对研究问题，此研究采取实证研究。该次无提纲式写作测试的研究方法主要为写作测试，研究起止时间是2012年8月20日至2013年6月15日。研究对象为吉林某高校2012级体验英语中级班1、2两班，共计100名学生，把研究对象分为实验班级（eg）和对照班级（cg）。首先，在实验前同时为两个班级做一次前测，测试结果如下。通过前测，我们知道，两个

15、班级最高分与最低分一致，平均分仅相差0.02。结果表明，在做实验前，实验班与对照班两组学生的写作能力基本为同一水平。此后，实验班级采取的是每两周一次的无提纲式写作测试，整个测试周期为一学年。每次收回写作试卷50份。测验满分根据大学英语四级写作部分的核算标准，为100分。评分教师三人均参加过全国四级考试的阅卷工作，每位学生成绩取三位教师打分的平均值，作为最终成绩。在研究结束时，再次同时为实验班和对照班进行后测，测试结果如下。后测结果明显展示出，实验班的最低分比对照班高出7分，同时实验班的平均分比对照班平均分高6.16分。另外，为保证实验的有效性，所有得到的学生成绩作为研究所需的数据进行收集整理。

16、4 结论一方面，前测结果的一致性说明无提纲式写作测试与以往的写作测试一样，可以如实反映学生的写作能力，因此它是具有很高的效度的。另一方面，后测结果显示出，通过对实验班长达一学年的无提纲式写作测试，学生的写作能力大大提高。在适应了无提纲式写作形式的同时，学生可以自己合理的安排文章结构，选择合适的词汇表达自己的意思。总而言之，本次研究表明无提纲式写作测试是一种有效测试学生写作水平的方法，而且这种写作练习也可以提高学生写作水平。测试的目的是为了促进学生的学习，因此，我们的试题设计者应不断优化试题的设计。参考文献1 bachman，l.f. fundamental considerations in

17、language testingm.oxford university press，1990.2 bachmann，l.f. and a.s. palmer.language testing in practicem.oxford： oxford university press，1996.3 hughes，a.testing for language teachersm.cambridge：cambridge university press，1989.4 蔡基刚.大学英语四，六级写作要求和评分标准对中国学生写作的影响j.解放军外国语学院学报，2002（5）.5 李筱菊，语言测试科学与艺术m

18、.长沙：湖南教育出版社，1997.6 杨惠中，weir，c.大学英语四、六级考试效度研究m.上海：上海外语教育出版社，1998.endprint摘 要：在测试学领域，对于效度与信度的关系问题一直研究不断。本文运用了效度和信度的理论，对大学英语无提纲式写作测试进行分析，以期对测试的设计有所贡献。关键词：效度 无提纲式写作测试 大学英语：h319 ：a ：1672-3791（2014）02（b）-0107-01效度、信度和可行性是语言测试学的三个基本问题。在测试学领域，人们经常会分析和讨论效度这一概念。它被看做衡量考试科学与否的重要标准。1 效度的定义及分类效度（validation）指测试的有效

19、性，即测验分数能够代表所要测量的心理特性的程度，或测验结果达到测验目的的程度，换言之，是一项测试对所要测验的特性测量到什么程度的估计。由于效度是相对于测试的研究目的和研究侧面而言的，具有多层面的特性，因此效度具有多种类型，但主要分为三类，即内容效度，效标关联效度，结构效度。内容效度是指测验项目对所要测量的内容范围的代表性程度。它是效度研究的重要问题，它决定了测试方法测试语言能力的程度。如果一项测试具有很高的内容效度，那么这项测试很有可能达到了测试目的，测量了它想要测量的内容。例如：一位教师给学生做一次英语测验，该测验的题目如果涵盖了教学所欲达成的目标，及教材的重要内容，就可以说该测验具有内容效

20、度。目前尚没有一种数量的测量方法可以衡量测试的内容效度，主要是采用逻辑的分析方法，仔细判断每一项目是否符合及涵盖所要测量的研究领域。效标关联效度是测验分数与外部效标之间的相关程度，又称准则关联效度。其中，效标表示独立于测验结果，反映测验目的的行为参照。根据选择效标的时间不同，可分为：同时效度和预测效度。如果当测量学生智力时，将学生当时的成绩作为效标，就代表其同时效度，故它表示测验分数与实施测验同一个时间所取得的效标之间的相关性，目的使用测验分数估计个人在效标方面的目前实际表现。而如果当测量学生智力时，将测量之后一段时间的学生成绩作为效标，即为预测效度，它是测验分数与实施测验后一段时间所取得效标

21、之间的相关性，目的在于使用测验分数预测个人在效标方面的未来表现。2 无提纲式写作测试在大学英语测试中的应用作为一种高效度的测试形式，长久以来写作测试被广泛应用于各种正规语言考试之中，尤其是在中国，写作是英语考试中固定的部分，比如：高考，大学英语考试和英语专业考试。大学英语四六级考试作为社会影响大，涉及面广的全国标准化考试，已有二十多年的历史，它一直在争议中不断的改革发展，然而，无论怎样变化，英语基础写作能力的考查一直占据着一席之地，且2005年改革后，写作测试被调整为答题顺序的第一部分，足见其举足轻重的地位。长期以来，写作部分的考查形式通常是指定一个命题，列出三点提纲式的要求，让学生在30分钟

22、内完成一篇120字的作文。这种一成不变的考试模式衍生了一系列应对的作文模板，模板大多用词精准，结构复杂，没有任何的语言错误，符合四六级高分作文的评分标准，并且模板中的字数会占到四级字数要求的1/31/2。如此一来，使得写作测试转变为对于英语文章背诵默写的测试，大大降低了写作测试的效度，违背了测试的初衷，此种写作测试一直沿用至2012.12的四级和2011.12的六级考试，在这两次考试当中，采取了无提纲式写作测试，改变了以往僵硬的考试形式，让学生毫无束缚地自由发挥想象力，从传统的固定写作测试模式中解脱出来。此后，在近两年的四六级考试中继续坚持了这种无提纲式写作测试。3 研究过程针对研究问题，此研

23、究采取实证研究。该次无提纲式写作测试的研究方法主要为写作测试，研究起止时间是2012年8月20日至2013年6月15日。研究对象为吉林某高校2012级体验英语中级班1、2两班，共计100名学生，把研究对象分为实验班级（eg）和对照班级（cg）。首先，在实验前同时为两个班级做一次前测，测试结果如下。通过前测，我们知道，两个班级最高分与最低分一致，平均分仅相差0.02。结果表明，在做实验前，实验班与对照班两组学生的写作能力基本为同一水平。此后，实验班级采取的是每两周一次的无提纲式写作测试，整个测试周期为一学年。每次收回写作试卷50份。测验满分根据大学英语四级写作部分的核算标准，为100分。评分教师三人均参加过全国四级考试的阅卷工作，每位学生成绩取三位教师打分的平均值，作为最终成绩。在研究结束时，再次同时为实验班和对照班进行后测，测试结果