文本翻译测试命题与评分的效度及信度探讨

1、文本翻译测试命题与评分的效度及信度 探讨尹姣广州科技职业技术学院摘要：文本翻译测试是口前许多学校采用的一种翻译测试题型。作为一种主观测试题型, 这种测试题型在命题及评分方而存在着一些问题，而这些问题影响了其测试的 效度和信度。为了提高文本翻译测试的质量，使其达到测试目的，该论文首先界 定了文木翻译测试，并对测试的效度与信度进行了解释，最后在文木翻译测试 的命题及评分方面探讨了其效度与信度，并在此基础上提岀了一些建议。关键词：文本翻译;效度;信度;作者简介：尹姣(1974-),女，湖南衡阳人，广州科技职业技术学院外语外贸 学院，讲师，硕士。研究方向：翻译理论与教学。收稿日期:2017-03-02

2、基金：广东省教育研究院教育研究课题之一的以翻译能力为导向的高职商务英 语教学实践研究；课题主持人:尹姣，项目编号:cdjy-2014-b-bllodiscussion on reliability and validity of textural translation's design and ratingyin jiaoguangzhou vocational college of science andtechnology;abstract：as a subjective testing form, textual translation is still the main fo

3、rm of translation testing in most universities and colleges. however, there are some problems in its design and rati ng, which has affected its reliability and validity. this paper defines textual translation, reliability and validity, discusses the reliability and validity of textual translation&qu

4、ot; s designing and rating and proposes some advices to improve the current situation of textual translation.keyword：textual transittion; rcliab订ity; validity;received： 2017-03-02 测试是教学的重要环节，是检查教学成效、促进教学改革的重要手段。随着对翻 译教学及其测试的研究，应用于翻译测试的题型越来越多，如选择、填空、问答 等客观性翻译测试题型和段落翻译及文本翻译等主观性翻译测试题型。客观性测 试题型答案一致，评卷人不

5、需要做专业判断或是根据具体情况通过分析來判分， 只需按照所给的标准答案记录成绩；主观性测试题型答案不一致，评卷人在评分 过程中需要凭借自己的专业知识和专业能力对试卷进行主观判断并给予判分。目 前，在翻译测试中，这些客观性测试题型中有很多都还在摸索之中，使用的范 围较少，因此，很多学校及教师还是主要采用主观性的测试题型一一文本翻译。一、文本翻译测试文本(text),是指书面语言的表现形式，从文学角度说，通常是具有完整、系 统含义的一个句子或多个句子的组合。可见文木所传递的是一个完整的信息，所 反映的概念或命题都具有连贯性。本文的文本翻译测试是指基于这种文本的翻 译。它不同于单句翻译，它拥有语境，

6、学生在上下文的帮助下，能比较准确地掌 握原文的中心思想，理解原文，翻译时不至于错译、漏译，表达时也有比较宽松 的余地将译文翻译得更通顺易懂。文木翻译测试是一种主观性测试题型，它的设计过程是主观的，由命题者对语 言、语言能力、语言教学和学习等的认识所决定的。这种测试形式需要学生做到 以下几个方而 (-)根据文体、主题和语境的不同分析并理解原文;(二) 准确、忠实地传达原文所表达的信息；(三) 了解英汉两种语言的不同;（四）掌握基本的翻译理论与方法，并通过这些理论与方法来达到翻译目的。可 见，这种测试考查了学牛的双语能力（包括英汉阅读能力、理解能力、表达能力 和转换能力等）、文化素质（包括文体知识

7、与文化知识）、专业知识、翻译理论 与技巧知识、翻译思维能力（如何运用理论与技巧达到翻译冃的）等，它需要学 生尽可能完整准确地表达原文所表达的思想内容，传达原文所传达的信息，是 翻译测试中难度最大，最具特色的一种测试题型，能综合有效地测试学生的翻 译能力。二、文本翻译测试命题的效度分析及建议命题是确保测试质量的起始环节。作为主观性测试题型，文本翻译测试命题容易, 不需要花太多的时间和人力，学生在考的时候很难靠猜测得分。这种测试题型在 最大程度上与学生在现实生活中所接受的翻译任务相吻合，最容易测试出学生 的实际翻译能力。但是这种命题方式也有些不足之处，如：由于出题容易，选材 随易性大，命题人如果不

8、仔细研究考试大纲或考试目的，或不熟悉学生的英语 水平，就很难保证测试的有效性;这种测试的试题数量少，所考查的内容对涉及 需要检查的翻译知识、内容和技能来讲覆盖面较窄。这些问题降低了文本翻译测 试的效度和信度。效度和信度是衡量语言测试质量及确保其公平、公正使用的主要指标。测试的效 度一般是指测试是否达到了它预定的目的并考查了原定需要考查的内容，考试 的结果能不能用來评判预定要测试的语言能力。根据测试的不同r的，测试效度 可以分成结构效度、表面效度、内容效度等不同的概念。结构效度是从理论上来讲是回答测试了哪些能力和是否测试了应测试的能力。杨 惠中曾在分析大学英语四六级考试的结构效度时强调其可以从两

9、个方面来进行 研究:一个是在测试后用实验证据来证明这场考试究竟考了什么语言能力、为什 么考了这些语言能力；另一个是在考试前事先设定一定的理论基础，从正面提出 这场测试需要检测的能力的根据。翻译测试的主要冃的是考查学生的翻译能力。 但是何为翻译能力?许多学者对翻译能力这一概念进行了界定、分析和探讨后， 都认为翻译能力是由多种能力组成，这些能力包含语言能力、文化能力、翻译知 识与技巧、转换能力等。这些能力正是文本翻译测试对学生进行考查的内容。表面效度和内容效度是从内容上来检查测试的效度的。表面效度是指测试应达到 的卷面标准，即一套测试题从表面看来是否合适。内容效度是检测考试内容是否 反映了考试目的

10、，是否能够达到预期考查结果。学校和教师对学生进行翻译测试 主要目的有两个，一是根据教学大纲和教学材料考查学牛经过一段时间的教学 后教师的教学效果和学生的学习成效，其内容具有一定的选择性和规范性;二是 通过测试检验出学生的实践翻译能力。可见学校或教师采用文本翻译测试作为检 查学生翻译能力的手段，其中一个目的就是想要检查学生经过一段时间学习后 的学习效果，其测试的内容应该按照特定翻译教学内容和被测学生的实际翻译 能力来定，有一定的规约性，而不是随意的选取内容。但是，有些教师在选材时 只是随意地挑选一些文章或从一些文章中随意地选取几段作为测试的内容，这 是不妥当的。首先，学生可能不熟悉测试的内容。如

11、果学生连原文内容都难以理 解，就不可能指望他能译成合格的目标语;其次，测试内容选材的生词量没有从 应试者的角度来估计，如果新词过多，测试时又不允许查阅词典或参考资料， 势必影响学生的测试;再者，文本翻译测试选择的测试内容是一篇文章中的几段, 而没上下文，这种不详的语境不利于学生对原文的理解，也不利于学生的翻译， 影响了学生的发挥水平。因此，选材不合适的文本翻译测试表面效度和内容效度 不尽人意。但是何为“合适” ？所谓合适，不但是指题材、体裁、难易度、长度，而且要求 文章有一定的信息量和足够的题眼。所谓的信息量和题眼又具体指的是什么？邵 志洪在论及汉英翻译时指出，“衡量汉译英考题优劣的标准，应该

12、是看该语篇 是否在翻译实践中能较集中反映汉英语言在语义、句法、语用、修辞在内的各个 层面的差异。”可见，文木翻译命题的过程应当注意以下几个问题：（-）在测试的材料方面，试题设计者应尽量兼顾社会需要，提高测试的真实 性。外语类的学生毕业后大多进行应用文翻译，其内容也是偏向商贸、科技、金 融、法律等方面。所以在测试屮，综合考虑了教师的教学内容、考生背景和社会 及企业的需求后，在测试材料上应选择与学生专业背景相关的文献或是与政治、 经济、科技等实用性文体，使得翻译测试材料具有时代特征。（二）测试的材料应是一篇语意完整的文木，且文木的字数、句式复杂性和学牛 的翻译速度等方面针对学生的专业背景和翻译能力

13、明确地分成初级、中级、高级 三个等级；（三）篇章选取时句法结构应保证多样性且材料中新词应以应试者的身份加以估 计，不能太多。三、文本翻译测试评分的信度分析及建议在文本翻译测试屮，评分是一大难以解决的问题。尽管评卷时会提供给老师评分 标准，但由于学生的阅读能力、理解能力和翻译能力不同，翻译答案五花八门， 尺度很难把握。刘润清、韩宝成曾在语言测试和它的方法中强调可以参照作 文的评分方法对文木翻译的测试题进行评分，同时他们还在此书中介绍了目前 在作文评分方法方面主要有机械法、印象法和机械法三种形式。穆雷在翻译测 试及其评分问题中强调国内的翻译教师在评分时主要用印象法和机械法两种方 法，但也有的老师在

14、评分时将机械法和分析法结合起来。以上各种评分方法中， 教师采用什么方法来评分，如何给分都是由教师根据自己的经验和主观意识随 意决定，并没有一个量化的概念。可见，文木翻译测试的评卷成绩不可避免地会 受到人为因素的干扰，造成其真实能力与测试成绩之间具有误差，严重地影响 了测试的信度。信度是指测试结果是否稳定可靠。它包含着两个方面:试题本身的可靠性和评分 的可靠性。评分的可靠性反映测试信度中的一个检测方面一一阅卷信度。阅卷信 度具有两层意义:不同的评卷人阅卷，所得的分数大致相同；同一个评卷人在不 同的吋间阅卷，分数也大致相同。作为一种主观试题，文本翻译测试的评分可靠性如何得到保障?有人建议在评卷 前

15、先给评卷人一份评分标准。评分标准确实是提高文本翻译测试信度的一个有效 手段，但并不是每一份评分标准都能达到此目的。如果提供的是一份笼统、含糊 的评分标准，评分过程中评卷老师仍需凭借自己的经验来评分。因此，要使评分 标准在评分过程中能真正发挥其作用，保障评分的可靠性，木文认为评分标准 应该详细、客观口细致;其内容需包含：(-)评分的总标准；(-)测试所考查的翻译能力、翻译技巧、语言知识的详细说明以及如果考生在 测试中没有达到要求的分值给予情况的详细说明；(三)对文木中的每句话以及可能产牛的错误进行具体分析，并将错误类型分成 不同等级，根据试卷中所出现的错误的不同等级和数量给予不同的分值的详细 说明。u1作为一种主观性的测试题型，文本翻译测试尽管在命题及评分方面仍有许多不 足之处，并影响了其测试的信度和效度。但是，随着人们的深入研究，文木翻译 测试在命题和评分方面的信度和效度会越來越高，测试的质量也将越