【毕业学位论文】（Word原稿）本研究旨在研究发展适用于企业甄选人才过程中，审核求职者英语能力的适性测验整合流程概念模式，并探讨求职者的电脑受测态度-義守大學资讯管理研究所

1 目 录 录 . 1 图目录 . 2 表目录 . 5 第一章 绪论 . 7 第一节 研究背景与动机 . 7 第二节 研究目的 . 8 第三节 研究重要性 . 9 第四节 研究步骤与流程 . 9 第二章 文献探讨 . 13 第一节 英语能力检定方式之探讨 . 13 第二节 测验方式与题库之探讨 . 16 第三节 电脑适性测验理论相关之探讨 . 18 第四节 电脑测验方式态度 . 23 第三章 研究架构与设计 . 25 第一节 研究问题与方法 . 25 第二节 研究架构 . 26 第三节 适性测验整合流程建置 . 27 第四节 雏型系统验证之实验设计 . 31 第四章 英语线上测验雏型系统建置 . 35 第一节 系统问题定义与设计原则 . 35 第二节 系统分析与设计 . 36 第三节 系统实作 . 39 第四节 系统功能介绍 . 44 第五章 资料分析与讨论 . 57 第一节 雏型系统预试结果 . 57 第二节 实务应用上之可行性验证之资料分析 . 59 2 第三节 电脑测验态度之资料分析 . 67 第六章 结论与建议 . 71 第一节 综合结论 . 71 第二节 企业实务应用上之讨论 . 72 第三节 具体贡献 . 72 第四节 后续实务应用与研究之建议 . 74 参考文献 . 75 附录一 实验操作说明书 . 79 附录二 电脑测验态度问卷 . 90 图目录 1究流程图 . 13 图 3究架构 . 26 图 3统架构模式 . 28 图 3性测验子系统运作 . 29 图 3性测验整合流程 (以单一题型为例 ) . 30 3 图 4统架构 . 37 图 4料库关连图 . 41 图 4增试题功能画面之一 . 45 图 4增试题功能画面之二 . 46 图 4题输入预览画面 . 46 图 4题浏览功能画面 . 47 图 4题修正功能画面 . 48 图 4除试题浏览功能画面 . 49 图 4除试题功能画面 . 49 图 4职者成绩管理功能画面 . 50 图 4增公告消息画面 . 51 图 4性测验试卷选单画面 . 52 图 4性测验文法题进行画面 . 53 图 4一等级评语画面 . 53 图 4验诊断结果评语画面 . 54 图 4性测验听力题进行画面之一 . 55 图 4性测验听力题进行画面之二 . 55 4 . 56 图 4性测验阅读题进行画面之一 . 56 图 4性测验阅读题进行画面之二 . 56 5 表目录 2内英语检定比较表 . 15 表 2性模式应用比较表 . 23 表 2脑态度定义 . 24 表 4验终止题数模拟表 . 39 表 4料表 . 42 表 4料表 . 42 表 4料表 . 42 表 4料表 . 43 表 4料表 . 43 表 4料表 . 44 6 表 4料表 . 44 表 5试者测验答题过程 . 58 表 5福成绩群组区隔表 . 60 表 5验之阅读成绩独立样本 T 检定 . 60 表 5验之听力成绩独立样本 T 检定 . 61 表 5验之文法成绩独立样本 T 检定 . 61 表 5验之阅读成绩独立样本 T 检定 . 62 表 5验之听力成绩独立样本 T 检定 . 62 表 5验之文法成绩独立样本 T 检定 . 63 表 5读群组与网路测验试题困难度构面平均分数 之交叉分析 . 64 表 5读 群组与情绪因素构面平均分数之交叉分析 . 64 表 5读群组与网路测验喜好信任度构面平均分数 之交叉分析 . 65 表 5读群组与系统介面接受度构面平均分数之交 叉分析 . 65 表 5力群组与网路测验试题困难度构面平均分数 之交叉分析 . 66 表 5力群组与情绪因素构面平均分数之交叉分析 . 66 表 5力群组与网路测验喜好信任度构面平均分数 之交叉分析 . 66 表 5力群组与系统介面接受度构面平均分数之交 叉分析 . 67 表 5本背景分配表 . 68 表 5脑测验态度问项分析 表 . 69 表 5脑测验态度构面分析表 . 70 7 第一章 绪论 第一节 研究背景与动机 2002 年初，台湾加入世界贸易组织 (成为该组织的正式成员之一，促成国内企业与外国企业更频繁之贸易关系与接触，而英语为国际通用之主要语言，故其重要性 更为提高。根据国内 业情报于2002 年对于国内职场英语能力需求大调查，发现具备英语能力是欲追求国际化企业的征才第一条件，此人才也为企业所喜爱，虽然英语能力不是求职的万灵丹与唯一关键，但没有较优秀之英语能力则会降低个人的就业升迁竞争能力。同样地，企业若欲具备高企业竞争力，除需聘用拥有具专业技能之人才外，对于员工之英语能力亦不容忽视 (2002)。 国内企业审核工作应征者英语能力的方式，常以企业自行举办传统测验进行审核或要求应征者自行提出全民英检、托福等具体之证明成绩文件；无特别 要求成绩证明的企业，大多以传统测验方式，进行审核求职者的英语能力，然而此方式需耗数名人力参与编制试题、印制与批阅试卷，亦消耗许多纸张资源，此外；求职者无法立即得知考试结果，从制卷到公布测验成绩之过程冗长，亦耗费企业 8 本身之人力与时间成本资源。除此之外，企业招募新进人员的需求是随时可能发生的，一符合企业所需专业能力的求职者，亦可能仅因未能及时取得或提供英语能力检定证明，而无法参加甄选或被企业所错失，此将造成双方之损失。 国内现行较著名的英语检定测验有全民英检 (多益 (托福检定 (其中 验以电脑适性化方式进行， 绩主要用于申请出国留学之参考，但有些企业亦以此成绩参考是否聘用求职者。此外， 实际的测验日期、场次及测验地点由台湾的承办单位依据报名考试的人数多寡决定开放 (财团法人语言训练测验中心， 2002)。 在电脑与网路发达的二十一世纪， 由于资讯科技与网际网路的快速发展， 电脑已改变人类生活的方式，对于教育与测验环境亦有很大的改变，测验的 多媒体电脑上，已经可以让试题以互动的方式呈现，而电脑适性测验依照不同 考生的特质出题，在教育界之研究与应用已多年，但却甚少有电脑适性测验具体的企业实务应用研究相关议题。此外，以不同于传统测验方式进行审核时，求职者对于利用电脑为测验工具进行考试的接受程度如何呢 ?是否能适应此测验方式之改变 ?对于该系统的信任度又是如何呢 ?这些议题都是本研究想要加以探讨研究的。 综合以上所述，本研究探讨如何使企业人资部门以方便、有效的方式，进行审定求职者之英语能力，并利用资讯科技之特性，实际设计一协助企业征才的概念模式，探讨企业是否可以利用此概念模式评估应征者英语能力之可行性，以期减少企业员工因征才 而耗费众多人力编制试卷、使求职与求才者立即得知测验结果并减少纸张资源等成本，并且利用问卷探讨 受试者对于电脑测验方式的情绪反应、接受度与信任度之高低 ，期望弥补或检验上述测验方式的结果。 第二节 研究目的 本研究旨在研究发展适用于企业甄选人才过程中，审核求职者英语能力的适性测验整合流程概念模式，并探讨求职者的电脑受测态度。本研究的目的条列如 9 下： (一 ) 探讨与提出一多媒体线上适性测验系统概念模式，作为企业甄选的 (二 ) 设计与实作适性化的英语适性化测验系统，藉由 证此 系统评量之效能。 (三 ) 探讨了解考生以不同于传统纸笔测验的电脑方式进行测验时，所抱持的态度。 第三节 研究重要性 本研究是以适性测验模式为基础，设计一协助企业及时审定求职者英语能力之适性测验雏型系统，其主要的重要性有下列两点： 一、 缺乏适性模式于企业实务应用之理论研究： 随着资讯科技的日益发达，我们的日常生活与电脑习习相关，由国内外相关文献探讨得知，目前教育界上有许多结合适性模式与电脑开发而成的适性测验系统之相关研究，但却甚少有电脑适性测验应用于企业实务之相关研究。因此，适性测验模式该如何应用于企业实 务之相关学理探讨是值得研究的议题。 二、 缺乏企业征才相关之 近来企业内部资讯系统相继导入 省许多人力与时间资本，但企业征才之审核求职者能力的流程，仍有许多企业以传统的方式进行。电脑适性测验于教育界之应用已行之多年，在企业 渐流行的大环境下，应规划发展一可应用于企业的 为企业微才 企业人力资本的累积更有成效。 第四节 研究步骤与流程 本论文研究过程，首先搜集相关文献进行探讨，分析出应用于企业招募英才 10 情境的英语科电脑适性测验系统之概念性架构与功能，再具 体设计开发此一雏型系统。最后，实际施测于大四应届毕业生与国内企业界现职人员，同时发予每位考生一份问卷，待进行完系统测验后填答，以进行系统评估及态度探讨。本研究计划之研究流程如图 1阶段之进行内容叙述如下： (一 ) 拟定研究方向与文献搜集探讨： 依研究目的之需，研究者利用网际网路的全国博硕士论文、国内大学之图书馆、 国教育资源资料库、 国内外网站，进行资料查询搜集关于电脑态度、电脑适性测验模式之理论及现行国内英语能力检定(领域之相关国内外文献资料进 行探讨分析，藉此了解国内外对于电脑适性测验模式的研究现况与现行国内英语能力检定之方式及内容。 (二 ) 订定研究主题、范围与步骤： 对于文献探讨有初步整理后，研究者请指导教授及相关领域之教授共同讨论，以订定明确之研究范围、主题及步骤。之后，仍将持续进行相关文献之搜集与探讨，以求研究过程的完整性。 (三 ) 概念模式建立： 研究范围与主题订定后，研究者将 性模式之相关文献进行分析探讨，拟分析找出其优缺点，并设计基于 式并结合 理论精神，提出一可应用于企业征才的英语科多媒体电脑适性测验 系统概念模式，以动态判定求职者英语能力的精熟等级。 (四 ) 系统需求与架构设计： 基于上述之概念模式，设计开发一雏型系统，由于此系统属互动性系统，因此需具备人性化的介面，方便使用者操作，保持系统使用性 (为达建置此系统的目标，开发过程研究者邀请使用者参与设计。在开发完成初版的系统后，立即进行系统预试并与使用者进行沟通，并根据其给予之回馈，进行系统之修正，藉此保持系统使用性，符合使用者需求，减少因操作的不便，影响测验 11 成绩。 (五 ) 试题搜集拟定： 建立题库及试题选择方面，研究者探讨目前国 内之相关英语检定方式，如：测验方式。同时，与义守大学执行教育部提升大学基础教育之四年计划 (计划名称：电脑多媒体语言学习中心之建立；计划编号： 同主持人研讨，以拟定欲搜集之试题题型与内容。 (六 ) 系统开发实作： 依据上述概念模式建立、系统需求与架构设计、试题搜集步骤之结果，进行雏型系统建置工作，并实作出多媒体线上适性测验雏系统，功能包含系统使用者管理、电脑化题库管理、测验设定管理与适性测验环境等。 (七 )系统施测： 根据本研究提出之概念模式所建构之雏型系统， 此概念模式乃透过文献探讨归纳后，推导所建立；因此本研究经由曾参与过 证验此雏型测验系统，并发予一份问卷，以探讨考生对于电脑测验之态度。 (八 ) 资料分析与讨论： 此阶段乃搜集考生测验成绩与问卷回馈的资料，综合以上搜集之资料，进行相关的统计分析工作，以评估考生态度与系统效能，并拟与指导教授进行讨论。 (九 ) 归纳结论与建议： 根据实验者参与本系统之测验所得资料分析与讨论的结果，将汇整归纳具体的结论与讨论，提供未来有兴趣进行此相关议题之研究者参考。 (十 ) 研究论文撰写： 研究者 进行完本研究之文献探讨、系统开发及系统评估流程，依统计分析之结果，着手撰写研究过程所发现结论，并具体提出建议，提供未来进行此相关研究之参考与未来研究之方向。 12 (三 ) 概念模式建立 (二 ) 订定研究主题 ,范围及步骤 (一 ) 拟定研究方向与搜集探讨相关文献 (五 ) 试题搜集 (七 ) 系统施测 (八 )资料分析与讨论 (九 )归纳结论与建议 (四 ) 系统需求及架构设计 (六 ) 系统开发实作 13 图 1究流程图 第二章 文献探讨 依研究目的之需，研究者从全国博硕士论文、国内大学之图书馆、 国教育资源资料库、及 国内外网站，进行查询与搜集相关资料之探讨分析，藉此做为开发雏型系统与问卷调查研究的理论架构依据。本章将从三个部份进行相关文献的探讨，第一节探讨 英语 能力检定方式之探讨 、第二节探讨 测验方式与题库之探讨 、及第三节探讨 电脑适性测验理论相关之探讨 。 第一节 英语能力检定方式之探讨 (一 ) 国际沟通英语测验 (f 1979年为非以英语为母语的人民设计，且由 子公司 (责发行制造，试题的内容 以 国际商业活动与 日常使用 的英语为主，较少出现 专业的英语知识或词汇。受测者进行 人在职场上利用英语与他人沟通的能力或企业甄聘员工、升迁、指派员工到海 14 外工作与教育训练成果等标准。至今已有小型与跨国企业等数千家公司根据年的受测人数亦高达二百多万人。 者举办场次为每月一次；后者一年只有四个场次， 以传统的纸笔方式进行测验，题型分为听力与阅读二大部份，共计有二百题之单选题，测验进行时间约两小时。 考试所得分数由答对 题数决定，两大类 (听力与阅读 )加总成绩即为总分，范围介于 10 到 990 分之间， 绩愈高，愈代表具备清楚且有效率地在各种场合利用英语与他人沟通之能力；反之，代表英语表达能力不佳。 (2002) (二 ) 全民英语检定 ( 全民英语能力分级检定测验 (以下称全民英检 )系教育部于 88 年 3 月补助财团法人语言训练测验中心研发办理之全国性英语能力评量，希望 藉此提供国内各阶段英语学习者公平、可靠且具效度的英语能力评量工具。此 测验之目的在评量一般英语能力，因此命题不局限于特定领域或教材，可用来评量个人的英语能力，亦可作为公私立学校教学成果评鉴及改进的依据，并提供公民营机构招募人才、升等评鉴及甄选派驻国外人员等之参考。 (财团法人语言训练测验中心，2002) 全民英检系以传统纸笔方式进行测验，共分五级：初级、中级、中高级、高级及优级，每级订有明确的能力指标，各级测验内容均包含听、说、读、写四项。各级初、复试的考试场次，每年各举办二次。考生可依个人的能力选择适当等级报考，只要通过所报考级数之初试与复试之标准即可取得该级的合格证书。其中 ，初级的写作测验门槛成绩须达 70分 ， 其余三项的成绩须达 80分，而中级与中高级的初、复试共四项成绩门槛值均须达 80分 。 (全民英检学习网站， 2002) (三 ) 托福测验 (f as a 托福测验 (as a 全世界举办测试母语非英语者之英语能力，台湾地区的 验由财团法人语言测验 15 中心承办。 用于申请进入加拿大、美国等国家之大学或 研究所时，证明个人英语能力之重要文件，亦有少数企业以 绩作为聘用人才之考量。 在全球举行之 测验方式有二：纸笔与电脑化；台湾地区托福测验自西元 2000年 10月起由传统的纸笔测验改为电脑化测验 （ ，每位应试者的座位都配备电脑及耳机。考试场次以全年开放为原则，但实际状况由台湾的承办单位视报考人数多寡决定开放的测验日期、场次及测验地点，但每人每个月份限报考一次。 脑化测验分为听力、文法结构、阅读及写作四个项目。听力及文法结 构两项是采用考题难易度配合应试者程度的电脑化适性测验的型态，亦即应试者一次只能在电脑萤幕上看到一道考题，应试者使用键盘或滑鼠输入答案并确认后，电脑会立刻根据答题的对错情况，决定下一道考题的难易度。应试者不能略过任何一题不作答，确认答案后，亦无法回到前一题更改已答过的答案。通常第一道考题为中等难度的题目，如果考生答对该试题，系统挑选的下一道考题难度会提高；反之，系统挑选下一道考题难度会较简易。答题时须注意控制速度，以确保能在规定时间内答完所有题目。 (002) 阅读项目是采用传统的线型测验，应试者 可以略过某题不作答，也可回头更改已答过的答案。测验结束后，除了写作测验成绩须待 业人员进行批阅之外，应试者可从电脑萤幕上看到听力及阅读之分数，文法 /写作 和总成绩则会列出分数范围 (财团法人语言训练测验中心， 2002)。 表 2内英语检定比较表 考试场次 测验方式 测验内容 报名费用 月均举办一次 年四 场次 传统纸笔测验 听力与阅读 1260元 级、中级、中高级、高级及优级。 传统纸笔 测验 听、说、读、写 初级：共 1150元 中级：共 1850元 中高级：共 2050 16 试，每年举行二次 元 实际状况由台湾的承办单位视报考人数多寡决定开放的测验日期、场次及测验地点。 笔与电脑化。 中听力及文法乃结合 听力、文法结构、阅读及写作 美金 110 元 以上三种国内较著名之英语测验以考试场次、测验方式、测验内容及报名费之汇整比较如表 2表 2测验方式仅具弹性；但报名费用皆普遍偏高。 第二节 测验方式与题库之探讨 根据李连顺 (2000)研究整理指出：测验是在作社会与行为科学的研究时，用来收集资料的一种工具。测验的功能与分类，国内学者有不同的看法，而余民宁 (民 86)认为教育测验在教育上可做为教育评量、诊断学习及帮助学习等三方面用途，测验亦可依据教育目标、试题类型、编制过程的标准化程度、分数的解释等四种方式进行分类。 测验或考试之目的繁多，如进行能力诊断、选才、安置、预测、成就评定等活动，无论其最终目的为何， 测验皆需达公平、合理或准确之要求，由于许多专家学者为使测验能符合此要求，不断进行研讨，因而有多种测验的产生，电脑化适性测验即是其一。 (何荣桂， 2000) 测验若以纸笔方式进行，通常只提供受试者总结性的回馈讯息，无法有效发 17 挥帮助学习的测验功能。随着电脑科技的进步与普及化，教育界已应用电脑于辅助教学、电脑化题库与测验等方面，将传统纸笔测验电脑化具有多项优点，林裕集 (2001)归纳多位专家学者的看法，认为电脑化测验具有以多样性与动态性的方式呈现试题、立即性回馈的提供、施测情境的有效控制、降低测验的误差、减少测验的 时间等优点。根据 000)的研究指出规划、执行、维护一个 实务上可能影响测验的因素包括题库的大小与控制、确认题库维度、试题的新增、删除与修改、测验尺度的一致性与多样化的题库。 题库是电脑化测验的基本条件， 984)是一群能使用方便的试题集合，题库内的试题全都经过分析、编码与结构分类处理。题库建置之目的，并不仅是利用电脑为存取媒介搜集试题，更需提供使用者将集合在一起的试题，依试题内容 (如某一学科的试题 )及统计特 质 (即试题的难度及鉴别参数 )系统化的分类和组织，维护试题品质，以供不同的测验目的之用 (何荣桂， 1991)。 题库中试题组织的形式可分为结构化题库 (非结构化题库 (前者系指题库中之试题在被选用之前即已依照试题之类别或特质加以安排成结构化形式，传统的测验通常使用结构化题库来编制或施测。后者系指题库中之试题伴随特质或类别等参数，在组成测验或施测时以统计的方法动态选题，适性测验则通常使用非结构化题库。 (何荣桂， 1994) 为在题库建立时，足够的测验编制专家、充分的时间、充裕的经费、不断的预试及修正循环过程等为影响题库品其之外在因素。理想的 各试题皆能精确测量受试者之能力。(1988) 试题是题库的生命，要建立好的电脑化题库，需具备下列三个条件： 熟知命题的原则； 一个电脑化题库至少需要满足有助于测验编制、经常必用来施测、 18 可以形成不同型式的测验、可以做适性测验之用、测验使用者与 /或发行者愿意充分合作或有题库系统可以使用的任一个需求，才有建立的必要。 (何荣桂， 1994) 第三节 电脑适性测验理论相关之探讨 电脑适性测验有别于传统纸笔测验，它的测验目的是以最少且根据考生个人能力选择难易适中的试题，评估考生的能力 ( 993)，其发展理论基础主要有二：项目反应理论 ( 连续机率检定比例模式理论 (单说明如下： 一、项目反应理论 (980年提出，是以机率来解释考生能力与试题反应间的关系；亦即以一数学模式，推估受试者的能力或潜在特质，此数学模式称为试题特征函数 ( 余民宁 (2002)认为 (1) 考生在某一试题上的表现情形，可由一组因素来加以预测或解释，这组因素叫作潜在特质或能力 ( (2) 考生的表现情形与潜在特质间的关系，可透过一条连续性递增的曲线来加以解释，这个曲线便叫作试题特征曲线 ( 项目反应理论 (试题特征函数 (达考生能力和测验反应间之关系，因函数中所采用的参数个数不同，可被区分为不同的模式，常用的数学 模式有单参数、双参数及三参数等三种，各模式之试题特征函数如下三种公式所示，而大部份的 (即建立在三参数模式之上 (古松民， 2001； 2001) 单参数模式 (1) 双参数模式 (2) 19 三参数模式 (3) 其中， D=e：自然对数， e=i：试题编号； j=1,2,3,N, 而 j：考生编号； I=1,2,3,K, 而 试题数 j： 第 题 i 的题目鉴别度 题 i 的题目难易度 题 i 的题目猜测度 此理论具有下列几项基本假设，唯有在这些假设都成立的前提下，试题反应模式才能被用来分析所有的测验资料。 (余民宁， 2002) A. 单向度 (各种模式有个最常用的共同假设，那就是测验中的各个试题都测量到同一种共同的能力或潜在特质，这种单一能力或潜在特质 (因素 )必须包含在试题里的假 设，即为 ”单向度 ”。然而，在真实测验情境里，考生测验的表现可能受多种因素影响，如：考试焦虑、应试技巧等；因此，只要该测验具影响考试结果的一个主要成份或因素，即可称符合 ”单向度 ”之假设。 B. 局部独立性 (当影响测验表现的能力被固定不变时，考生在任何一对试题上的反应，在统计学上而言是独立的；亦即考生在不同试题上的反应间没有任何关系存在。 C. 非速度测验 (适用的情况有个隐含的基本假设，那就是测验的实施不是在速 20 度限制下完成；换言之，受 试者考试成绩不佳，是个人能力不足所导致而成，而非测验时间不够所致。 D. 知道 正确假设 (假设考生在知道某一试题之正确答案的情况下，他 /她必然会正确反应该试题。 在 题被视为测量受试能力的基本单位，透过三个试题参数来描述试题的特质。施测方式是根据一个简单的原则，即：如考生正确回答某一题目后，则下一个呈现给此考生的试题会较前一个题目难一些；反之，考生答错了一试题后，则呈现较前一题简单些之试题。施测进行时，考生的答题能力值，在每次回答一个试 题后，立即被重新估计，再依据重新估计后的能力值呈现难易度适合此考生之题目。循此原则，直到满足一个预先设定的信赖水准或终止值时，测验即结束。 (陈丽如， 1997；何荣桂， 2000) 二、连续机率比例检定 ( 精熟检定是用于校标参照测验 (认证检定，乃根据一考生对于某领域知识的答题反应来判断其是否已达精熟标准， 是精熟检定的判断理论之一 (995)。 947年 所发展出来，当时是用于二次大战时军备制造的品质控制上， 969年才将其应用于判定精熟或不精熟的教育测验，但现今适性测验于教育界之应用多采用 1990)。 而 测过程中，以随机选题方式进行施测，并需进行一连续性机率比(验 (庄智陵， 2000； 李茂能， 2001)。相关名词定义如下： = 先前精熟的可能性 = 先前不精熟的可能性 = 精熟者答对试题之机率 = 不精熟者答对题目的机率 21 = 型一错误，误判考生为精熟，但实际上 为不精熟之机率。 = 型二错误，误判考生为不精熟，但实际上为精熟之机率。 s = 考生答对的题数。 f = 考生答错的题数。 = (1( = /(1 = 非精熟门槛上限值 = 考生答对试题的机率 与设定值方面， 出设定值需保守使用 (如： = = 若考生每填完一试题， 系统计算所得之 代表可判断考生已达精熟水准，且可停止施测，如未能判定精熟或不精熟，即 = L B M )繼 續 進 行 施 測 ?( U B N = 最 高 等 級 ?否升一等級是否已通過前一等級測驗?單一題型測驗結束是是降一等級判斷試題等級已降至 = 最 低 等 級 ?是否否P a r t B ： I R T 理 論 精 神答題图 3性测验整合流程 (以单一题型为例 ) 31 第四节 雏型系统验证之实验设计 为验证本研究所提之企业征才性测验整合流程，本研究开发一雏型系统初版后，为使系统程式与介面设计较完善，首先进行系统预试及归纳预试其对介面设计之观感，经过预试与归纳结果修正系统后，才开始进行本研究之实验。因此，实验设计以二个阶段进行，实验项目说明如下： 第一阶段：系统预试及介面设计调查 1. 实验对象： 义守大学资讯管理研究所研究生与指导教授，共四名。 2. 实验目的 预试目的主要是针对本研究建置完成之雏型系统的初版，进行确认程式撰写之正确；同时收集归纳预试者对于介面设计之观感，使系统介面设计较完善，避免因介面设计不良，导致测验成绩评估错误。 3. 实验工具与方法： 研究者首先向预试者介绍此雏型系统测验流程后，再让预试者利用桌上型电脑与网路同步上线进行测验，同时实际观察每位预试者的系统操作状况与成绩结果。最后请每位预试者利用纸笔提供系统介面设计之观感，根据收集归纳相关的意见，适度修正本系统。 4. 时间分配： 预试实施过程所需时间共约计 2 小时 20 分，各 分项步骤流程与时间安排如下： (1)系统使用方法操作说明 20分钟； (2)进行本适性雏型系统测验，约 1时； (3)画面观感意见 10 分钟。 第二阶段：线上测验评量之效能验证与态度调查 1. 实验目的： 此目的主要是针对本研究建置完成之雏型系统进行效能评估与调查受试者 32 对于电脑测验方式之态度。研究者透过雏型系统测验说明及实际让考生上线进行系统使用，分别收集受测者原有之 析二者成绩间的关连程度，验证本研究所提之企业线上适性测验雏型系统的可行性。同时，搜集每位受测者对于电脑测 验方式之态度，进行分析探讨。 2. 实验对象： 本研究采方便取样，抽取即将进入职场的校内外之大学应届毕业生与国内中小企业界的现职人员参与实验，共计 60名为研究对象，每位参与实验的研究对象皆需曾接受过新 /旧制之托福测验。由于实验者包含校内外应届毕业生与在职人士，因时空之限制，难以将所有考生集合于同一地点与时间进行测验，因此实验方法视对象不同而异，以下将详细说明之。 3. 实验工具与方法 (1) 现场受试者： 研究者将实验者统一集合于试场后，首先利用网路与桌上型电脑说明介绍本研究提之整合适性测验流程及雏型系统的整体架构 、建置此系统之目的、欲达成的目标等相关讯息，待实验者确实了解操作方法后，立即开始进行测验。最后，发放一电脑测验态度问卷问卷，请受测者填答，以调查了解受测者对于电脑测验方式之态度 (2) 远距受试者： 至于无法到现场测验的人士，研究者首先制作一系统测验操作说明书(详细请见附录一 )，透过电子邮件寄发该说明书与问卷，请实验者于测验进行前详细阅读，研究者亦与实验者联络确定了解测验步骤后，再开始进行系统测验。测验完毕时，请受测者填答电脑测验态度问卷问卷，并利用电子邮件回寄给研究者，进行资料分析。 4. 时间分配： 此实验 过程所需时间共约计二小时，各分项步骤流程与时间安排如下： (1)系统使用方法操作说明 20 分钟； (2)进行本适性雏型系统测验，约 1 33 时； (3)填写问卷 10 分钟。 5. 问卷设计与分析： 本论文的问卷设计，将以过去国内外学者研究与态度相关，设计完成具相当信度及效度的量表为依据，并配合本研究的目的，适当的修改编制为调查工具。问卷发放之对象为参与系统测验的所有考生，问卷回收所得之资料，将以 因素构面如下： 背景变项：本研究采用李克氏五点量表，分析 网路测验试题困难度 之