纸笔测验编制程序课件

1、第五章 紙筆測驗編制程序第一節 擬定編制計畫及遴選命題者 一.測驗編制計畫應包含的要素 (一)外在的環境因素 1.測驗目的:成就?篩選?安置? 2.測驗對象:年級?正常?特殊?第五章 紙筆測驗編制程序 3.測驗時間: 10分鐘.期中考.90分鐘 4.施測方式: 個別?班級?全校? 入學考?第五章 紙筆測驗編制程序(二)內在的測驗屬性 1.測驗內容:國文?自然?音樂? 2.題型及數量分配:是非?選擇?填充? 3.試題的心理計量特質: 重要性?鑑別度?第五章 紙筆測驗編制程序(二)內在的測驗屬性 3.試題的心理計量特質: 重要性? 標準參照重視學科專家的審查 常模參照重視試題的分析結果 強調試題的

2、鑑別度 常模參照測驗(重視試題的分析結果 強調試題的鑑別度)：指測驗結果，根據分數在團體中位置而加以解釋，採用相對性標準比較，一般以平均水準為參照點。如大學聯考、國家高普考試、月考、期末考等教師自編測驗、標準化成就測驗、智力測驗、性向測驗。標準參照測驗(重視學科專家的審查 )：根據教學前事先所訂定的絕對性標準加以解釋測驗。一般均以學生所學習知識或技能，判定其及格或不及格、精熟或不精熟、通過或不通過，不須參考他人表現來比較。如國小教師自編測驗（專為平時考、小考、隨堂測驗）、國家技師執照考試、Bloom提倡精熟學習、中醫師檢定考試、汽車駕照考試等。（一）原始分數與級分對照表科目國文英文數學社會自然

3、級距5.906.316.428.868.16級分分數區間1582.61 - 108.0088.35 - 100.0089.89 - 100.00124.05 - 144.00114.25 - 128.001476.71 - 82.6082.04 - 88.3483.47 - 89.88115.19 - 124.04106.09 - 114.241370.81 - 76.7075.73 - 82.0377.05 - 83.46106.33 - 115.1897.93 - 106.081264.91 - 70.8069.42 - 75.7270.63 - 77.0497.47 - 106.3289

4、.77 - 97.921159.01 - 64.9063.11 - 69.4164.21 - 70.6288.61 - 97.4681.61 - 89.761053.11 - 59.0056.80 - 63.1057.79 - 64.2079.75 - 88.6073.45 - 81.60947.21 - 53.1050.49 - 56.7951.37 - 57.7870.89 - 79.7465.29 - 73.44841.31 - 47.2044.18 - 50.4844.95 - 51.3662.03 - 70.8857.13 - 65.28735.41 - 41.3037.87 - 4

5、4.1738.53 - 44.9453.17 - 62.0248.97 - 57.12629.51 - 35.4031.56 - 37.8632.11 - 38.5244.31 - 53.1640.81 - 48.96523.61 - 29.5025.25 - 31.5525.69 - 32.1035.45 - 44.3032.65 - 40.80417.71 - 23.6018.94 - 25.2419.27 - 25.6826.59 - 35.4424.49 - 32.64311.81 - 17.7012.63 - 18.9312.85 - 19.2617.73 - 26.5816.33

6、- 24.4825.91 - 11.806.32 - 12.626.43 - 12.848.87 - 17.728.17 - 16.3210.01 - 5.900.01 - 6.310.01 - 6.420.01 - 8.860.01 - 8.1600.00 - 0.000.00 - 0.000.00 - 0.000.00 - 0.000.00 - 0.00級分計算方式如下：1.級距：以各科到考考生，計算其原始得分前百分之一考生（取整數，小數無條件進位）的平均原始得分，再除以15，並取至小數第二位，第三位四捨五入。2.本測驗之成績採級分制，原始得分0分為0級分，最高為15級分，缺考以0級分計。

7、各級分與原始得分、級距之計算方式詳見簡章第910頁。試題解析國文 鑑別度高2013/03/31 【聯合晚報記者王彩鸝台北報導】國文科輔導團老師分析，國文科文言文的題幹加長，答案選項也多是文言文，增加四、五題鑑別度高的題目，考題較為靈活，難度也增加，考生要深化、統整才能答題。新北市江翠國中國文老師陳恬伶表示，會考國文科金庸作品首度入題，選自作品集新版的序文，屬應用文，跟以往基測考應用文多選自書信不同。閱讀題組題改寫羅 蘭散文聲音的聯想，題目長達1100字，問的是寫作手法，及作品透露的作者人生態度，未來老師應思考如何提升學生欣賞文章的能力。 第五章 紙筆測驗編制程序 4.審查及篩選試題的方法 5.

8、版面設計及印製 紙張大小?單面雙面?字體大小? 會影響作答與計分還會影響該測驗 的表面效度 表面效度（face validity）：這是最容易達成及最基本的效度。此類效度就是由學界來判斷指標是否真的測量到所欲測量到的構念第五章 紙筆測驗編制程序 6.試題/測驗的計分方法 人工?機械?主觀?客觀? 7.整個測驗的理想計量特質 高信度?高預測效度?對哪種程度的人有高鑑別力?競爭激烈的學測對高能力要有高鑑別度診斷測驗需要對低能力者有高鑑別度 第五章 紙筆測驗編制程序二.命題者應具備的特質 1.充分了解教學目標及教材 2.充分了解學生能力及測驗 3.精確流暢的文字表達能力 4.充分了解題型及命題原則

9、5.研究的精神及堅忍性格 6.開放的心胸及創造能力第五章 紙筆測驗編制程序第二節 決定取材範圍及命題架構 一.試題取材範圍的決定 (一)測驗目的 (二)作答時間第五章 紙筆測驗編制程序 二.列舉行為目標配分得分評分項目21.頂車位置是否正確52.頂車方法是否安全53.有無使用車輪擋塊54.有無使用頂車馬架第五章 紙筆測驗編制程序三.內容領域-認知歷程矩陣 合計 40% 40% 20%認知歷程概念理解程序知識問題解決學科內容領域國字18%18%9%注音6%6%3%解釋8%8%4%國學常識4%4%2%閱讀測驗4%4%2%第五章 紙筆測驗編制程序四.試題形式-認知歷程矩陣概念理解程序知識問題解決合計

10、語文敘述20%20%10%50%數字符號12%12%6%30%圖表數據8%8%4%20%合計40%40%20%100%第五章 紙筆測驗編制程序第三節 決定題型及編擬試題 一.題型的種類及特徵第五章 紙筆測驗編制程序第五章 紙筆測驗編制程序二.一般性的命題原則1.除了語文測驗外，要降低字彙的難度及句子的複雜度2.文字精簡，減少試題篇幅及閱讀所需時間第五章 紙筆測驗編制程序二.一般性的命題原則3.問題要清楚明確，沒有第二種解釋4.每一試題所考的都是領域裡的重要概念，而非細節第五章 紙筆測驗編制程序二.一般性的命題原則5.同類型試題，格式語法要一致6.取材時，避免偏袒某類受試者第五章 紙筆測驗編制程

11、序二.一般性的命題原則7.撰寫題目時要參考命題原則8.要比實際需要量多擬50%的題目以備不時之需第五章 紙筆測驗編制程序二.一般性的命題原則9.客觀計分的試題，要有專家都能同意的正確答案10.寫好過後幾天再檢查一次，或請同事檢查第五章 紙筆測驗編制程序第四節 選擇及排列試題 一.評鑑試題：一種根據專家的專業知識與經驗來對試題內容作判斷，又稱專家判斷法或試題內容法；另一種是依據學生在試題的反應再比較各試題的統計量來判斷第五章 紙筆測驗編制程序第四節 選擇及排列試題 一.評鑑試題： (一)專家判斷法：使用那些評鑑標準則是由測驗目的來決定，並不是所有標準都得同時使用，通常不論哪種測驗都有好幾個標準可

12、以適用第五章 紙筆測驗編制程序(一)專家判斷法：第五章 紙筆測驗編制程序(一)專家判斷法：1.答案的正確性答案的正確性是指該題目的標準答案是否取得專家的一致同意判斷，如果答案不一致，要互相討論，如果仍然不一致，該題應該廢棄第五章 紙筆測驗編制程序(一)專家判斷法：2.提議的明晰性：用字淺顯、精確，句子結構簡短，且格式前後一致第五章 紙筆測驗編制程序(一)專家判斷法：3.試題的難易度：難易度是指全部受測的學生答對該題的人數比率第五章 紙筆測驗編制程序(一)專家判斷法：4.內容的重要性：該題目所測量的知識技能是課程的最核心部分，或是勝任某一工作所必備的，或是進入下一單元所必需的。第五章 紙筆測驗編

13、制程序(一)專家判斷法：5.試題偏差：試題內容引起學生不必要的情緒反應或覺得不公平第五章 紙筆測驗編制程序(一)專家判斷法：6.與測驗計畫的符合性：試題要符合命題計畫上的界定第五章 紙筆測驗編制程序(一)專家判斷法：7.與課程的關聯性：試題內容要與學校課程內容或職訓課程內容相符合第五章 紙筆測驗編制程序(一)專家判斷法：8.與教學的關聯性：教學評量的試題是否與學生的實際學習內容有密切關聯第五章 紙筆測驗編制程序(二)實證研究法 1.預試 (1)以試用題進行正式測驗 (2)將預試題目夾藏在正式測驗中 (3)事先單獨舉行預試第五章 紙筆測驗編制程序(二)實證研究法 2.預試考生樣本 (1)取樣方法

14、 (2)選用的試題分析方法 (3)希望從分析中獲得的訊息量及精 確度第五章 紙筆測驗編制程序(二)實證研究法 3.預試試題題數 4.試題分析方法 (1)難易度指數 (2)鑑別度指數 第五章 紙筆測驗編制程序(二)實證研究法 4.試題分析方法 (3)試題特徵曲線 (4)誘答分析第五章 紙筆測驗編制程序二.決定試題數目 (一)測驗目的 (二)題型與所測量認知層次的比重 (三)期望的信度及內容效度 (四)測驗時間與學生年齡 (五)閱讀材料或試題的長度和複雜程度第五章 紙筆測驗編制程序三.選擇適當題目 (一)要依據雙向細目表選題，均勻分配，使之具有代表性 (二)在題數許可範圍內則應該兼顧試題的深度與廣

15、度 第五章 紙筆測驗編制程序三.選擇適當題目 (三)試題之間不應該相互提供作答線索 (四)應依照測驗目的來選擇不同試題特徵的題目第五章 紙筆測驗編制程序四.試題歸類與排序 (一)依題型歸類 (二)依內容歸類 (三)依難易度排順序 第五章 紙筆測驗編制程序第五節 填答與計分方式的設計 一.填答方式 (一)直接寫出式 (二)標示位置式第五章 紙筆測驗編制程序第五節 填答與計分方式的設計 二.計分方法 (一)客觀計分法 1.二元計分法 2.計時加分法第五章 紙筆測驗編制程序第五節 填答與計分方式的設計 二.計分方法 (一)客觀計分法 3.信心加權計分法 4.選項加權計分法第五章 紙筆測驗編制程序第五

16、節 填答與計分方式的設計 二.計分方法 (一)客觀計分法 5.挑錯答案計分法 6.直到答對法第五章 紙筆測驗編制程序第五節 填答與計分方式的設計 二.計分方法 (一)客觀計分法 7.重組題的計分 8.比例計分法第五章 紙筆測驗編制程序第五節 填答與計分方式的設計 二.計分方法 (一)客觀計分法 9.猜答現象與矯正方法第五章 紙筆測驗編制程序第五節 填答與計分方式的設計 二.計分方法 (二)主觀計分法 1.分項計分法 2.整體計分法第五章 紙筆測驗編制程序第五節 填答與計分方式的設計 三.加權與配分 (一)雙向細目表上對式題數的加權 (二)各試題在計分上的加權(配分) (三)合併各測驗分數時的再

17、加權第五章 紙筆測驗編制程序第六節 撰寫作答說明 一.作答說明的內容 (一)教師自編測驗的作答說明第五章 紙筆測驗編制程序第六節 撰寫作答說明 一.作答說明的內容 (二)標準化測驗的指導語 1.測驗目的 測驗的名稱.所測的能力 第五章 紙筆測驗編制程序第六節 撰寫作答說明 一.作答說明的內容 (二)標準化測驗的指導語 2.作答方法 告知學生作答應有的思考程序. 或作答程序.標示答案方法及位置 第五章 紙筆測驗編制程序第六節 撰寫作答說明 一.作答說明的內容 (二)標準化測驗的指導語 3.試題範例 用一題或兩三題當作練習題 以幫助學生熟悉作答方法第五章 紙筆測驗編制程序第六節 撰寫作答說明 一.

18、作答說明的內容 (二)標準化測驗的指導語 4.有關於猜答的建議及提前做完 時應如何的規定第五章 紙筆測驗編制程序第六節 撰寫作答說明 一.作答說明的內容 (二)標準化測驗的指導語 5.特殊規定 是否可以使用草稿紙.計算器 換算表第五章 紙筆測驗編制程序第六節 撰寫作答說明 一.作答說明的內容 (二)標準化測驗的指導語 6.作答時間限制 以分鐘為單位.在最後一行 用阿拉伯數字標示第五章 紙筆測驗編制程序第六節 撰寫作答說明 一.作答說明的內容 (二)標準化測驗的指導語 7.有助提升測驗表現的應試技巧 提醒受測者.免得變成一個干擾 分數的因素第五章 紙筆測驗編制程序第六節 撰寫作答說明 二.作答說

19、明的編寫原則 (1)字彙淺顯.句子要短.使文字可讀 性提高 (2)新穎的題型更需要範例來說明 作答方法 第五章 紙筆測驗編制程序第六節 撰寫作答說明 二.作答說明的編寫原則 (3)試卷版面不夠.說明可以精簡 (4) 標準化的測驗中.格式要前後 一致 (5)國小低年級最好不要用書面作 說明.主試者做口頭說明第五章 紙筆測驗編制程序第七節 版面設計及印製 一.試卷版面設計應注意事項 (一)封面或卷頭部分 第五章 紙筆測驗編制程序第五章 紙筆測驗編制程序第七節 版面設計及印製 一.試卷版面設計應注意事項 (一)封面或卷頭部分 1.標準化的測驗封面上有測驗名稱、編制者、出版單位及出版日期，左上角有編號

20、的位置 第五章 紙筆測驗編制程序第七節 版面設計及印製 一.試卷版面設計應注意事項 (一)封面或卷頭部分 2.學校考試卷的卷頭要有學校全銜、學年度、年級、學期、學科名稱、評量性質及學生填寫的班級做號姓名，試卷橫寫時，卷頭擺在最上面，直寫時擺在最右邊 第五章 紙筆測驗編制程序第七節 版面設計及印製 一.試卷版面設計應注意事項 (二)題型作答說明 標準化測驗通常只有一種題型-選擇題，會與測驗的形式區隔，通常獨佔一頁，印在單數頁，正式題目印在指導語背面，防止學生念指導語時看到題目第五章 紙筆測驗編制程序第七節 版面設計及印製 一.試卷版面設計應注意事項 (三)試題內容部分 1.字型、字體大小：一般文

21、字敘述使用正體，粗體字用來區別作答說明和試題第五章 紙筆測驗編制程序第七節 版面設計及印製 一.試卷版面設計應注意事項 (三)試題內容部分 2.字距、行距與段距的選擇：字距太小版面會較暗，行距為字體大小+20%，段距要比行距大，使每一題自成一個單位第五章 紙筆測驗編制程序第七節 版面設計及印製 一.試卷版面設計應注意事項 (三)試題內容部分 3.試卷上下左右應留二至四公分的空白：版面上下應留空白俗稱天地，可讓老師登記分數書寫評語，也比較便於裝訂第五章 紙筆測驗編制程序第七節 版面設計及印製 一.試卷版面設計應注意事項 (三)試題內容部分 4.版面可以分成2欄以節省空間便於閱讀第五章 紙筆測驗編制程序第七節 版面設計及印製 一.試卷版面設計應注意事項 (三)試題內容部分 5.選擇題的各個選項要有適當間隔並作規則性排列 6.題號要採凸排，並和試題內容相隔開第五章 紙筆測驗編制程序第七節 版面設計及印製 一.試卷版面設計應注意事項 (三)試題內容部分 7.作答位置應有固定大小作規則排列，便於閱卷和計分第五章 紙筆測驗編制程序第七節 版面設計及印製 一.試卷版面設計應注意事項 (三)試題內容部分