測驗的分析與診斷

1、.課程與教學目標的多元評量-測驗試題分析、概念構圖評量、知識結構評量 主講人：台中教育大學 楊銀興壹、 前言貳、 雙向細目表課程內容 教 學 目 標總題數百分比 辨 認 了 解 詮 釋 基 本名 詞 天 氣 符 號 特 殊 事 實 影響天氣形成的因素天氣圖氣 壓11133915 風1111021525 溫 度11142915溼度和雨量 111751525雲22261220總 題 數666301260百 分 比1010105020100參、 試題分析一、 難度P=×100 i=1, 2,.n P= i=1, 2,.n二、 鑑別度=-D值：.40以上，試題非常優良 .30.39，優良，但

2、可能需要修改 .20.29，尚可，但需作局部修改 .19以下，劣，需要刪除或修改三、 難度與鑑別度的關係四、 選項誘答力分析(一) 低分組學生在每個不正確選項選答人數的百分比值不可以為零(二) 低分組學生在每個不正確選項選答人數的百分比值，不可以低於高分組學生選答不正確選項的人數百分比值五、 實例說明肆、學生問題表（S-P表）分析一、S-P表的涵義與編製 (一)涵義過去測驗結果的分析，並未針對學生作答反應資料(response data)再予細部分析。因此，無法進一步利用測驗分析結果來幫助教師改進其命技巧、學習評量方法或教學校能、同時亦無法診斷學生學習困難之所在。就學生做答情形來看，做答反應組

3、型不同，即使總分相同，其所表示的意義，亦可能不同，所以教師若將得分相同的學生視為學習程度或成就相同，顯然是不恰當的。故所謂S-P表(student-problem chart )即依據學生作答反應組型加以分析，以了解反應組型背後的意義，從中找尋有用的訊息，以提供學生學習過程缺失、思考模式、與學習類型等有價值的的回饋，也可提供教師命題良窳、評良好壞，與教學得失等參考訊息。 (二)編製1. 輸入資料(1) 第一列輸入資料控制列(2) 第二列輸入每一道試題的正確答案(3) 第三列輸入每一道試題的選項數(4) 第四列輸入每一試題所歸屬某一份分測驗的代碼別(5) 第五列開始輸入受試學生的資料2. 存成文

4、件檔3. 分析程序(1) 轉換原始做答資料矩陣為二元化計分資料矩陣(2) 依序由上而下，高分在上，低分在下，橫列排列學生得分的高低，遇有學生總分相同時則按學生未答對各試題之答對學生總人數之和，由小而大，由上往下排。(3) 依序由左而右，容易的試題在左，難的試題在右，由左而右，排列試題答對人數的多寡，遇有答對人數相同之試題，則以各試題未答對學生總分之和，由小而大，由左往右排(4) 依據每位學生所得總分，從左邊往右邊數，數出和其總分相同的試題個數，並在其右邊畫一條直線(即分界線)，如此，由高分往低分分別畫出與每位學生相對應的分界線來，最後在這些分界線的下方以直線連接起來，形成一個梯狀的曲線，該曲線

5、即S曲線。(5) 依照每道題學生答對的人數，從上往下數起，數出和其答對學生人數相同的學生個數，並在其下邊畫一條直線(分界線)，如此，由左端往右端，分別畫出與每道試題之答對學生人數相對應的分界線，最後在這分界線的右方以直線連接起來，形成一個梯狀的曲線，該曲線即P曲線。4.S-P曲線的基本性質(1) S曲線以左的部分，大多數的數值都是1，亦即在這個區域內大多數學生是答對。(2) S曲線以右的部分，大多數的數值都是0，亦即在這個區域內大多數學生是答錯。(3) P曲線以上的部分，大多數的數值都是1，亦即在這個區域內大多數學生是答對。(4) S曲線以下的部分，大多數的數值都是0，亦即在這個區域內大多數學

6、生是答錯。(5) 由前述四項可知，排列在左上方者，即代表能力愈高的學生在愈簡單試題的做答結果，大多數是被期望答對的試題，所以這個區域大多應該出現1；排列在右下方者，即代表能力愈低的學生在愈困難試題的做答結果，大多數是被期望答錯的試題，所以這個區域大多應該出現0。(6) 就每一位學生S曲線左邊答錯的個數會等於其右邊答對的個數而言；P曲線下方答錯的個數會等於其上方答對的個數，亦即S曲線左右兩邊答對答錯的個數；P曲線上下方答對答錯的個數會呈現對稱的分布。(7) 當S曲線以左或P曲線以上的部分全部為1，而S曲線以右或P曲線以下的部分全部為0時，稱為完美量尺的反應組型，此時S曲線和P曲線惠重疊在一起。(

7、8) 完美量尺只存在理論中，實際做答情況不可能出現，亦即在一般情況下，會出現不規則或未按理想狀況出現的不尋常或異常的反應組型，這種不尋常反應組型若太過嚴重或離譜的話，會以一種量化指標來表示，以顯示不尋常或異常的嚴重性，提供教師診斷試題優劣與判斷學生學習結果的參考指標。 二、S-P表的基本圖形(一) 標準化測驗的S-P曲線(二) 同質性一致的常模參照測驗的S-P曲線(三) 能力陡降分布測驗的S-P曲線(四) 編序教學後測驗的S-P曲線(五) 試題呈現二極化分布測驗的S-P曲線(六) 教學前測驗的S-P曲線 三、差異係數 不完美量尺的反應組型，會呈現S曲線與P曲線分開的狀態，分開太大或太小都不適宜

8、，測量S和P曲線的分離程度可以用一個量化指標，即差異係數來表示。差異係數是實際測到的S-P表中，S和P兩曲線之分離面積，佔隨機機情況下之S-P曲線所圍成部分之面積期望值的比值，通常以D來表示。 完美量尺的反應組型，差異係數會等於0，完全隨機時，差異係數會等於1。D在一般常模參照測驗中，以.50為標準值，當大於.60表示測驗含有相當多異質因素在內，應對學生的反應組型予以注意，對試題應予檢討，甚至有修改或改進命題的必要。四、注意係數注意係數是用來判斷學生或試題的反應組型是否有異常現象的一種指標。可分成兩種，一種為學生的注意係數(CS)；另一種為試題的注意係數(CP)。CP=CS= 注意係數均為正值

9、，數值愈大，表示欲值得予以注意，亦即學生或試題的反應組型愈趨向不尋常。實際情境中有下列的判斷標準1.當0CPi(或 CSj).50時，表示該試題或學生的反應組型發生不尋常的情況並不嚴重，或還在容許的做答誤差範圍內。2. 當.75CPi(或 CSj).50時，表示該試題或學生的反應組型不尋常的情況已經是很嚴重，應予注意。3. 當CPi(或 CSj).75以上時，表示該試題或學生的反應組型不尋常的情況已經是非常嚴重，應予特別注意。五、S-P表的應用 (一)學生做答反應組型之觀察(二)S曲線左方與右方之0的意義不同(三)試題的診斷分析1.優良型試題2異質型試題3.困難型試題4.拙劣型試題 (四)學生的診斷分析 1.學習穩定型學生 2.粗心大意型學生 3.努力不足型學生 4.欠缺充分型學生 5.學力不足型學生 6.學習異常型學生伍、概念構圖一、 概念構圖的涵義1. 概念2. 命題3. 階層關係4. 連結與連結語5. 有意義的學習二、 概念構圖的實施步概念構圖的實施步驟（一） 實施前的準備活動1. 提示2. 對比3. 舉例（二） 實施步實施步驟1. 選擇2. 歸類及排序3. 連結及連結語4. 交叉連結5. 舉例三、 概念構圖在教學評量上的應用（一） 概念構圖的評量方法計分要項1. 關係2. 階層3. 交叉連結4. 舉例（