第三章 研究方法
第二節 測驗編製
‧ 國
立 政 治 大 學
‧
N a tio na
l C h engchi U ni ve rs it y
5. 學生學習回饋、校正及充實活動，再進行總結性自我檢核施測，判斷精熟程度。
6. 記錄學生學習進步與遷移變化之訊息。
7. 學生實驗教學，A、B 組採「精熟學習配合數位化診斷教學」的實驗組教學(簡稱實驗教學)，
C 組採「傳統教學法」的控制組教學(簡稱傳統教學)，規劃兩種教學法的實驗設計。
8. 分析兩組學生的學習態度與考試焦慮量表前、後測資料。
9. 分析「傳統教學」與「實驗教學」兩種教學法在學習成就的各種統計檢定資料。
10. 實驗組同學實驗教學回饋單資料分析。
‧
‧
‧
‧
‧ 國
立 政 治 大 學
‧
N a tio na
l C h engchi U ni ve rs it y
錯誤的試題重新命題或加以修正，經過學生與專家審查的兩道手續，形成性測驗卷才正 式完稿，共分四卷，其中第 1-3 卷設計 25 題單選題；第 4 卷設計 20 題，總題數 95 題，
見附錄一。
三、 測驗後，試題分析
試題分析的標準，根據Hopkins(1998)提出鑑別度評定標準，Kuder & Richardson(1937) 所創的 K-R 方法分析試題間的一致性及試卷差異係數 ，完整的試題分析摘要表(形成 性評量卷)如表 3-2~3-5 表示本試題測驗內容符合學習目標、試題編排得宜且難易適中，
各選擇題之選項均有良好的誘答力。
D*
表3-2--第一冊試題分析摘要表
題號 難度 鑑別度 品質 K-R 信度 試卷差異係數D*
1 0.412 0.353 優 2 0.912 0.176 尚可 3 0.735 0.412 極優 4 0.5 0.176 尚可 5 0.824 0.0 劣 6 0.353 0.235 尚可 7 0.824 0.353 優 8 0.676 0.176 尚可 9 0.706 0.235 尚可 10 0.794 0.176 尚可 11 0.441 0.412 極優 12 0.353 0.353 優
13 0.382 0.294 尚可 0.73 0.42
14 0.676 0.412 極優 15 0.559 0.647 極優 16 0.471 0.706 極優 17 0.412 0.353 優 18 0.647 0.588 極優 19 0.471 0.353 優 20 0.353 0.471 極優 21 0.588 0.471 極優 22 0.588 0.471 極優 23 0.382 0.529 極優 24 0.529 0.941 極優 25 0.5 0.765 極優
平均難度 0.564，題號 5 難度低表示大部分學生已熟練該題型，可修正或刪除。
‧ 國
立 政 治 大 學
‧
N a tio na
l C h engchi U ni ve rs it y
表3-3--第二冊試題分析摘要表
題號 難度 鑑別度 品質 K-R 信度 試卷差異係數D*
1 0.618 0.176 尚可 2 0.441 0.294 尚可 3 0.794 0.294 尚可 4 0.471 0.588 極優 5 0.559 0.176 尚可 6 0.441 0.765 極優 7 0.324 0.412 極優 8 0.441 0.412 極優 9 0.471 0.706 極優 10 0.588 0.824 極優 11 0.676 0.647 極優 12 0.824 0.235 尚可
13 0.559 0.529 極優 0.73 0.46
14 0.588 0.588 極優 15 0.559 0.412 極優 16 0.412 0.588 極優 17 0.647 0.471 極優 18 0.5 0.176 尚可 19 0.588 0.471 極優 20 0.853 0.176 尚可 21 0.529 0.353 優 22 0.765 0.353 優 23 0.794 0.412 極優 24 0.824 0.235 尚可 25 0.765 0.353 優
平均難度 0.601， 題號20、24 難度低表示大部分學生已熟練該題型，可略為修正。
題號18 高分組的學生答對人數略低，試題與學生均需檢討。
‧ 國
立 政 治 大 學
‧
N a tio na
l C h engchi U ni ve rs it y
表3-4--第三冊試題分析摘要表
題號 難度 鑑別度 品質 K-R 信度 試卷差異係數D*
1 0.735 0.529 極優 2 0.618 0.412 極優 3 0.735 0.412 極優 4 0.765 0.353 優 5 0.735 0.529 極優 6 0.618 0.294 尚可 7 0.525 0.412 極優 8 0.735 0.412 極優 9 0.412 0.353 優 10 0.618 0.647 極優 11 0.529 0.588 極優 12 0.706 0.588 極優
13 0.706 0.588 極優 0.77 0.45
14 0.618 0.529 極優 15 0.647 0.471 極優 16 0.559 0.294 尚可 17 0.588 0.588 極優 18 0.676 0.529 極優 19 0.588 0.706 極優 20 0.824 0.353 優 21 0.882 0.235 尚可 22 0.412 0.118 尚可 23 0.353 0.471 極優 24 0.5 0.647 極優 25 0.294 0.235 尚可
平均難度 0.616，題號 22 高分組的學生答對人數略低，試題與學生均需檢討。
‧ 國
立 政 治 大 學
‧
N a tio na
l C h engchi U ni ve rs it y
表3-5--第四冊試題分析摘要表
題號 難度 鑑別度 品質 K-R 信度 試卷差異係數D*
1 0.588 0.363 優 2 0.647 0.471 極優 3 0.618 0.647 極優 4 0.412 0.588 極優 5 0.441 0.529 極優 6 0.324 0.529 極優 7 0.941 0.118 尚可 8 0.647 0.471 極優 9 0.588 0.353 優 10 0.353 0.471 極優 11 0.412 0.706 極優 12 0.235 0.118 尚可 13 0.5 0.529 極優 14 0.529 0.588 極優 15 0.265 0.294 尚可 16 0.471 0.471 極優 17 0.441 0.647 極優 18 0.706 0.353 優 19 0.765 0.353 優 20 0.412 0.471 極優
0.69 0.46
平均難度 0.515， 題號7 難度低表示學生熟練該題型鑑別度低，可略為修正。
題號12 高分組的學生答對人數略低，試題與學生均需檢討。
總結：
各分冊試題的平均難度分別如下：第一冊(0.56)、第二冊(0.6)、第三冊(0.62)、第四冊 (0.52)，平均難度約維持在 0.5 至 0.6 間；難易適中，同時檢測各分冊試題內部一致性，計算 K-R 信度分別如下：第一冊(0.73)、第二冊(0.73)、第三冊(0.77)、第四冊(0.69)，K-R 係數約維 持在0.7 至 0.8 間；非常可信，另外檢測各分冊試卷差異係數 分別如下：第一冊(0.42)、第 二冊(0.46)、第三冊(0.45)、第四冊(0.46)， 係數均維持在0.4 至 0.45 間；試題同質性高，試 卷內容符合學習目標、試題編排得宜。
D*
D*
‧ 國
立 政 治 大 學
‧
N a tio na
l C h engchi U ni ve rs it y
第三節 精熟教學
一、 每冊教學完畢，進行施測
(一) 因根據雙向細目表來編製試題與專家審核，已具備良好的內容效度，在每一冊教學複 習完畢後緊接著進行施測，測驗作答方式採電腦閱卷，學生將編號與答案在卡片上劃 記，再經由電腦讀卡、閱卷、評分。
(二) 電腦再針對結果進行每一試題難度、鑑別度和選項誘答力等特徵資料分析處理，選出 優良題目。
二、 試題難度、鑑別度、誘答力之分析
本研究採用Excel 2003 作為資料蒐集工具，利用 Excel VBA 自行設計程式軟體檢測 每個試題的難度、鑑別度與誘答力之分析，其檢驗步驟如下：
步驟一： 試卷評分並計算每位學生總分。
步驟二： 將每人總分由高分至低分排序，選定前27%者為高分組，後 27%者為低分組。
步驟三： 計算每一試題高分組答對百分比PH及低分答對百分比PL。 步驟四： 計算每題難度指標P PH PL
2
= + 。
步驟五： 計算每題鑑別度指標D P= H −PL。
步驟六： 偵測低分組在每一試題的選項分佈的誘答力。
步驟七： 試題的難度（Ｐ）指數值越高表示試題越簡單，優良試題評定標準以0.50 時最容 易區別受試者間的能力差異，一般選擇題之標準可接受的難度指數為0.40~.080（郭 生玉, 1996），而鑑別度指標的判斷依據 K.D. Hopkins(1998)提出的標準(凃金堂, 2009)，如表 3-6。
表3-6--鑑別度評鑑標準 鑑別度評鑑標準
鑑 別 度 指 標 試 題 鑑 別 度 評 鑑 篩 選 試 題 0.4 以上
0.3—0.39 0.1—0.29 0.01—0.10 0.01 以下
非常優良(極佳)
優良，但可能需要修改(佳) 尚可，但須局部修正(普通) 劣，需要刪除或修改(不好) 答案有誤或不明確(極差)
保留
保留或修改 修改
修改或刪除 刪除
【資料來源：參考凃金堂，2009】
‧
‧ 國
立 政 治 大 學
‧
N a tio na
l C h engchi U ni ve rs it y
學生在測驗完甲卷，可由 S-P 曲線分析圖察覺學生精熟程度，再對學生施以回饋與校 正的教學活動，經過校正與充實教學後進行第二次性成性測驗複本，最終應以平均答對率 80%為達到精熟程度標準。
(四) 分析試卷差異係數D*
當實際測驗得到S-P 表呈現完美量尺的反應組型時，差異係數 =0；當 S-P 表純粹是 由隨機造成的反應組型時，差異係數 會趨近於1。所以在一般情況下差異係數 值介於 0 到 1 之間，表示 S 與 P 兩曲線間有某種程度的分離。當試題群和學生群兩者均具有相當 的同質性時，以 ~0.5 間為標準即可，本形成性測驗卷的試題 K-R 信度與差異係數 如表3-7，表示本試題測驗內容符合學習目標、試題編排得宜且信度高。
D*
D* D*
D* 0.4 D*
表3-7—K-R 信度與差異係數D*
單元內容 K-R D* 單元內容 K-R D* 單元內容 K-R D* 單元內容 K-R D*
直角坐標系 數與式 直線 排列與組合
三角函數 複數 線性規劃 機率
0.73 0.42 0.73 0.46 0.77 0.45 0.69
三角形解法 指數與對數 圓 導函數
積分及應用
向量 數列與級數 圓錐曲線
0.46
四、 學生回饋與校正
學生作答結果經由電腦處理產生糾正表有三，其一記錄受試學生個人學習糾正錯誤題 型表及針對錯誤重點提示。其二針對多數學生錯誤題型製作成教學糾正表。其三提供整理 後的完整糾正總表。教師可由學生糾正錯誤題型表立即提供受試學生完整詳細解題過程與 答案，以及根據教學糾正表對受試學生進行錯誤觀念的釐清，受試學生若仍有疑問處，可 透過同學間互相討論或教師個別的指導將問題確實解決，期能在最短時間內改正學習錯 誤，教師再參考糾正總表篩選出對反應組型異常的同學(即 )，進一步了解異常的原 因給予輔導和協助。
5 . 0 CS≥
五、 編製學生學習成就、遷移記錄表
將學生多次的形成性測驗的診斷分析圖及 S-P 表編製成學生學習成就、遷移記錄表，
從記錄表中分析個別學生學習遷移之變化，界定該生是屬於學習穩定型、不足型、上升型、
下降型等，以便進行個別補救教學和輔導。