試題性質分析

本節就四年級閱讀理解測驗施測後所獲得的資料，進行試題分析，以驗證 此份試題的適切性。以下就分析結果所得之信度、效度及使用古典測驗理論

（CTT）所得之鑑別度、難度，還有試題反應理論（IRT）所得之鑑別度、難 度、猜測度等逐項進行探討。

壹、信度分析

從測量的一致性來看，信度是指受試者在不同時間，以相同試題測量或相 等試題測量（複本測驗），所得結果的一致性；而從測量誤差的觀點來看，信 度是指測驗能反映受試者真實能力的程度（郭生玉，2004）。估計信度的方法 主要有重測方法、複本方法、內部一致性方法及評分者方法。其中內部一致性 方法可以只根據一次測驗結果去估計信度。

本研究採用以內部一致性信度（Cronbach's Alpha）作為檢定測驗內每題 試題的一致性指標，由表 4-1-1 可知本研究之信度為.907，依據郭生玉（2004）

所提出，.90 以上具有高信度水準，.80 或以上可視為中等到高的信度水準，而.70 則屬於低信度水準。本研究依此標準來看，具有高信度，而從表 4-1-2 資料顯 示，本研究信度介於.904～908 之間，也沒有因為刪題而造成 Cronbach’s α 值 異常變化的狀況，顯示本研究之試題具有良好信度。

80 Cronbach's Alpha

值

題號 項目刪除時的 Cronbach's Alpha

值

82

貳、效度分析

效度為測驗分數的正確性，也就是一個測驗能夠測量到它要測量的能力之 程度（郭生玉，2004）。本研究採用專家效度，主要由任教於語文領域達 5 年 以上之國小老師審查本研究之試題，建議刪除及修改之試題已於正式施測前進 行試題刪改及修改。

參、古典測驗理論（CTT）試題分析

本測驗依據正式施測結果，採用古典測驗理論（CTT）進行試題參數分析。

以下為本測驗之 CTT 試題參數的分析結果。

（一）難度

難度分析主要計算受試者前 27%高分者答對百分比與後 27%低分者答對 百分比之平均，以答對百分比表示難度，難度值介於 0 到 1 之間，其值越大，

表示試題越容易，由表 4-1-3 可看出本測驗之難度平均為.669，表示試題內容 屬於中間偏易。

（二）鑑別度

鑑別度主要在確定題目是否能有效區分高低能力者，鑑別指數介於-1.00

～+1.00 之間，指數越高，表示鑑別度越好，由表 4-1-3 可得本測驗之平均鑑 別度為.418，依照美國測驗學者 Ebel & Frisbie（1991）所提出的鑑別度建標 準，鑑別度在.40 以上為非常優良試題；介於.30 ～ .39 列為優良試題；介於.20

～ .29 列為尚可，但需作局部修改；.19 以下，屬於需要刪除或修改的劣質試 題，依據此標準，本測驗為鑑別度高的優良測驗，表 4-1-4 說明本測驗鑑別度 等級分布，顯示本研究 88%為優良試題。除第 30 題以外，其餘試題鑑別度均 達.2 以上。表 4-1-5 將進一步分析第 30 題之內容，其說明如下：

表 4-1-3

國小四年級閱讀理解測驗 CTT 試題參數表

題號 鑑別度 難度 題號 鑑別度 難度 1 .419 .743

30 .145 .458

2 .397 .665 31 .363 .730 3 .466 .692 32 .659 .596 4 .344 .542 33 .530 .687 5 .203 .864 34 .405 .580 6 .317 .603 35 .433 .750 7 .420 .566 36 .587 .523 8 .349 .730 37 .445 .771 9 .550 .460 38 .620 .547 10 .626 .646 39 .389 .350 11 .352 .776 40 .505 .645 12 .350 .634 41 .618 .576 13 .332 .262 42 .622 .607 14 .312 .756 43 .533 .659 15 .488 .600 44 .483 .656 16 .411 .754 45 .535 .719 17 .255 .750 46 .200 .900 18 .356 .652 47 .404 .757 19 .336 .805 48 .297 .845 20 .296 .770 49 .359 .780 21 .358 .794 50 .502 .681 22 .464 .632 51 .334 .826 23 .332 .521 52 .418 .757 24 .389 .758 53 .386 .460 25 .358 .794 54 .423 .619 26 .468 .589 55 .462 .742 27 .519 .482 56 .409 .775 28 .479 .706 57 .429 .704 29 .621 .622 58 .208 .889

84

（2）高分組通過率為.531，低分組通過率為.385，難度為.458

（3）由上述數據可知，本測驗具有很高之誘答力，高分組選對的人

85

難度介於-2.106~1.955，平均難度為-.400；猜測度介於.109~.360 之間，平均猜 測度為.240。

86

題

號 鑑別度 難度 猜測度 通過率 題

號 鑑別度 難度 猜測度 通過率 23 .671 1.142 .306 .537 52 1.019 -1.095 .201 .776 24 .770 -1.098 .222 .752 53 1.290 1.096 .266 .452 25 .898 -1.388 .237 .807 54 .706 .246 .314 .632 26 .606 -.302 .183 .627 55 1.088 -.962 .202 .764 27 1.245 .811 .246 .485 56 1.125 -1.166 .187 .793 28 .897 -.568 .251 .709 57 .692 -.662 .240 .699 29 1.067 -.351 .207 .668 58 .859 -2.026 .225 .862

進一步分析本測驗之鑑別度分布，IRT 之鑑別度 a 值的值域介於±∞之間，

但在實務上，a 值的值域僅取大於 0 的部分，且常用的 a 值範圍介於 0 到 2 之 間，a 值越大，代表試題的鑑別度越好（余民寧，2009）。從圖 4-1-1 可看出本 測驗鑑別度之分配大多介於.5～1.0 之間，共有 36 題，占 62%，而鑑別度.5 以 上的題目共有 56 題，占 97%。

圖 4-1-1 國小四年級閱讀理解測驗之試題鑑別度分析圖

0 5 10 15 20 25 30 35 40

0.5以下 0.5~1 1.0以上

題數

組界 鑑別度

而難度 b 值的值域也是介於±∞之間，在實務上通常只取±3 之間的範圍，b 值越大表示試題越困難，反之，則表示試題越簡單（余民寧，2009）。從圖 4-1-2 來看，本測驗之試題難度介於-2.5～2.0 之間，其中難度參數大於 1.0 屬於偏難 題目共有 6 題，占全體試題 10%；難度參數介於-1.0～1.0 之間屬於難度適中 的題目，共有 35 題，占 60%；難度參數小於-1.0 屬於偏易之試題，共有 17 題，

占全體試題的 29%。整體而言，本測驗之試題屬於中間偏易之試題。

圖 4-1-2 國小四年級閱讀理解測驗之試題難度分析圖

接著說明本測驗猜測度 c 值的分布。一般來說 c 的數值比受試者在完全隨 機猜測下猜對的機率要小一些，也就是，通常 ≦ ， 代表試題 i 的選項項 目（余民寧，2009）。本測驗為四選一之選擇題，故猜測度 c 值應低於.250，

本測驗之猜測度介於.109～.360 之間，顯示部分試題的猜測度略高，但平均的 猜測度為.240，仍在符合範圍內。

0 2 4 6 8 10 12 14

題數

組界 難度

88

圖 4-1-3 國小四年級閱讀理解測驗之試題猜測度分析圖

由上述的古典測驗理論（CTT）所得之鑑別度、難度，還有試題反應理論

（IRT）所得之鑑別度、難度、猜測度均發現本測驗均有良好鑑別度，難度適 中，但容易的題目比困難的題目多，在猜測度上也符合標準，而在信度及效度 上亦有一定的品質。

0 5 10 15 20 25 30

題數

組界 猜測度

第二節 整體閱讀理解能力及各項閱讀理解能力的表現分析

在文檔中 國小四年級電腦化適性閱讀理解測驗編製與開發 (頁 88-98)