• 沒有找到結果。

幼兒推論理解測驗之信度考驗

第四章 研究結果與討論

第二節 幼兒推論理解測驗之信度考驗

本節以四部分呈現研究結果,包含:控制施測過程、試題難度與鑑別度指數 分析、信效度研究。

一、控制施測過程

本測驗係標準化測驗,需控制測驗過程之一致性,故進行研究預試前撰寫施測 指導語及測驗注意事項。並對試題內容進行語音錄音。語音錄音人員需修習完成國 語正音課程之女大學生,保證錄音品質。錄音階段,將試題內容以語音秒速 120BPM

(每秒三個字)錄製具有抑揚頓挫之試題語音檔案。另外,參與此測驗之施測人員 皆須參加施測人員訓練,以確保施測人員瞭解並熟悉本測驗之施測程序。

二、難易度與鑑別度指數的分析

檢驗本測驗之難易度與鑑別度之目的有三。第一為「確認本測驗能是否具備良 好的鑑別力」,第二為「根據施測結果進行刪除或修正試題」,第三為評估「開發 測驗複本」的有效性。在正式施測後,幼兒推論理解測驗分為甲、乙兩式,以總得 分之正負三個標準差檢驗極端組,檢驗結果顯示甲式 0 名,乙式 1 名,並以刪除極 端值後之資料進行試題之信效度分析,甲式計 133 名,乙式計 101 名。

甲式整體結果顯示,試題難易度指數範圍介於 0.40~0.86,總平均為 0.60,顯 示試題難易度部分偏向簡單,但根據測驗試題評量之試題難易度指數建議在 0.4~

0.8 者為最佳,本測驗甲式大致符合此原則。經查後,甲式試題之難易度高於 0.8 之 試題計兩題,分別為 8-1 題及 11-2 題。從表 4-1-1 可以得知甲式難易度偏易。乙式 整體結果顯示,試題難易度指數範圍介於 0.41~0.95,總平均為 0.57,顯示試題難 易度部分偏易,經查後,乙式試題之難易度高於 0.8 之試題計兩題,分別為 4-1 題及 11-1 題。甲、乙式之試題難易度數值如下頁 4-2-1 表所述。

54

表 4-2-1

幼兒推論理解甲、乙正式試題難易度一覽表

甲式 乙式

題組 難易度 題組 難易度 1-1 .421 1-1 .683 1-2 .691 1-2 .797 2-1 .421 2-1 .470 2-2 .616 2-2 .619 3-1 .400 3-1 .792 3-2 .556 3-2 .594 4-1 .465 3-3 .589 4-2 .688 4-1 .886 5-1 .406 4-2 .594 5-2 .571 5-1 .525 6-1 .560 5-2 .475 6-2 .541 6-1 .436 7-1 .519 6-2 .545 7-2 .759 7-1 .391 8-1 .838 7-2 .441 8-2 .650 8-1 .490 9-1 .774 8-2 .703 9-2 .789 9-1 .515 10-1 .504 9-2 .901 10-2 .639 10-1 .426 11-1 .492 10-2 .564 11-2 .872 11-1 .960 12-1 .537 11-2 .490 12-2 .684

在鑑別度考驗方式,因為本測驗為多點量表,不適合以鑑別度 D 值考驗測驗試 題之鑑別度,因此以極端組比較作為本測驗鑑別度考驗方式。甲式整體結果顯示,

t 檢定未達.05 顯著水準計有 4 題,顯示此題無法鑑別出高低分者,乙式部分計有 9 題。經查後,甲式不良試題為 3-1、5-1、7-1、11-2 題,乙式為 1-2、3-1、3-2、3-3、

4-2、8-1、9-1、11-1、11-2 題。由研究結果顯示,甲式之試題鑑別度較乙式優良。

甲、乙兩式以極端組比較考驗結果如下表 4-2-2、4-2-3 所示。

表 4-2-2

甲式極端組比較考驗結果一覽表

變異數相等的 Levene 檢定 平均數相等的 t 檢定 題號 F 檢定 顯著性 t 自由度 顯著性

(雙尾) 平均差異 標準誤差異 1-1 2.276 .134 4.367 131 .000 .569 .130 1-2 .742 .391 3.188 131 .002 .384 .120 2-1 4.243 .041 5.578 131 .000 .691 .123 2-2 13.765 .000 3.802 131 .000 .571 .150 3-1 15.706 .000 1.809 131 .073 .153 .084 3-2 4.006 .047 4.521 131 .000 .476 .105 4-1 36.422 .000 2.601 131 .010 .183 .070 4-2 10.150 .002 5.087 131 .000 .614 .120 5-1 .458 .500 1.596 131 .113 .210 .131 5-2 .203 .653 3.560 131 .001 .409 .114 6-1 1.542 .217 6.041 131 .000 .764 .126 6-2 3.374 .069 4.886 131 .000 .605 .123 7-1 .372 .543 2.089 131 .039 .128 .061 7-2 14.533 .000 3.190 131 .002 .384 .120 8-1 42.670 .000 3.168 131 .002 .332 .105 8-2 11.846 .001 5.622 131 .000 .753 .134 9-1 9.388 .003 5.810 131 .000 .529 .091 9-2 15.744 .000 3.016 131 .003 .339 .112 10-1 4.059 .046 2.793 131 .006 .348 .124 10-2 3.268 .073 4.814 131 .000 .560 .116 11-1 10.745 .001 2.333 131 .021 .155 .066 11-2 18.370 .000 1.810 131 .073 .135 .075 12-1 .150 .699 8.958 131 .000 .957 .106 12-2 3.802 .053 3.085 131 .002 .388 .125

56

表 4-2-3

乙式極端組比較考驗結果一覽表

變異數相等的 Levene 檢定 平均數相等的 t 檢定 題號 F 檢定 顯著性 t 自由度 顯著性

(雙尾) 平均差異 標準誤差異 1-1 12.006 .001 3.246 99 .002 .5119 .157 1-2 11.497 .001 1.858 99 .066 .2129 .114 2-1 .306 .581 3.134 99 .002 .4886 .155 2-2 .688 .409 4.133 99 .000 .5729 .138 3-1 5.204 .025 1.069 99 .288 .0917 .085 3-2 .510 .477 .341 99 .734 .0356 .104 3-3 .005 .945 1.987 99 .050 .2634 .132 4-1 43.866 .000 2.784 99 .006 .2989 .107 4-2 3.994 .048 .952 99 .343 .1598 .167 5-1 1.956 .165 2.889 99 .005 .2801 .096 5-2 1.508 .222 3.646 99 .000 .4737 .129 6-1 .017 .895 4.981 99 .000 .7261 .145 6-2 .272 .603 5.834 99 .000 .7081 .121 7-1 .163 .687 2.136 99 .035 .3284 .153 7-2 3.118 .081 3.493 99 .001 .5338 .152 8-1 6.337 .013 1.592 99 .115 .1629 .102 8-2 24.903 .000 4.689 99 .000 .6738 .143 9-1 .820 .367 .806 99 .422 .0882 .109 9-2 15.163 .000 1.994 99 .049 .1493 .074 10-1 .313 .577 4.520 99 .000 .7116 .157 10-2 16.383 .000 3.387 99 .001 .6484 .191 11-1 9.650 .002 1.455 99 .149 .0597 .041 11-2 .309 .580 .507 99 .613 .0742 .146 三、信度研究

信度是測驗工具的重要評量指標,用以檢驗測驗工具之穩定性與可靠性。考 驗信度的方法很多,本研究以內部一致性與折半信度方法,檢驗測驗工具信度。

(一)內部一致性

內部一致性信度是指運用統計方法估計各試題之間同質性的程度。幼兒推論理 解測驗有甲、乙兩式,各式 12 組試題,以下將以內部一致性考驗甲、乙兩式之總 測驗。結果顯示甲式Cronbach’s α 信度係數為 0.77,乙式為 0.72。顯示本測驗甲、

乙兩式之信度皆高於 0.70,顯示甲乙兩式信度為佳。

由表 4-2-4 顯示幼兒推論理解測驗兩項推論類別表現與總得分之內部相關矩 陣結果。結果顯示,甲式文本推論類別得分與總得分之相關係數為 0.93 和 0.86,

背景知識推論與文本推論之間的相關係數則為 0.62,各項數值皆達 0.01 顯著水 準;乙式背景知識推論與總分之相關係數為 0.88 和 0.89,背景知識推論與文本推 論之間的相關係數則為 0.59,各項數值皆達 0.01 顯著水準。研究結果顯示,本測 驗幼兒推論理解測驗之題本內部結構一致性高,可測量幼兒「推論」的特質,並可 由總分初步瞭解幼兒在聽覺歷程中之推論理解表現情形。

表 4-2-4

幼兒推論理解測驗正式試題分測驗與總分之相關矩陣

式別 文本推論類別 背景知識推論類別 總分

甲式

文本推論類別 1 - -

背景知識推論類別 0.63(**) 1 - 總測驗 0.93(**) 0.86(**) 1

乙式

文本推論分類別 1 - -

背景知識推論類別 0.56(**) 1 - 總測驗 0.87(**) 0.89(**) 1

** p<.0

(二)折半信度

折半信度方法係運用統計方法,將試題分成兩部分,計算兩部分總分的相關係 數,估計各試題之間同質性的程度。本研究考驗測驗工具之折半信度原因有二,第 一,當測驗試題數越多時,測驗試題的Cronbach’s α 信度係數會越高,理論上折半 信度的係數會比Cronbach’s α 信度係數來的低;若本測驗考驗後所得之折半信度與 整體試題的Cronbach’s α 信度係數沒有太大的差異,則能證明本測驗的內部一致性 良好。第二,本測驗係一次性測驗,在本研究中未能開發複本,亦因為人力與時間 限制,未能進行再測信度與複本信度考驗,因此使用折半信度考驗甲、乙兩式之信 度。本測驗之甲、乙兩式,皆使用單數題與雙數題方式將試題分為兩部分考驗折半 信度,分析結果顯示,甲式折半係數為.68,乙式為.68。整體而言,甲、乙兩式之 Cronbach’s α 信度係數,皆比折半信度係數高,甲式 Cronbach’s α 係數為 0.76,高

58

於折半信度係數 0.68;乙式 Cronbach’s α 係數為 0.74,高於折半信度係數 0.70。以 結果來看,甲、乙兩式之折半係數皆在 0.65 以上,表示本測驗之內部一致性尚在可 接受範圍。