• 沒有找到結果。

正式量表信度 正式量表信度 正式量表信度 正式量表信度、 、 、 、效度及試題分析 效度及試題分析 效度及試題分析 效度及試題分析

參、試題反應考驗

第二節 正式量表信度 正式量表信度 正式量表信度 正式量表信度、 、 、 、效度及試題分析 效度及試題分析 效度及試題分析 效度及試題分析

經歷上述檢驗,研究者發現 Item 23 是有瑕疵的,因其適配度不佳,所以後 來決定將 Item 23 從量表中刪除,以維持量表品質。

第二節 第二節

第二節 第二節 正式量表信度 正式量表信度 正式量表信度 正式量表信度、 、 、 、效度及試題分析 效度及試題分析 效度及試題分析 效度及試題分析

本研究的預試量表共有 25 道試題,在做完預試試題分析並刪除品質不佳的 1 道試題後,共剩下 24 道試題。研究者原先是想以這 24 道留存下來的良好試題編 排成正式量表,但顧慮到通常多元計分量表長度皆不會太長,且目前一般大學在 讓學生填寫量表時,量表題項多在 10 題左右,像是各大學每學期要求學生填答

的教學滿意度量表就是以 10 個問項為基準,因為有精簡性的考量,擔心量表試 題過多會影響受試者作答,再加上其實這 24 道試題所測量之面向有部分重疊的 情況,所以研究者便又加入「代表性」這個篩選指標,據此更進一步刪減試題。

為了區辨受試者能力並確實測量到所欲測量之特質,研究者希望最後留下來 的試題是有難、有易且涵蓋所有子向度的,因此以試題的難度分配及分測驗中各 個子向度的涵蓋情形,作為「代表性」的主要考量,進而篩選出 10 題代表性較 高的試題,完成自編之「大學生全球視野能力量表」最終版本。

壹、信度考驗

本量表以軟體 ConQuest 執行 RSM 模式分析,再依據分析所得的受試者能力 估計值及估計標準誤,算出正式量表之條件信度,結果顯示平均信度值為 0.80。

貳、效度考驗

「大學生全球視野能力量表」是經過歷年文獻探討、學者專家審查、預試試 題分析,再以專家意見與分析數據進行修正、刪除不良試題等多道程序發展而 來,因此具有一定的內容效度。

另外,研究者使用軟體 Mplus 3.1 執行量表驗證性因素分析(CFA),結果 顯示 TLI=0.956,落在 Heck & Thomas(2000)所建議的標準範圍內(即 TLI

>0.9),顯示適配度頗佳,因此可推論本量表具有不錯的建構效度。

參、試題反應考驗

一、代表性分析

為能有效測量大學生之全球視野能力並兼顧量表的精簡性,研究者特別考量 了試題的代表性,以試題的難度分配及分測驗中各個子向度的涵蓋情形,作為最

終選題的重要參考。正式量表中試題向度與難度分配情形如表 6 所示。

力值最高為 2.99、最低為-2.18,受試者平均能力為 0 ;試題難度值最高達 0.73、

因此可推論本量表具有客觀及等距的特性。

四、試題 DIF 檢驗

研究者以軟體 ConQuest 進行量表試題之 DIF 檢測,檢測結果如表 8 所示。

表表表

表 8 正式量表試題性別 DIF 檢測結果

項目 估計值(男性) 估計值(女性) DIF 量 DIF 檢測結果 Item 1 0.031 -0.031 0.062 無 Item 2 0.040 -0.040 0.080 無 Item 3 -0.022 0.022 0.044 無 Item 4 -0.017 0.017 0.034 無 Item 5 -0.002 0.002 0.004 無 Item 6 0.017 -0.017 0.034 無 Item 7 0.005 -0.005 0.010 無 Item 8 -0.015 0.015 0.030 無 Item 9 -0.002 0.002 0.004 無 Item 10 -0.036 0.036 0.072 無

由表 8 可知,正式量表中的 10 道試題之 DIF 量皆小於 0.5(即 0.5 個 logit),

代表每一試題對於不同性別的受試者不存在 DIF,也就是說本量表試題的 DIF 檢 測全數過關,每道試題對男、女受試者而言,都是客觀公平、品質優良的。