• 沒有找到結果。

至 97 年基測自然科試性別 DIF 情形

第四章 結果與討論

第五節 95 至 97 年基測自然科試性別 DIF 情形

本節主要就「國中基測推動委員會」提供的95至97年度共六次各5000筆資料 加以整理分組,並運用不同DIF試題偵測方法來分析了解國中基測自然科性別DIF 情形,以及分析性別DIF題目在十三個知識主題及五大課題所佔的分配百分比。

本研究呈現五種DIF偵測方法之結果,將其中呈現出兩種DIF情形的試題列為「可 疑DIF」,並將Crossing SIBTEST、SPSS MH、EZDIF MH三種方法皆偵測到DIF 的試題列為「嚴重DIF」。在性別DIF中,分為配組前(即所有有效樣本)及配組 後之資料分別偵測性別DIF試題,以了解配組與否對DIF偵測結果的差別。

將配組前的資料偵測出DIF試題的結果整理如附錄四。依照男女性別分數組 別中人數較少的數量,來隨機選取分數組別中人數較多的試題反應資料筆數,依 據各階段性別人數配組後的DIF偵測結果列於附錄五。將配組後嚴重性別DIF的 Alpha及MH D-DIF數值整理於附錄六。由附錄四及附錄五可看出性別配組前後的 DIF偵測結果有些許不同。與區域DIF試題出現比率來做比較,發現性別DIF出現 比率高出許多。配組前可疑性別DIF試題共115題,占全部試題的33.05%,ETS分 類系統歸類為B或C類的試題共28題,佔全部試題的8.05%;配組後可疑性別DIF 試題共111題,占全部試題的31.90%,ETS分類系統歸類為B或C類的試題共25題,

佔全部試題的7.18%。Dorans & Holland(1993)於DIF研究分析中也曾提及MH法 於樣本人數大時易檢定出較多的DIF試題,樣本多時,即使是微小的差異,也會 達到統計上的顯著性,但不見得具有實質上的差異,因為男女兩組樣本人數在 2,500人上下,只依據統計檢定結果容易得到大量的DIF題而影響DIF偵測效果,

但搭配ETS的嚴重分類系統時,因其較不受樣本大小影響,較能發揮其功效。其 中EZDIF LR檢測出DIF的試題分別多達23題(配組前)及22題(配組後)未跟其 他DIF偵測方法結果重疊,DIF偵測方法的一致性將於第六節中討論。

由五種DIF偵測方法挑出之配組前性別DIF試題彙整如附錄七,配組後性別 DIF試題彙整如表4-18。

表4-18 五種DIF偵測方法挑出之配組後性別DIF試題

方法 DIF試題 嚴重性別DIF試題

95 (一)

Crossing SIBTEST

SPSS MH

本研究運用五種DIF偵測方法,將前三種方法(Crossing SIBTEST、SPSS MH、

EZDIF MH)皆偵測到DIF的試題列為「嚴重DIF」,其中如果伴隨EZDIF ETS分類 之B類題目或是EZDIF LR其中一種,列為DIF「嚴重度較高」試題;而五種方法

範圍;而「地球的環境」、「改變與平衡」、「生態保育」、「環境保護」試題傾向對

歸類。試題表示法為「題號(有利哪一組)」,96-1-53、96-2-12、96-2-27 試 題涵蓋了兩種知識主題。有利性別以 EZDIF MH 中的 Alpha 及 D-DIF 值判斷。

將本研究中列為嚴重性別DIF試題的各項統計數值整理,配組前之DIF試題數 值整理如附錄十,各年度配組後之嚴重性別DIF數值分別列於表4-21、4-22、4-23。

表4-21 95年度國中基測自然科配組後嚴重性別DIF試題各項數值

Crossing SIBTEST SPSS MH EZDIF MH EZDIF LR

Group Trait×Group 試題

表4-22 96年度國中基測自然科配組後嚴重性別DIF試題各項數值

Crossing SIBTEST SPSS MH EZDIF MH EZDIF LR

Group Trait×Group 試題

表4-23 97年度國中基測自然科配組後嚴重性別DIF試題各項數值

Crossing SIBTEST SPSS MH EZDIF MH EZDIF LR

Group Trait×Group 試題

Beta-cro p-value χ2 p-value χ2 p-value

EZDIF ETS

Z p-value Z p-value 9 0.08 0.000 34.54 0.000 33.91 0.000 B 13 -0.08 0.000 60.52 0.000 58.36 0.000 CR 15 -0.05 0.005 13.00 0.000 12.72 0.000 22 -0.04 0.003 12.77 0.000 12.36 0.000 24 -0.07 0.000 26.07 0.000 26.89 0.000 2.90 0.004 -1.09 0.277 31 0.11 0.000 78.67 0.000 78.95 0.000 CF -0.08 0.936 -3.05 0.002 97

(一)

34 0.08 0.000 47.44 0.000 48.58 0.000 B

10 0.07 0.000 47.44 0.000 46.81 0.000 CF -3.18 0.002 1.34 0.182 11 -0.05 0.000 18.07 0.000 18.13 0.000

14 0.04 0.004 13.85 0.000 15.35 0.000

15 -0.06 0.000 25.26 0.000 23.64 0.000 4.25 0.000 -3.11 0.002 20 0.05 0.008 18.98 0.000 19.89 0.000 22 -0.04 0.000 8.82 0.003 9.00 0.003 27 0.07 0.001 44.60 0.000 45.44 0.000 B 38 -0.06 0.001 21.28 0.000 19.97 0.000 39 -0.08 0.000 27.94 0.000 28.44 0.000 51 0.07 0.000 25.91 0.000 26.84 0.000 52 0.07 0.005 21.24 0.000 21.91 0.000 53 0.07 0.000 28.25 0.000 28.80 0.000 97

(二)

55 0.06 0.000 35.06 0.000 35.82 0.000 B

將嚴重性別DIF試題依知識主題分類統計題數,由於有些分類試題數量原本 就比較多,因此出現DIF的機會相對也會較多,因此將各分類DIF試題數除以該分 類試題總數以進一步了解DIF試題於各知識主題分類出現的比例,將配組後性別 嚴重DIF知識主題分類結果列於表4-24,可看出「改變與平衡」每年皆有出現DIF 試題,且出現數量最多,共32題。95至97年度的配組後嚴重性別DIF試題共78(81,

因有3題DIF試題同時涉及兩個知識主題)題,占全部348題(78/348)的22.41%(因 95至97年度全部自然科試題中有6題涉及兩個知識主題,如以354題計算,出現比

率為81/354=22.88%)。其中以97年第一次出現性別嚴重DIF題數最少,96年第二

因十三個知識主題分屬五大課題,因此將配組後的嚴重性別DIF試題的分類 依照自然科五大課題來看,將嚴重性別DIF試題依五大課題分類統計數量,結果 列於表4-25。表4-25中可以看出在五大課題分類題數中,以「自然界的作用」題 數最多,共有49題。

表4-25 配組後嚴重性別DIF試題於五大課題分類結果

95(一) 95(二) 96(一) 96(二) 97(一) 97(二) 總題數 自然界的

組成與特性 1 4 2 6 0 3 16

自然界的作用 6 12 7 13 5 6 49

演化與延續 2 1 0 3 1 3 10

生活與環境 0 1 1 0 0 0 2

永續發展 1 0 1 0 1 1 4

台灣師範大學心理與教育測驗研究發展中心(簡稱心測中心)分析95到97年 第一次國中基測各分科題目在不同特性考生間是否有DIF現象,發現因性別差異 產生的DIF情形較明顯,各科之間以自然科對男生比較有利,174題中有10題DIF 試題,3題 不 利 男 生,7題 不 利 女 生(陳舜協,2008;曾國華,2008;薛荷玉,

2008)。 此研究也跟本研究發現國中基測自然科對男生較有利情形有一致結果,

但性別DIF試題數則有所差別,如以95到97年第一次的自然科配組後嚴重性別DIF 題目來看,本研究共有27題,而心測中心只有偵測出10題(與本研究中之嚴重DIF 有八題重疊,另外兩題本研究歸類為可疑DIF),細究其偵測方法為MH法及LR 法,且兩種效果量皆達B類嚴重程度時,才確認該試題為具有DIF試題,因此產生 和本研究不太相同之結果。