國中基測 DIF 相關研究

國中基測成績為我國現行升學制度當中高中多元入學管道申請的依據，家長 與考生都相當重視測驗的結果，因為攸關每年大約三十萬考生的權益，其測驗效 能便顯的相當重要；因此，測驗的「公平性」就成為了一個重要的研究議題。心 測中心每年出完基測題目後，都會請專家審題，儘量排除有性別、城鄉差距的題 目，但一些題目連專家都看不出有問題，因此，有待透過 DIF 分析檢測挑出這類 試題做研討。男女生學習成就差距為國際間教育界所關注，一些國際性的學生學 習成就調查研究都專章報告男女學生的學習成就，反觀國內性別學習差異的研究 則較受忽略。

近幾年國內對於差異試題功能（DIF）的研究有增多的趨勢，但是大都偏向 性別方面，對於地區性的研究則較為少見。DIF 分析方法為學者自美國引進，但 相形之下國內卻較不重視這個議題，有關國中基測的 DIF 實徵分析研究目前為止 並沒有很多，碩士論文部分僅見蘇旭琳（2006）以視障生和普通生在國中基測數 學科為例來研究 DIF 分析在小樣本情境中的效果，以及王嘉寧（2007）以 90 至 95 年國中基本學力測驗地理科試題為例來探討影響試題差異功能的試題特徵；期 刊、研討會部分則有曾建銘（2005）以 93 年第一次國中基本學測數學科試題為 例來研究區域性 DIF 分析，余民寧和謝進昌（2006）以 91 年度兩次國中基本學 力測驗五個考科來探討區域 DIF 實徵分析，盧雪梅連續三年分別針對 90 至 94 年 國民中學學生基本學力測驗五大考科進行性別差異與差別試題功能（DIF）分析，

分別為國文科和英語科（盧雪梅，2007）、數學科（盧雪梅、毛國楠，2008a）、

自然科（盧雪梅、毛國楠，2008b）以及社會科（盧雪梅，2009）。

茲將上述國中基測 DIF 相關研究之內涵簡述如後：

一、 DIF 分析在小樣本情境中的效果—以視障生和普通生在國中基測數學科之 DIF 為例（蘇旭琳，2006）

研究目的在於探討焦點組一百人的情況下偵測 DIF 的偵測效果，希望能了解 增加參照組人數、調整能力分組組數等策略是否能提升偵測效果。

研究結果顯示：在焦點組一百人且能力有差異的情況下，能力分組組數以兩 組的結果最能夠兼顧正確偵測率和第一類型錯誤率。在焦點組一百人的情況下，

樣本人數比例和能力差異是影響偵測效果的主要因素；在焦點組五百人的情況 下，方法和試題 DIF 比率是影響偵測效果的主要因素；若控制在能力有差異的情 況下，對於焦點組人數較少（如一百人時）時採用 MH-2 搭配樣本人數 100/1000

（焦點組/參照組）的組合具有較佳效能，可以達到正確偵測率 0.703、第一類型 錯誤率 0.073 的結果。最後發現九十四年和九十五年第一次國中基測數學科當中 各有兩題、一題產生 DIF，並對於可能原因進一步予以解釋。

二、 影響試題差異功能的試題特徵探討─以 90-95 年國中基本學力測驗地理科 試題為例（王嘉寧，2007）

研究主要目的是以 MH 法及 Rasch 定題法分析 90-95 年國中基本學力測驗社 會科地理試題的試題差異功能(differential item functioning; DIF)，並改編地理科測 驗來操弄試題的文字及圖片屬性，以了解試題屬性對 DIF 程度之影響。

研究結果顯示：在 90-95 年國中基本學力測驗社會科的地理試題中，有 DIF 現象的試題目約佔地理科試題總題數的二成，其中大部份為輕度的 DIF 試題。從 90-95 年國中基本學力測驗社會科地理試題以及研究者自行設計的地理科測驗中 所進行的 DIF 分析顯示，當試題中含有與受試者所居住的地區特性相關的「特定 文字」時，其 DIF 試題比例會高於其它類型的試題。對 MH 法及 Rasch 定題法之 偵測結果進行羅吉斯迴歸分析時，顯示試題的上述「特定文字」能有效預測 DIF 試題的發生。

三、 數學科區域性試題差別功能(DIF)之分析與研究─以 93 年第一次國中基本 學測數學科試題為例（曾建銘，2005）

試題分析結果發現，以 Rasch 難度而言最難的題目為簡單為第一題─難度為 -2.367，最困難為第 32 題─難度為 1.36，平均為-.667，整份試卷的難易度為中間 偏易，符合國中基本學力測驗的目標，題目難易度的排列大致符合由易漸難的原 則。在鑑別度方面，鑑別度最高的題目為第 7 題其值為.72，鑑別度最小的題目為 第 30 題其值為.27，平均為.57。

經 SIBTEST 分析後，在所有 32 個試題中，共有 7 題─3, 5, 7, 13, 22, 23, 29 在不同的區域間被發現呈現 DIF，其中第 3 題及第 5 題在東區(及離島)與其它三 區皆呈現 DIF。呈現 DIF 最多的是東區(及離島)與南區共有 4 題；呈現 3 題 DIF 的有東區(及離島)與北區、東區(及離島)與中區；其餘三組則都只有 2 題，整體而 言比率介於 6.25%和 12.5%之間。結果中發現具有相同能力的學生，在西部的學 生明顯優於東部(及離島)，是社會環境、文化或教法使然，值得進一步探討。

四、 國中基本學力測驗之 DIF 的實徵分析：以 91 年度兩次測驗為例（余民寧、

謝進昌，2006）

研究主要目的為探討國中基本學力測驗不同考區間存在的 DIF 現況，以 91 年度兩次測驗之實徵資料為例，採 MH 法進行試題的檢定，同時搭配 ETS DIF 分 類系統，針對 DIF 試題進行分類，欲呈現一客觀及多角度的 DIF 檢定報告。

研究結果顯示：不同考區間 DIF 檢定情況，大致可獲得滿意的結果，其中以 第二比較組（基隆與嘉義）DIF 情況較嚴重；科目間，以社會科第一次測驗 DIF 整體現象最高。此外，91 年國中基測中仍存有少數偏高 DIF 比率的科目，且多數 存在著一致性的有利或不利於某考區的現象。最後發現採 MH 法進行 DIF 檢定 時，同時搭配 ETS DIF 分類系統，較不受樣本因素影響，可得到一客觀、可信的 DIF 指標。

五、 國民中學學生基本學力測驗國文科和英語科成就性別差異和性別差別試題 功能(DIF)分析（盧雪梅，2007）

研究分析 90 到 94 年度國民中學學生基本學力測驗國文科和英語科成就性別 差異和性別差別試題功能。

在成就差異分析方面，研究發現國文科和英語科的性別差異組型非常相似，

具體言之，女生表現一致顯著高於男生，男生個別差異皆較女生略大些，兩科之 低成就組以男生居多，高成就組以女生居多，不過高成就組男女生人數比例差距 不及低成就組大。

在性別 DIF 分析方面，國文科 DIF 出現率約為 7.5%，有利男生者和女生者 個半；英語科 DIF 出現率則不到 1%，有利女生者佔 0.7%，有利男生者佔 0.2%。

不同內容類型試是的 DIF 出現率不等，國文科以「組織結構」、「詞語」、「字 音、字形、字義」和「段篇」題的出現率較高些；英語科 DIF 題都來自「生活情 境閱讀」題。

六、 國中基本學力測驗數學科之性別差異與差別試題功能（DIF）分析（盧雪 梅、毛國楠，2008）

整體數學表現的性別差異分析結果顯示：全體受試和低成就組無顯著的性別 差距出現，高成就組的男生表現略高於女生；此外，男生分數的變異程度較女生 大，低成就組和高成就組的男生人數比例都高於女生，高成就組又比低成就組更 高些。

分項表現的性別差異分析結果顯示：全體受試的男生在問題解決的表現略高 於女生，其餘分項皆無顯著的性別差距出現；高成就組男生在幾何的表現略高於 女生，其餘分項皆無顯著的性別差距出現；低成就組在所有的分項皆無顯著的性 別差距出現。

在性別 DIF 分析部分採 Mantel-Haenszel 法評估 DIF，分析結果顯示：基測

數學科性別 DIF 出現率為 2.5%，DIF 題數量雖不多，但性別 DIF 與試題特徵似 有關聯，具體而言，代數 DIF 題傾向對女生有利，幾何和問題解決 DIF 題傾向 對男生有利。

七、 國中基本學力測驗自然科之性別差異和差別試題功能（DIF）分析（盧雪 梅、毛國楠，2008）

自然科整體表現的性別差異分析結果顯示：全體受試並無顯著的性別差異出 現，低成就組（後10%）女生的表現較佳，高成就組（前10%）男生的表現較佳。

分科表現的性別差異分析結果顯示：全體受試的女生在健康教育表現較佳，

男生在物理和地球科學表現較佳，男女生在生物和化學則無顯著的差異；低成就 組女生在健康教育的表現較佳，其餘科目則無顯著的性別差異出現；高成就組女 生在健康教育的表現較佳，男生在物理的表現較佳，其餘科目則無顯著的性別差 異出現。

在性別DIF分析上採Mantel-Haenszel法評估DIF，分析結果顯示：在分析的575 題中計52 題出現DIF，DIF出現率約為9%，在探討之試題特徵中以科目對DIF量 數影響最明顯，其中健康教育、化學和生物DIF題有利女生居多；地球科學和物 理DIF題則有利男生居多。

八、 國中基本學力測驗社會科之性別差異和差別試題功能（DIF）分析（盧雪 梅，2009）

社會科整體表現的性別差異分析結果顯示：就全體受試來說，女生表現略高 於男生，低成就組（後10%）也是女生的表現高於男生，高成就組（前10%）則 無顯著的性別差異出現。

分項表現的性別差異分析結果顯示：全體受試和低成就組的女生在公民科、

概念理解和純文字敘述題的表現高於男生。高成就組女生在公民科的表現高於男

生，男生則在地理、概念理解和附圖題的表現高於女生。

在性別DIF分析上採Mantel-Haenszel法評估DIF，分析結果顯示：基測社會科 DIF出現率約為8.3%，在探討的試題特徵中以科目對DIF量數影響最明顯，其中公 民科DIF題（100%）皆有利女生，歷史和地理科DIF題則有利男生居多，分別為 73.2%和80.0%；值得注意的是，有利男生之歷史DIF題中有45%試題內容是關於

在性別DIF分析上採Mantel-Haenszel法評估DIF，分析結果顯示：基測社會科 DIF出現率約為8.3%，在探討的試題特徵中以科目對DIF量數影響最明顯，其中公 民科DIF題（100%）皆有利女生，歷史和地理科DIF題則有利男生居多，分別為 73.2%和80.0%；值得注意的是，有利男生之歷史DIF題中有45%試題內容是關於