• 沒有找到結果。

第五章 結論與建議

第一節 研究結論與建議

本研究的主要目的是在比較不同局部試題依賴偵測方法之偵測效果的差異性,

包括兩個子研究,研究一的部份主要是先透過模擬研究的方式瞭解在不同情境之 下,各種局部試題依賴偵測方法的偵測效果如何,而研究二的部分主要就是利用 研究一的研究發現,確認在實徵資料分析後,研究者應該相信何種偵測方法的偵 測結果,主要的研究結論如下,將分成兩部分詳述之。

一、研究一結論

(一)Rasch 題組模式之試題參數回覆情形主要是受到受測者人數的多寡所影響,

人數越多,回覆情形就越佳,反之,則越差,其他如題組內試題數的多寡 及題組效果的高低則不會對其回覆情形產生影響。換句話說,不論題組內 的題目有多少或是題組的局部試題依賴情形是否嚴重,只要受測者人數夠 多,該模式之試題參數的估計就能夠很準確。

(二)Rasch 題組模式之題組效果變異數的回覆情形主要除了會受到題組內試題 數的多寡所影響之外,亦同樣會受到受測者人數的多寡及題組效果的高低 所影響,隨著題組內試題數及受測者人數的增加,其回覆情形將會越來越 好,所以說,只要在受測者人數及題組內試題數皆夠多,該模式對於題組 效果的估計就會很準確。然而,在低題組效果的情境下,題組效果均容易 被高估,而在高題組效果的情境下,題組效果卻會受到低估,且在高題組 效果的情境之下,Rasch 題組模式之題組效果的回覆情形均較低題組效果 的情境為差。

(三)不論在何種情境之下,分析者都可以根據此三種局部試題依賴偵測方法的 偵測結果,以一判斷標準來檢視題組是否有局部試題依賴的問題。惟根據 相對性比較的結果,研究者發現,不論是在何種情境之下,Q3 指標的偵

64 大致沒有局部試題依賴的情形,僅 93-2-3、93-2-5、93-2-6、94-1-8 及 97-2-3 可能是存有局部試題依賴的問題。研究者推測,造成這些題組存有局部試

65

題參數的估計能更加準確,最好能有 1500 名受測者。

(二)為了要使 Rasch 題組模式之題組效果變異數的回覆性能夠更好,研究者建 議,除了應設法增加題組內的試題數之外,也應考慮多招募一些受測者來 進行測驗,以本研究為例,當受測者人數皆為 1500 人時,不論是在題組 6 題或 8 題的情況之下,Rasch 題組模式之題組效果變異數的回覆性都已 相當的好,是故,若分析者要利用 Rasch 題組模式之題組效果估計來判斷 各題組之局部試題依賴程度的話,就必須要考慮到各題組的題組內試題數 及受測者人數是否足夠等問題。

(三)若分析者想瞭解各題組是否有局部試題依賴問題的話,在題組內試題數及 受測者人數皆很多的情況之下,研究者主要是建議參考 Rasch 題組模式之 題組效果估計或 Q3指標的偵測結果,並分別以 0.6 及 0.1 的判斷標準來檢 視題組是否有局部試題依賴的問題。但若是在這兩者其中有一項很少,抑 或是兩者皆很少的情境下,研究者就只建議參考 Q3指標的偵測結果並以 0.1 的判斷標準來檢視題組是否有局部試題依賴的問題。

二、 研究二建議

即便研究者已針對國中基測英文科 93-2-3、93-2-5、93-2-6、94-1-8 及 97-2-3 這幾個題組提出一些導致局部試題依賴問題的可能原因,包括受到其他與英文科 基本能力無關的因素所干擾及先前答案的解釋等,但還是應會同學科專家們再次 針對這幾個題組進行深入的討論,確認造成題組存有局部試題依賴問題的主因,

以避免往後命題時再次受到相同的題組特徵所干擾。

66