• 沒有找到結果。

BIB 與 NEAT 設計等化後估計結果綜合比較

第四章 研究結果

第三節  BIB 與 NEAT 設計等化後估計結果綜合比較

壹、受試者能力在常態分布下的連結效果

一、受試者能力參數比較

能力參數連結誤差比較 

0.2700  0.2800  0.2900  0.3000  0.3100  0.3200 

5460_2_1  5460_2_2  5460_2_3  5460_4_1  5460_4_2  5460_4_3  5460_6_1  5460_6_2  5460_6_3  7644_2_1  7644_2_2  7644_2_3  7644_4_1  7644_4_2  7644_4_3  7644_6_1  7644_6_2  7644_6_3  10920_2_1  10920_2_2  10920_2_3  10920_4_1  10920_4_2  10920_4_3  10920_6_1  10920_6_2  10920_6_3 

RMS

BIB1 NEAT1

能力參 數連結誤 差比較 

0.2700  0.2800  0.2900  0.3000  0.3100  0.3200 

5460_2_1  5460_2_2  5460_2_3  5460_4_1  5460_4_2  5460_4_3  5460_6_1  5460_6_2  5460_6_3  7644_2_1  7644_2_2  7644_2_3  7644_4_1  7644_4_2  7644_4_3  7644_6_1  7644_6_2  7644_6_3  10920_2_1  10920_2_2  10920_2_3  10920_4_1  10920_4_2  10920_4_3  10920_6_1  10920_6_2  10920_6_3 

RMS

BIB2 NEAT2

能力參 數連結誤 差比較 

0.2700  0.2800  0.2900  0.3000  0.3100  0.3200 

5460_2_1  5460_2_2  5460_2_3  5460_4_1  5460_4_2  5460_4_3  5460_6_1  5460_6_2  5460_6_3  7644_2_1  7644_2_2  7644_2_3  7644_4_1  7644_4_2  7644_4_3  7644_6_1  7644_6_2  7644_6_3  10920_2_1  10920_2_2  10920_2_3  10920_4_1  10920_4_2  10920_4_3  10920_6_1  10920_6_2  10920_6_3 

RMS

BIB3 NEAT3

圖 4­25  BIB 及 NEAT 設計在常態分布下能力值 RMSE 圖

由圖 4­25 可得下列結果:

2.當試題數為 130 題(即 BIB3 設計與 NEAT3 設計)時,NEAT 設計之鑑別度參數 連結效果以定錨比例為 30%較 BIB 設計佳,其餘皆以 BIB 設計較佳。

鑑別度參數連結誤差比較 

5460_2_ 5460_2_ 5460_2_ 5460_4_ 5460_4_ 5460_4_ 5460_6_ 5460_6_ 5460_6_ 7644_2_ 7644_2_ 7644_2_ 7644_4_ 7644_4_ 7644_4_ 7644_6_ 7644_6_ 7644_6_ 10920_2_ 10920_2_ 10920_2_ 10920_4_ 10920_4_ 10920_4_ 10920_6_ 10920_6_ 10920_6_

RMSE 

鑑別度參數連結誤差比較 

圖 4­26  BIB 及 NEAT 設計在常態分布下鑑別度參數 RMSE 圖 

(二)難度參數比較

由圖 4­27 可得下列結果: 

1.當試題數為 70 題(即 BIB1 設計與 NEAT1 設計)與 90 題(即 BIB2 設計與 NEAT2  設計)時,大致上 BIB 設計之難度參數連結效果較 NEAT 設計佳。 

2.當試題數為 130 題(即 BIB3 設計與 NEAT3 設計)時,BIB 設計之難度參數連結 效果以定錨比例為 30%較 NEAT 設計佳,其餘皆以 NEAT 設計較佳。

難度參數連結誤差比較 

5460_2_1  5460_2_2  5460_2_3  5460_4_1  5460_4_2  5460_4_3  5460_6_1  5460_6_2  5460_6_3  7644_2_1  7644_2_2  7644_2_3  7644_4_1  7644_4_2  7644_4_3  7644_6_1  7644_6_2  7644_6_3  10920_2_1  10920_2_2  10920_2_3  10920_4_1  10920_4_2  10920_4_3  10920_6_1  10920_6_2  10920_6_3 

RMSE 

BIB1 NEAT1

難度參數連結誤差比較 

5460_2_1  5460_2_2  5460_2_3  5460_4_1  5460_4_2  5460_4_3  5460_6_1  5460_6_2  5460_6_3  7644_2_1  7644_2_2  7644_2_3  7644_4_1  7644_4_2  7644_4_3  7644_6_1  7644_6_2  7644_6_3  10920_2_1  10920_2_2  10920_2_3  10920_4_1  10920_4_2  10920_4_3  10920_6_1  10920_6_2  10920_6_3 

RMSE 

BIB3 NEAT3

圖 4­27  BIB 及 NEAT 設計在常態分布下鑑別度參數 RMSE 圖 

(三)猜測度參數比較

5460_2_ 5460_2_ 5460_2_ 5460_4_ 5460_4_ 5460_4_ 5460_6_ 5460_6_ 5460_6_ 7644_2_ 7644_2_ 7644_2_ 7644_4_ 7644_4_ 7644_4_ 7644_6_ 7644_6_ 7644_6_ 10920_2_ 10920_2_ 10920_2_ 10920_4_ 10920_4_ 10920_4_ 10920_6_ 10920_6_ 10920_6_

RMSE 

BIB1 NEAT1

猜測度參數連結誤差比較 

5460_2_ 5460_2_ 5460_2_ 5460_4_ 5460_4_ 5460_4_ 5460_6_ 5460_6_ 5460_6_ 7644_2_ 7644_2_ 7644_2_ 7644_4_ 7644_4_ 7644_4_ 7644_6_ 7644_6_ 7644_6_ 10920_2_ 10920_2_ 10920_2_ 10920_4_ 10920_4_ 10920_4_ 10920_6_ 10920_6_ 10920_6_

RMSE 

BIB3 NEAT3

圖 4­28  BIB 及 NEAT 設計在常態分布下猜測度參數 RMSE 圖 由圖 4­28 可得下列結果: 

1.當試題數為 70 題(即 BIB1 設計與 NEAT1 設計)與 90 題(即 BIB2 設計與 NEAT2  設計)時,大致上 BIB 設計之猜測度參數連結效果較 NEAT 設計佳。 

2.當試題數為 130 題(即 BIB3 設計與 NEAT3 設計)時,NEAT 設計之猜測度參數 連結效果以定錨比例為 30%較 BIB 設計佳,其餘皆以 BIB 設計較佳。

貳、受試者能力在負偏態分布下的連結效果

一、受試者能力參數比較 由圖 4­29 可得下列結果: 

BIB 設計與 NEAT 設計兩者在能力參數誤差估計有好有壞,其連結效果沒有

一致性的優劣。

能力參數連結誤差比較 

0.7600  0.7800  0.8000  0.8200  0.8400  0.8600  0.8800 

5460_2_1  5460_2_2  5460_2_3  5460_4_1  5460_4_2  5460_4_3  5460_6_1  5460_6_2  5460_6_3  7644_2_1  7644_2_2  7644_2_3  7644_4_1  7644_4_2  7644_4_3  7644_6_1  7644_6_2  7644_6_3  10920_2_1  10920_2_2  10920_2_3  10920_4_1  10920_4_2  10920_4_3  10920_6_1  10920_6_2  10920_6_3 

RMS

BIB1 NEAT1

能 力參數連結誤差比較 

0.7400  0.7600  0.7800  0.8000  0.8200  0.8400 

5460_2_ 5460_2_ 5460_2_ 5460_4_ 5460_4_ 5460_4_ 5460_6_ 5460_6_ 5460_6_ 7644_2_ 7644_2_ 7644_2_ 7644_4_ 7644_4_ 7644_4_ 7644_6_ 7644_6_ 7644_6_ 10920_2_ 10920_2_ 10920_2_ 10920_4_ 10920_4_ 10920_4_ 10920_6_ 10920_6_ 10920_6_

RMS

BIB2 NEAT2

能力參數連結誤差比較 

0.7600  0.7800  0.8000  0.8200  0.8400 

5460_2_1  5460_2_2  5460_2_3  5460_4_1  5460_4_2  5460_4_3  5460_6_1  5460_6_2  5460_6_3  7644_2_1  7644_2_2  7644_2_3  7644_4_1  7644_4_2  7644_4_3  7644_6_1  7644_6_2  7644_6_3  10920_2_1  10920_2_2  10920_2_3  10920_4_1  10920_4_2  10920_4_3  10920_6_1  10920_6_2  10920_6_3 

RMS

BIB3 NEAT3

圖 4­29  BIB 及 NEAT 設計在負偏態分布下能力值 RMSE 圖

二、試題參數比較 

5460_2_1  5460_2_2  5460_2_3  5460_4_1  5460_4_2  5460_4_3  5460_6_1  5460_6_2  5460_6_3  7644_2_1  7644_2_2  7644_2_3  7644_4_1  7644_4_2  7644_4_3  7644_6_1  7644_6_2  7644_6_3  10920_2_1  10920_2_2  10920_2_3  10920_4_1  10920_4_2  10920_4_3  10920_6_1  10920_6_2  10920_6_3 

RMS

5460_2_1  5460_2_2  5460_2_3  5460_4_1  5460_4_2  5460_4_3  5460_6_1  5460_6_2  5460_6_3  7644_2_1  7644_2_2  7644_2_3  7644_4_1  7644_4_2  7644_4_3  7644_6_1  7644_6_2  7644_6_3  10920_2_1  10920_2_2  10920_2_3  10920_4_1  10920_4_2  10920_4_3  10920_6_1  10920_6_2  10920_6_3 

RMS

BIB3 NEAT3

圖 4­30  BIB 及 NEAT 設計在負偏態分布下鑑別度參數 RMSE 圖

由圖 4­30 可得下列結果:

當試題數為 70 題(即 BIB1 設計與 NEAT1 設計)與人數為 5460 人與 7644 人 時,大致上  BIB  設計之鑑別度參數連結效果較  NEAT  設計佳,其餘大致上皆以  NEAT 設計較佳。 

(二)難度參數比較

由圖 4­31 可得下列結果:

當 BIB 設計與 NEAT 設計兩者在能力參數誤差估計有好有壞,其連結效果沒 有一致性的優劣。

難度參數連結誤差比較 

0.5500  0.5700  0.5900  0.6100  0.6300 

5460_2_1  5460_2_2  5460_2_3  5460_4_1  5460_4_2  5460_4_3  5460_6_1  5460_6_2  5460_6_3  7644_2_1  7644_2_2  7644_2_3  7644_4_1  7644_4_2  7644_4_3  7644_6_1  7644_6_2  7644_6_3  10920_2_1  10920_2_2  10920_2_3  10920_4_1  10920_4_2  10920_4_3  10920_6_1  10920_6_2  10920_6_3 

RMSE 

BIB1 NEAT1

難度參 數連結誤差比較 

0.5200  0.5400  0.5600  0.5800  0.6000  0.6200 

5460_2_1  5460_2_2  5460_2_3  5460_4_1  5460_4_2  5460_4_3  5460_6_1  5460_6_2  5460_6_3  7644_2_1  7644_2_2  7644_2_3  7644_4_1  7644_4_2  7644_4_3  7644_6_1  7644_6_2  7644_6_3  10920_2_1  10920_2_2  10920_2_3  10920_4_1  10920_4_2  10920_4_3  10920_6_1  10920_6_2  10920_6_3 

RMSE 

BIB2 NEAT2

難度參數連結誤差比較 

0.5400  0.5600  0.5800  0.6000  0.6200 

5460_2_1  5460_2_2  5460_2_3  5460_4_1  5460_4_2  5460_4_3  5460_6_1  5460_6_2  5460_6_3  7644_2_1  7644_2_2  7644_2_3  7644_4_1  7644_4_2  7644_4_3  7644_6_1  7644_6_2  7644_6_3  10920_2_1  10920_2_2  10920_2_3  10920_4_1  10920_4_2  10920_4_3  10920_6_1  10920_6_2  10920_6_3 

RMS

BIB3 NEAT3

圖 4­31  BIB 及 NEAT 設計在負偏態分布下難度參數 RMSE 圖  (三)猜測度參數比較

猜測度參數連結誤差比較 

0.0250  0.0270  0.0290  0.0310  0.0330  0.0350 

5460_2_ 5460_2_ 5460_2_ 5460_4_ 5460_4_ 5460_4_ 5460_6_ 5460_6_ 5460_6_ 7644_2_ 7644_2_ 7644_2_ 7644_4_ 7644_4_ 7644_4_ 7644_6_ 7644_6_ 7644_6_ 10920_2_ 10920_2_ 10920_2_ 10920_4_ 10920_4_ 10920_4_ 10920_6_ 10920_6_ 10920_6_

RMSE 

BIB1 NEAT1

猜測度參數連結誤差比較 

0.0250  0.0270  0.0290  0.0310  0.0330  0.0350 

5460_2_1  5460_2_2  5460_2_3  5460_4_1  5460_4_2  5460_4_3  5460_6_1  5460_6_2  5460_6_3  7644_2_1  7644_2_2  7644_2_3  7644_4_1  7644_4_2  7644_4_3  7644_6_1  7644_6_2  7644_6_3  10920_2_1  10920_2_2  10920_2_3  10920_4_1  10920_4_2  10920_4_3  10920_6_1  10920_6_2  10920_6_3 

RMS

BIB2 NEAT2

猜測度參數連結誤差比較 

0.0300  0.0320  0.0340  0.0360  0.0380  0.0400 

5460_2_ 5460_2_ 5460_2_ 5460_4_ 5460_4_ 5460_4_ 5460_6_ 5460_6_ 5460_6_ 7644_2_ 7644_2_ 7644_2_ 7644_4_ 7644_4_ 7644_4_ 7644_6_ 7644_6_ 7644_6_ 10920_2_ 10920_2_ 10920_2_ 10920_4_ 10920_4_ 10920_4_ 10920_6_ 10920_6_ 10920_6_

RMS

BIB3 NEAT3

圖 4­32  BIB 及 NEAT 設計在負偏態分布下猜測度參數 RMSE 圖 由圖 4­32 可得下列結果:

當試題數為 70 題(即 BIB1 設計與 NEAT1 設計)與 90 題(即 BIB2 設計與 NEAT2  設計)時,大致上 BIB 設計之猜測度參數連結效果較 NEAT 設計佳,尤其是試題 數為 90 題。而當試題數為 130 題(即 BIB3 設計與 NEAT3 設計)時,NEAT 設計之 猜測度參數連結效果以定錨比例為 30%較 BIB 設計佳,其餘皆以 BIB 設計較佳。

參、受試者能力在雙峰分布下的連結效果

一、受試者能力參數比較 由圖 4­33 可得下列結果:

當 BIB 設計與 NEAT 設計兩者在能力參數誤差估計有好有壞,其連結效果沒 有一致性的優劣。

能力參數連結誤差比較 

5460_2_1  5460_2_2  5460_2_3  5460_4_1  5460_4_2  5460_4_3  5460_6_1  5460_6_2  5460_6_3  7644_2_1  7644_2_2  7644_2_3  7644_4_1  7644_4_2  7644_4_3  7644_6_1  7644_6_2  7644_6_3  10920_2_1  10920_2_2  10920_2_3  10920_4_1  10920_4_2  10920_4_3  10920_6_1  10920_6_2  10920_6_3 

RMS

5460_2_1  5460_2_2  5460_2_3  5460_4_1  5460_4_2  5460_4_3  5460_6_1  5460_6_2  5460_6_3  7644_2_1  7644_2_2  7644_2_3  7644_4_1  7644_4_2  7644_4_3  7644_6_1  7644_6_2  7644_6_3  10920_2_1  10920_2_2  10920_2_3  10920_4_1  10920_4_2  10920_4_3  10920_6_1  10920_6_2  10920_6_3 

RMS

圖 4­33  BIB 及 NEAT 設計在雙峰分布下能力值 RMSE 圖

二、試題參數比較  (一)鑑別度參數比較

鑑別度參數連結誤差比較 

5460_2_1  5460_2_2  5460_2_3  5460_4_1  5460_4_2  5460_4_3  5460_6_1  5460_6_2  5460_6_3  7644_2_1  7644_2_2  7644_2_3  7644_4_1  7644_4_2  7644_4_3  7644_6_1  7644_6_2  7644_6_3  10920_2_1  10920_2_2  10920_2_3  10920_4_1  10920_4_2  10920_4_3  10920_6_1  10920_6_2  10920_6_3 

RMS

圖 4­34  BIB 及 NEAT 設計在雙峰分布下鑑別度參數 RMSE 圖 由圖 4­34 可得下列結果:

當人數為 10920 人時,NEAT 設計鑑別度參數估計誤差明顯下降,其連結效

(二)難度參數比較

5460_2_1  5460_2_2  5460_2_3  5460_4_1  5460_4_2  5460_4_3  5460_6_1  5460_6_2  5460_6_3  7644_2_1  7644_2_2  7644_2_3  7644_4_1  7644_4_2  7644_4_3  7644_6_1  7644_6_2  7644_6_3  10920_2_1  10920_2_2  10920_2_3  10920_4_1  10920_4_2  10920_4_3  10920_6_1  10920_6_2  10920_6_3 

RMS

5460_2_ 5460_2_ 5460_2_ 5460_4_ 5460_4_ 5460_4_ 5460_6_ 5460_6_ 5460_6_ 7644_2_ 7644_2_ 7644_2_ 7644_4_ 7644_4_ 7644_4_ 7644_6_ 7644_6_ 7644_6_ 10920_2_ 10920_2_ 10920_2_ 10920_4_ 10920_4_ 10920_4_ 10920_6_ 10920_6_ 10920_6_

RMS

圖 4­35  BIB 及 NEAT 設計在雙峰分布下難度參數 RMSE 圖 由圖 4­35 可得下列結果:

當人數為 10920 人時,BIB 設計之難度參數估計誤差較 NEAT 小,除此,大

致上以 NEAT 設計連結效果較 BIB 設計佳。 

5460_2_ 5460_2_ 5460_2_ 5460_4_ 5460_4_ 5460_4_ 5460_6_ 5460_6_ 5460_6_ 7644_2_ 7644_2_ 7644_2_ 7644_4_ 7644_4_ 7644_4_ 7644_6_ 7644_6_ 7644_6_ 10920_2_ 10920_2_ 10920_2_ 10920_4_ 10920_4_ 10920_4_ 10920_6_ 10920_6_ 10920_6_

RMS

圖 4­36  BIB 及 NEAT 設計在雙峰分布下猜測度參數 RMSE 圖

當題數為 90 題(即 BIB2 設計與 NEAT 設計)時,BIB 設計之猜測度估計誤差 較 NEAT 小。而當人數為 10920 人時,BIB 設計之猜測度估計誤差亦較 NEAT 小,

其餘兩種設計估計誤差差異不明顯。

相關文件