第四章 研究結果
第三節 BIB 與 NEAT 設計等化後估計結果綜合比較
壹、受試者能力在常態分布下的連結效果
一、受試者能力參數比較
能力參數連結誤差比較
0.2700 0.2800 0.2900 0.3000 0.3100 0.3200
5460_2_1 5460_2_2 5460_2_3 5460_4_1 5460_4_2 5460_4_3 5460_6_1 5460_6_2 5460_6_3 7644_2_1 7644_2_2 7644_2_3 7644_4_1 7644_4_2 7644_4_3 7644_6_1 7644_6_2 7644_6_3 10920_2_1 10920_2_2 10920_2_3 10920_4_1 10920_4_2 10920_4_3 10920_6_1 10920_6_2 10920_6_3
RMSE
BIB1 NEAT1
能力參 數連結誤 差比較
0.2700 0.2800 0.2900 0.3000 0.3100 0.3200
5460_2_1 5460_2_2 5460_2_3 5460_4_1 5460_4_2 5460_4_3 5460_6_1 5460_6_2 5460_6_3 7644_2_1 7644_2_2 7644_2_3 7644_4_1 7644_4_2 7644_4_3 7644_6_1 7644_6_2 7644_6_3 10920_2_1 10920_2_2 10920_2_3 10920_4_1 10920_4_2 10920_4_3 10920_6_1 10920_6_2 10920_6_3
RMSE
BIB2 NEAT2
能力參 數連結誤 差比較
0.2700 0.2800 0.2900 0.3000 0.3100 0.3200
5460_2_1 5460_2_2 5460_2_3 5460_4_1 5460_4_2 5460_4_3 5460_6_1 5460_6_2 5460_6_3 7644_2_1 7644_2_2 7644_2_3 7644_4_1 7644_4_2 7644_4_3 7644_6_1 7644_6_2 7644_6_3 10920_2_1 10920_2_2 10920_2_3 10920_4_1 10920_4_2 10920_4_3 10920_6_1 10920_6_2 10920_6_3
RMSE
BIB3 NEAT3
圖 425 BIB 及 NEAT 設計在常態分布下能力值 RMSE 圖
由圖 425 可得下列結果:
2.當試題數為 130 題(即 BIB3 設計與 NEAT3 設計)時,NEAT 設計之鑑別度參數 連結效果以定錨比例為 30%較 BIB 設計佳,其餘皆以 BIB 設計較佳。
鑑別度參數連結誤差比較
5460_2_1 5460_2_2 5460_2_3 5460_4_1 5460_4_2 5460_4_3 5460_6_1 5460_6_2 5460_6_3 7644_2_1 7644_2_2 7644_2_3 7644_4_1 7644_4_2 7644_4_3 7644_6_1 7644_6_2 7644_6_3 10920_2_1 10920_2_2 10920_2_3 10920_4_1 10920_4_2 10920_4_3 10920_6_1 10920_6_2 10920_6_3
RMSE
鑑別度參數連結誤差比較
圖 426 BIB 及 NEAT 設計在常態分布下鑑別度參數 RMSE 圖
(二)難度參數比較
由圖 427 可得下列結果:
1.當試題數為 70 題(即 BIB1 設計與 NEAT1 設計)與 90 題(即 BIB2 設計與 NEAT2 設計)時,大致上 BIB 設計之難度參數連結效果較 NEAT 設計佳。
2.當試題數為 130 題(即 BIB3 設計與 NEAT3 設計)時,BIB 設計之難度參數連結 效果以定錨比例為 30%較 NEAT 設計佳,其餘皆以 NEAT 設計較佳。
難度參數連結誤差比較
5460_2_1 5460_2_2 5460_2_3 5460_4_1 5460_4_2 5460_4_3 5460_6_1 5460_6_2 5460_6_3 7644_2_1 7644_2_2 7644_2_3 7644_4_1 7644_4_2 7644_4_3 7644_6_1 7644_6_2 7644_6_3 10920_2_1 10920_2_2 10920_2_3 10920_4_1 10920_4_2 10920_4_3 10920_6_1 10920_6_2 10920_6_3
RMSE
BIB1 NEAT1
難度參數連結誤差比較
5460_2_1 5460_2_2 5460_2_3 5460_4_1 5460_4_2 5460_4_3 5460_6_1 5460_6_2 5460_6_3 7644_2_1 7644_2_2 7644_2_3 7644_4_1 7644_4_2 7644_4_3 7644_6_1 7644_6_2 7644_6_3 10920_2_1 10920_2_2 10920_2_3 10920_4_1 10920_4_2 10920_4_3 10920_6_1 10920_6_2 10920_6_3
RMSE
BIB3 NEAT3
圖 427 BIB 及 NEAT 設計在常態分布下鑑別度參數 RMSE 圖
(三)猜測度參數比較
5460_2_1 5460_2_2 5460_2_3 5460_4_1 5460_4_2 5460_4_3 5460_6_1 5460_6_2 5460_6_3 7644_2_1 7644_2_2 7644_2_3 7644_4_1 7644_4_2 7644_4_3 7644_6_1 7644_6_2 7644_6_3 10920_2_1 10920_2_2 10920_2_3 10920_4_1 10920_4_2 10920_4_3 10920_6_1 10920_6_2 10920_6_3
RMSE
BIB1 NEAT1
猜測度參數連結誤差比較
5460_2_1 5460_2_2 5460_2_3 5460_4_1 5460_4_2 5460_4_3 5460_6_1 5460_6_2 5460_6_3 7644_2_1 7644_2_2 7644_2_3 7644_4_1 7644_4_2 7644_4_3 7644_6_1 7644_6_2 7644_6_3 10920_2_1 10920_2_2 10920_2_3 10920_4_1 10920_4_2 10920_4_3 10920_6_1 10920_6_2 10920_6_3
RMSE
BIB3 NEAT3
圖 428 BIB 及 NEAT 設計在常態分布下猜測度參數 RMSE 圖 由圖 428 可得下列結果:
1.當試題數為 70 題(即 BIB1 設計與 NEAT1 設計)與 90 題(即 BIB2 設計與 NEAT2 設計)時,大致上 BIB 設計之猜測度參數連結效果較 NEAT 設計佳。
2.當試題數為 130 題(即 BIB3 設計與 NEAT3 設計)時,NEAT 設計之猜測度參數 連結效果以定錨比例為 30%較 BIB 設計佳,其餘皆以 BIB 設計較佳。
貳、受試者能力在負偏態分布下的連結效果
一、受試者能力參數比較 由圖 429 可得下列結果:
BIB 設計與 NEAT 設計兩者在能力參數誤差估計有好有壞,其連結效果沒有
一致性的優劣。
能力參數連結誤差比較
0.7600 0.7800 0.8000 0.8200 0.8400 0.8600 0.8800
5460_2_1 5460_2_2 5460_2_3 5460_4_1 5460_4_2 5460_4_3 5460_6_1 5460_6_2 5460_6_3 7644_2_1 7644_2_2 7644_2_3 7644_4_1 7644_4_2 7644_4_3 7644_6_1 7644_6_2 7644_6_3 10920_2_1 10920_2_2 10920_2_3 10920_4_1 10920_4_2 10920_4_3 10920_6_1 10920_6_2 10920_6_3
RMSE
BIB1 NEAT1
能 力參數連結誤差比較
0.7400 0.7600 0.7800 0.8000 0.8200 0.8400
5460_2_1 5460_2_2 5460_2_3 5460_4_1 5460_4_2 5460_4_3 5460_6_1 5460_6_2 5460_6_3 7644_2_1 7644_2_2 7644_2_3 7644_4_1 7644_4_2 7644_4_3 7644_6_1 7644_6_2 7644_6_3 10920_2_1 10920_2_2 10920_2_3 10920_4_1 10920_4_2 10920_4_3 10920_6_1 10920_6_2 10920_6_3
RMSE
BIB2 NEAT2
能力參數連結誤差比較
0.7600 0.7800 0.8000 0.8200 0.8400
5460_2_1 5460_2_2 5460_2_3 5460_4_1 5460_4_2 5460_4_3 5460_6_1 5460_6_2 5460_6_3 7644_2_1 7644_2_2 7644_2_3 7644_4_1 7644_4_2 7644_4_3 7644_6_1 7644_6_2 7644_6_3 10920_2_1 10920_2_2 10920_2_3 10920_4_1 10920_4_2 10920_4_3 10920_6_1 10920_6_2 10920_6_3
RMSE
BIB3 NEAT3
圖 429 BIB 及 NEAT 設計在負偏態分布下能力值 RMSE 圖
二、試題參數比較
5460_2_1 5460_2_2 5460_2_3 5460_4_1 5460_4_2 5460_4_3 5460_6_1 5460_6_2 5460_6_3 7644_2_1 7644_2_2 7644_2_3 7644_4_1 7644_4_2 7644_4_3 7644_6_1 7644_6_2 7644_6_3 10920_2_1 10920_2_2 10920_2_3 10920_4_1 10920_4_2 10920_4_3 10920_6_1 10920_6_2 10920_6_3
RMSE
5460_2_1 5460_2_2 5460_2_3 5460_4_1 5460_4_2 5460_4_3 5460_6_1 5460_6_2 5460_6_3 7644_2_1 7644_2_2 7644_2_3 7644_4_1 7644_4_2 7644_4_3 7644_6_1 7644_6_2 7644_6_3 10920_2_1 10920_2_2 10920_2_3 10920_4_1 10920_4_2 10920_4_3 10920_6_1 10920_6_2 10920_6_3
RMSE
BIB3 NEAT3
圖 430 BIB 及 NEAT 設計在負偏態分布下鑑別度參數 RMSE 圖
由圖 430 可得下列結果:
當試題數為 70 題(即 BIB1 設計與 NEAT1 設計)與人數為 5460 人與 7644 人 時,大致上 BIB 設計之鑑別度參數連結效果較 NEAT 設計佳,其餘大致上皆以 NEAT 設計較佳。
(二)難度參數比較
由圖 431 可得下列結果:
當 BIB 設計與 NEAT 設計兩者在能力參數誤差估計有好有壞,其連結效果沒 有一致性的優劣。
難度參數連結誤差比較
0.5500 0.5700 0.5900 0.6100 0.6300
5460_2_1 5460_2_2 5460_2_3 5460_4_1 5460_4_2 5460_4_3 5460_6_1 5460_6_2 5460_6_3 7644_2_1 7644_2_2 7644_2_3 7644_4_1 7644_4_2 7644_4_3 7644_6_1 7644_6_2 7644_6_3 10920_2_1 10920_2_2 10920_2_3 10920_4_1 10920_4_2 10920_4_3 10920_6_1 10920_6_2 10920_6_3
RMSE
BIB1 NEAT1
難度參 數連結誤差比較
0.5200 0.5400 0.5600 0.5800 0.6000 0.6200
5460_2_1 5460_2_2 5460_2_3 5460_4_1 5460_4_2 5460_4_3 5460_6_1 5460_6_2 5460_6_3 7644_2_1 7644_2_2 7644_2_3 7644_4_1 7644_4_2 7644_4_3 7644_6_1 7644_6_2 7644_6_3 10920_2_1 10920_2_2 10920_2_3 10920_4_1 10920_4_2 10920_4_3 10920_6_1 10920_6_2 10920_6_3
RMSE
BIB2 NEAT2
難度參數連結誤差比較
0.5400 0.5600 0.5800 0.6000 0.6200
5460_2_1 5460_2_2 5460_2_3 5460_4_1 5460_4_2 5460_4_3 5460_6_1 5460_6_2 5460_6_3 7644_2_1 7644_2_2 7644_2_3 7644_4_1 7644_4_2 7644_4_3 7644_6_1 7644_6_2 7644_6_3 10920_2_1 10920_2_2 10920_2_3 10920_4_1 10920_4_2 10920_4_3 10920_6_1 10920_6_2 10920_6_3
RMSE
BIB3 NEAT3
圖 431 BIB 及 NEAT 設計在負偏態分布下難度參數 RMSE 圖 (三)猜測度參數比較
猜測度參數連結誤差比較
0.0250 0.0270 0.0290 0.0310 0.0330 0.0350
5460_2_1 5460_2_2 5460_2_3 5460_4_1 5460_4_2 5460_4_3 5460_6_1 5460_6_2 5460_6_3 7644_2_1 7644_2_2 7644_2_3 7644_4_1 7644_4_2 7644_4_3 7644_6_1 7644_6_2 7644_6_3 10920_2_1 10920_2_2 10920_2_3 10920_4_1 10920_4_2 10920_4_3 10920_6_1 10920_6_2 10920_6_3
RMSE
BIB1 NEAT1
猜測度參數連結誤差比較
0.0250 0.0270 0.0290 0.0310 0.0330 0.0350
5460_2_1 5460_2_2 5460_2_3 5460_4_1 5460_4_2 5460_4_3 5460_6_1 5460_6_2 5460_6_3 7644_2_1 7644_2_2 7644_2_3 7644_4_1 7644_4_2 7644_4_3 7644_6_1 7644_6_2 7644_6_3 10920_2_1 10920_2_2 10920_2_3 10920_4_1 10920_4_2 10920_4_3 10920_6_1 10920_6_2 10920_6_3
RMSE
BIB2 NEAT2
猜測度參數連結誤差比較
0.0300 0.0320 0.0340 0.0360 0.0380 0.0400
5460_2_1 5460_2_2 5460_2_3 5460_4_1 5460_4_2 5460_4_3 5460_6_1 5460_6_2 5460_6_3 7644_2_1 7644_2_2 7644_2_3 7644_4_1 7644_4_2 7644_4_3 7644_6_1 7644_6_2 7644_6_3 10920_2_1 10920_2_2 10920_2_3 10920_4_1 10920_4_2 10920_4_3 10920_6_1 10920_6_2 10920_6_3
RMSE
BIB3 NEAT3
圖 432 BIB 及 NEAT 設計在負偏態分布下猜測度參數 RMSE 圖 由圖 432 可得下列結果:
當試題數為 70 題(即 BIB1 設計與 NEAT1 設計)與 90 題(即 BIB2 設計與 NEAT2 設計)時,大致上 BIB 設計之猜測度參數連結效果較 NEAT 設計佳,尤其是試題 數為 90 題。而當試題數為 130 題(即 BIB3 設計與 NEAT3 設計)時,NEAT 設計之 猜測度參數連結效果以定錨比例為 30%較 BIB 設計佳,其餘皆以 BIB 設計較佳。
參、受試者能力在雙峰分布下的連結效果
一、受試者能力參數比較 由圖 433 可得下列結果:
當 BIB 設計與 NEAT 設計兩者在能力參數誤差估計有好有壞,其連結效果沒 有一致性的優劣。
能力參數連結誤差比較
5460_2_1 5460_2_2 5460_2_3 5460_4_1 5460_4_2 5460_4_3 5460_6_1 5460_6_2 5460_6_3 7644_2_1 7644_2_2 7644_2_3 7644_4_1 7644_4_2 7644_4_3 7644_6_1 7644_6_2 7644_6_3 10920_2_1 10920_2_2 10920_2_3 10920_4_1 10920_4_2 10920_4_3 10920_6_1 10920_6_2 10920_6_3
RMSE
5460_2_1 5460_2_2 5460_2_3 5460_4_1 5460_4_2 5460_4_3 5460_6_1 5460_6_2 5460_6_3 7644_2_1 7644_2_2 7644_2_3 7644_4_1 7644_4_2 7644_4_3 7644_6_1 7644_6_2 7644_6_3 10920_2_1 10920_2_2 10920_2_3 10920_4_1 10920_4_2 10920_4_3 10920_6_1 10920_6_2 10920_6_3
RMSE
圖 433 BIB 及 NEAT 設計在雙峰分布下能力值 RMSE 圖
二、試題參數比較 (一)鑑別度參數比較
鑑別度參數連結誤差比較
5460_2_1 5460_2_2 5460_2_3 5460_4_1 5460_4_2 5460_4_3 5460_6_1 5460_6_2 5460_6_3 7644_2_1 7644_2_2 7644_2_3 7644_4_1 7644_4_2 7644_4_3 7644_6_1 7644_6_2 7644_6_3 10920_2_1 10920_2_2 10920_2_3 10920_4_1 10920_4_2 10920_4_3 10920_6_1 10920_6_2 10920_6_3
RMSE
圖 434 BIB 及 NEAT 設計在雙峰分布下鑑別度參數 RMSE 圖 由圖 434 可得下列結果:
當人數為 10920 人時,NEAT 設計鑑別度參數估計誤差明顯下降,其連結效
(二)難度參數比較
5460_2_1 5460_2_2 5460_2_3 5460_4_1 5460_4_2 5460_4_3 5460_6_1 5460_6_2 5460_6_3 7644_2_1 7644_2_2 7644_2_3 7644_4_1 7644_4_2 7644_4_3 7644_6_1 7644_6_2 7644_6_3 10920_2_1 10920_2_2 10920_2_3 10920_4_1 10920_4_2 10920_4_3 10920_6_1 10920_6_2 10920_6_3
RMSE
5460_2_1 5460_2_2 5460_2_3 5460_4_1 5460_4_2 5460_4_3 5460_6_1 5460_6_2 5460_6_3 7644_2_1 7644_2_2 7644_2_3 7644_4_1 7644_4_2 7644_4_3 7644_6_1 7644_6_2 7644_6_3 10920_2_1 10920_2_2 10920_2_3 10920_4_1 10920_4_2 10920_4_3 10920_6_1 10920_6_2 10920_6_3
RMSE
圖 435 BIB 及 NEAT 設計在雙峰分布下難度參數 RMSE 圖 由圖 435 可得下列結果:
當人數為 10920 人時,BIB 設計之難度參數估計誤差較 NEAT 小,除此,大
致上以 NEAT 設計連結效果較 BIB 設計佳。
5460_2_1 5460_2_2 5460_2_3 5460_4_1 5460_4_2 5460_4_3 5460_6_1 5460_6_2 5460_6_3 7644_2_1 7644_2_2 7644_2_3 7644_4_1 7644_4_2 7644_4_3 7644_6_1 7644_6_2 7644_6_3 10920_2_1 10920_2_2 10920_2_3 10920_4_1 10920_4_2 10920_4_3 10920_6_1 10920_6_2 10920_6_3
RMSE
圖 436 BIB 及 NEAT 設計在雙峰分布下猜測度參數 RMSE 圖
當題數為 90 題(即 BIB2 設計與 NEAT 設計)時,BIB 設計之猜測度估計誤差 較 NEAT 小。而當人數為 10920 人時,BIB 設計之猜測度估計誤差亦較 NEAT 小,
其餘兩種設計估計誤差差異不明顯。