第三章 研究設計
第四節 研究工具
壹、雙向細目表
雙向細目表是測驗的架構藍圖，如表 3-1 所示，描述測驗中包含的教學內容 以及所應評量到的能力，可依據 Bloom2001 版(鄭圓鈴，2006)，認知歷程向度，
從記憶、理解、應用、分析、評鑑與創造等六個層次，以教材內容為橫軸，並以 教學目標為縱軸來編擬試題。為使雙向細目表具有內容效度，特別邀請兩位臺中 教育大學編製測驗教授進行專家審查，再依據雙向細目表的建議題數，聘請三位 資深國小教師進行命題、修題的程序，最後再請測驗專家的教授進行審題，以達 專家內容效度。
貳、分析軟體
一、分析軟體使用 Excel2010 巨集、SPSS 軟體第 18 版、Matlab，整體說明如下 所述：
S-P 表分析法的最大價值在於適用於以班級為單位的少數人資料分析，適合 國小老師了解班級學習成效之用。先利用 SPSS 軟體第 18 版來鑑別試題的信度 後，接著利用 Matlab 計算出數值，再透過 Excel2010 巨集得到 S-P 表，進行繪製 與計算分析。
叁、研究資料處理與分析
依據 25 名有效樣本，以多點計分 S-P 表分析法，分析內容如下：
一、利用 SPSS 軟體來進行資料的分析統計
透過 SPSS 軟體來處理受試者的答題資料，分析整份測驗的信度。
二、利用 Matlab 來進行資料的分析統計
透過本套軟體來處理受試者的答題資料，分析整份測驗的差異係數、注 意係數，並判斷試題類型與學生學習類型。
三、利用 Excel2010 巨集軟體來進行資料的分析統計
透過本套軟體處理受試者的答題資料，將 Matlab 所得資料，繪製成 S-P 表。
第五節 試題編製與施測
壹、預試步驟
本預試之目的在求施測試題能更趨完善，以利正式施測時能提高數據的參考 價值。並藉此了解參與預試的學生在測試過程中所遭遇的問題，以便修正試題。
預試以臺中市某國小四年級 96 位學生為樣本，預試 50 題試題，預試時間約 30 分鐘。學生預試的結果如下：
96 生答題狀況良好，成績呈現常態分佈，最高分為 100 分，最低分為 48 分。
50 題選擇題中難度高的試題佔 3 題，難易適中的試題占 29 題，難度簡單的試題 占 17 題，1 題有疑義試題直接剔除，不會在正式施測中出現。
貳、正式施測步驟、樣本與配分方式
施測班級為臺中市某國小四年級某班 25 位學生。正式施測之試題經過預試 後，總共挑出 30 題難易適中的題目來做為正式施測之用，題目類型皆為選擇題，
第四章 研究結果與討論
本章目的在說明「多點計分 S-P 表分析法之應用以國小四年級自然科評量為 例」的施測結果與討論，以下依預試結果分析、正式施測結果分析、多點計分 S-P 表分析、試題的注意係數(CP)分析、學生的注意係數(CS)分析、試題差異係數難 度指數以及鑑別度分析等六大節。
第一節 預試結果分析
壹、預試結果分析
根據預試之結果可得表4-1浴室試題難度統計表。為了避免施測試題過度簡 易，通過率過高，無法了解學生的迷思概念情形，因此剔除50題預試試題中難度 在0.89以上的試題共十九題(第1、2、3、7、8、12、15、17、18、21、24、27、
32、33、34、46、47、49、50題)以及有疑義的第25題，並將剩下的三十題選擇題 編製成正式施測的試題。
表 4-1
貳、挑選試題與配分
根據預試後數據得到的試題難度與雙向細目表，從 50 題中挑出試題共三十 題，難度低的試題 20 題(第 1、3、5、6、7、8、9、10、12、13、18、21、22、
23、24、25、27、28、29、30 題)，配分 3 分；難度高的試題 10 題(第 2、4、11、
14、15、16、17、19、20、26 題)，配分 4 分。
表 4-2
挑選題目修正前雙向細目表(括號內為配分) 教材 試題 題號
內容 形式 記憶 理解 應用 高層次思考
【分析、評鑑、創作】 合計
第一單元 時間的測量 共 14 節課
選擇題 7（2） 8（2） 9（2） 5（2） 29（2）
小計（分） 14 16 18 10 58
第二單元 水的移動 共 14 節課
選擇題 4（2） 8（2） 4（2） 5（2） 21（2）
小計（分） 8 16 8 10 42
合計 共 28 節課
選擇題 9（2） 12（2） 3（2） 10（2） 50（2）
小計（分） 22 32 26 20 100
表 4-3 係數（Carmines & Zeller，1979）。顯示此份測驗試題品質為優良，能夠達到測 驗的一致性。
表4-4
度最多，但提昇的幅度不大，因此不刪除試題以提升整份試題的信度，依然保留 以上試題施測。
第二節 施測結果分析
據表4-6本研究發現大部分學生的表現都集中在答對22~30題之間，代表整 份自編試題中大都是以中、低難易度值的試題。因此整份試題若要針對中、高程 度的學生進行測驗的話，必須要增加試題的難度。
表4-6
答對題數人數分布表
答對題數 人數 比例
26~30 8 32%
22~25 8 32%
18~21 5 20%
14~17 2 8%
10~13 2 8%
10 15 20 25 30 答對題數
0 2 4 6 8
人 數
圖 4-1 答對題數人數分布圖
據表4-7本研究發現大部分學生的表現都集中在70分以上，不及格的學生有 5人，整份試題中若根據題目難易配分後，數據會有不同的呈現。
表4-7 分數分布表
分數 人數 比例
90~100 7 28%
80~89 4 16%
70~79 5 20%
60~69 4 16%
0~60 5 20%
3 0 4 0 5 0 6 0 7 0 8 0 9 0 1 0 0
表4-9
表4-10
施測成績與月考成績相關性檢定表
施測成績 月考成績
施測成績 Pearson 相關 1 .872(**)
顯著性 (雙尾) .000
個數 25 25
月考成績 Pearson 相關 .872(**) 1 顯著性 (雙尾) .000
個數 25 25
** 在顯著水準為0.01時 (雙尾)，相關顯著。
表4-11
施測成績與智力測驗相關性檢定表
施測成績 智力測驗
施測成績 Pearson 相關 1 .325
顯著性 (雙尾) .113
個數 25 25
智力測驗 Pearson 相關 .325 1 顯著性 (雙尾) .113
個數 25 25
第三節 多點計分 S-P 表分析
壹、多點計分 S-P 表圖形
S-P 表圖形中的 S 曲線與 P 曲線，試題平均答對率平均在 75％以上，因 常態編班，可以知道學生學習的差異情形差異性不會太大，紅色虛線是 S 曲線，
藍色實線是 P 曲線，如下圖。
圖 4-3 S-P 曲線圖
(紅粗虛線為 S 曲線、藍粗虛線為 P 曲線）
第四節 試題的注意係數(CP)分布分析
根據試題的注意係數與各題答對人數百分比，將試題的屬性分類為四種類 型： A（優良試題）、 A’（異質試題）、 B（困難試題）、 B’（拙劣試題）。橫軸 以試題注意係數 0.5 為試題診斷的分界；縱軸以試題答對人數百分比 50％為分 界，下列圖表根據學生的作答反應加以分析。
表 4-12
試題診斷分析表
題號 試題注意係數 答對學生數百分比 判定類別 題號 試題注意係數 答對學生數百分比 判定類別
1 0.21 0.80 A 16 0.47 0.80 A
2 0.59* 0.64 A' 17 0.72* 0.68 A'
3 0.18 0.80 A 18 0.39 0.88 A
4 0.68* 0.56 A' 19 0.29 0.72 A'
5 0.90** 0.92 A' 20 0.40 0.92 A
6 1.03** 0.92 A' 21 0.76** 0.72 A'
7 0.31 0.92 A 22 0.30 0.84 A
8 0.43 0.60 A 23 0.53* 0.76 A'
9 0.55* 0.80 A' 24 0.57* 0.84 A'
10 0.00 0.96 A 25 0.31 0.64 B
11 0.66* 0.44 B' 26 0.96** 0.68 A'
12 0.42 0.84 A 27 0.57* 0.88 A'
13 0.32 0.68 A 28 0.21 0.64 A
14 0.22 0.60 A 29 0.69* 0.84 A'
15 0.10 0.64 A 30 0.64* 0.68 A'
圖 4-4 試題診斷分析圖
壹、試題分析（ *代表正確選項）
選項 (1)* (2) (3) (4) 選項率 0.44 0.16 0.08 0.32 高分組 0.12 0.08 0.04 0.08 低分組 0.12 0 0.04 0.2
試題解析：
1. 因有多位學習穩定型的學生答錯，才導致試題異質。
2. 通過率與鑑別度都很低。
分析結果：
由於題幹相當短，且選項都是很抽象的概念，導致學生混淆。
建議：
修改此題題幹描述，改以生活化的實例敘述。
試題編號 11
拙劣型試題 通過率： 0.44 難度： 0.3125 鑑別度： 0.1250 ( )11.下列哪一項不是中國古代人用來描述時間的單位？
(1)一秒鐘 (2)一盏茶 (3)一甲子 (4)一頓飯
【時間的測量 記憶】
試題解析：
1.選項 (1)、(2) 因不具誘答性，導致鑑別度太低。
2.通過率極高，難度非常簡易，鑑別度極低。
分析結果：
若要保留建議修改選項為
(1)利用毛細現象觀察杯子邊緣的水量高度 (2)利用蒸發現象用蒸發水量的多寡來檢查 (3)利用虹吸現象用觀測水上升高度來檢查 (4)利用連通管原理觀察兩邊水量是否同高。
建議：
雖為異質型試題，但連通管為首次出現之專有名詞，且此題結合水平知識的概 念，教師可由作答反應得知多數學生皆已習得連通管原理的知識，因此予以保留。
選項 (1) (2) (3) (4)*
選項率 0 0 0.08 0.92
高分組 0 0 0 0.92
低分組 0 0 0 0
試題編號 6
異質型試題 通過率：0.9200 難度： 1.0000 鑑別度： 0.0000 ( )6.利用哪一種現象或原理可以檢查桌子平不平？
(1)毛細現象 (2)蒸發現象 (3)虹吸現象 (4)連通管原理 【水的移動 理解】
試題解析：
1.題幹中物品皆為生活中常見物品，且功能明確，所以不具誘答性導致鑑別度低。
2.通過率高，難度為容易，鑑別度極低。
分析結果：
此題題幹的各項物品皆為生活常見用品，學生擁有充足的形體概念及生活上的運 用經驗，因此儘管物品數量繁多，干擾性不大。
建議：
雖為異質型試題，但此題物品的呈現多元化，能結合生活經驗進行學習，雖鑑別 度低，仍可保留該試題。
選項 (1) (2)* (3) (4) 選項率 0.04 0.76 0.2 0
高分組 0 0.24 0 0
低分組 0 0.24 0.08 0 試題編號 21
異質型試題 通過率： 0.7200 難度： 0.7500 鑑別度：0.0000
( )21.「手電筒、電子錶、身高器、指南針、線香、沙漏」以上物品中，具有計 時功能的有幾項？
(1) 2 (2) 3 (3) 4 (4) 5
【水的移動 高層次思考】
第五節 學生的注意係數(CS)分布分析
圖 4-5 學生診斷分析圖
表 4-14
壹、學生分析
智力測 驗組距
90-99 80-89 70-79 60-69 50-59 40-49 30-39 20-29 10-19 10 以下 人數 8 9 2 1 0 3 1 0 1 0
月考成績 組距
100 分 90-99 分 80-89 分 70-79 分 60-69 分 60 分以下
人數 1 13 6 3 0 2
施測成績 組距
100 分 90-99 分 80-89 分 70-79 分 60-69 分 60 分以下
人數 0 7 4 5 4 5
表 4-15
學生智力測驗組距表
表 4-17
學生施測成績測驗組距表 表 4-16
學生月考成績組距表
壹、C 學力不足型：
一、測驗表現：
四號學生在 2012/12/10 的托尼非語文智力測驗得到 88，
在四下第一次成績考查成績(月考與該次施測為相同範圍)為 57 分，
此次施測成績 42 分。
二、數據分析：
智力測驗與成就測驗之表現產生落差。
該生的智力測驗在團體中屬於中上型的表現，然而月考成績在團體中卻表現 出低下的現象，此次的施測成績也非常不理想。
三、平日觀察：該生的學習力深受其家庭背景因素之影響。
（一）家庭背景：
該生家庭支持系統十分薄弱，父母離異，母親在其他城鎮工作，照顧 者為就讀高中的姊姊、不識字的外婆、失明的外公、置身事外的舅媽。
該生在校行為的聯繫對象為姊姊，然而姐姐對該生的約束力有限，也 無法擔起教育之責，許多需要家長協助之事項總是拖延或未完成。
（二）學習態度：
該生平日學習態度不積極，上課不專心，三年級時回家不寫功課，經
常與同儕發生爭執，玩心重。目前參加課後托育班，二個月下來養成 寫功課的習慣，然而許多觀念皆尚不熟練，此現象持續影響學習表現。
四、補強教學策略：
針對家庭功能薄弱部分，與課托班老師密切聯繫，要求每日完成回家功 課，並准許該生可利用下課時間書寫功課，遇疑惑之處可請教老師或同儕，藉此 拉近同儕情誼，並及時給予該生指導。透過每日習寫功課，該生的學習狀態略微 提升，然而課堂上有時仍出現不專心的樣貌，學習態度的改善尚有進步空間。
貳、C' 學習異常型 :
一、測驗表現：
九號學生在 2012/12/10 的托尼非語文智力測驗得到 10，
在四下第一次成績考查成績(月考與該次施測為相同範圍)為 51 分，
此次施測成績 33 分。
二、數據分析：
該生的智力測驗在團體中屬於極低的表現，而月考成績在團體中也表現出低 下現象，此次施測成績極度不理想。
三、平日觀察：該生的學習力深受早期童年經驗及家庭背景因素之影響。
（一）童年經驗：
該生母親為外籍配偶，幼年常遭受母親暴力相向，處於恐懼害怕的環 境中，父母在該生幼稚園期間離異，監護權歸父親。父親無主動對該 生解釋母親離家原因，這種沉默的解釋，導致該生安全感匱乏。
（二）家庭背景：
（二）家庭背景：