• 沒有找到結果。

第三章 研究方法

第四節 資料處理與分析

本節分為兩個部分,第一部分為資料的轉換編碼及建檔,第二部分則以統計方式來檢驗 試題類別、答題表現以及答題自信三者,兩兩之間是否存在著顯著差異。分述如下:

壹、 資料編碼及計分轉換

一、不同試題類別答題表現與答題自信的計分方式

在收集正式施測後的資料之後,先轉換學生在答題表現及答題自信方面的數據。在學生 答題表現部分,則是以答對為 1 分,答錯則以 0 分表示,該題的總分越高,表示學生在該題 的答題表現越好。反之亦然,總分越低,答題表現越差。

- 41 -

在不同認知層次試題的答題表現計分上,則是合併第 1 至 6 題的答題表現總分為記憶層 次的計分、第 7 至 12 題的答題表現總分為瞭解層次的計分、第 13 至 18 題的答題表現總分為 應用層次的計分,而第 19 至 24 題的答題表現總分則為高層次思考的計分。

另外,在不同知識種類試題的答題表現計分上,則是合併第 1、2、7、8、13、14、19

、20 等 8 題的答題表現總分為事實知識的計分,而第 3、4、9、10、15、16、21、22 等 8 題 的答題表現總分為概念知識的計分,剩餘的第 5、6、11、12、17、18、23、24 等 8 題的答題 表現總分則為程序知識的計分。

而在學生答題自信部分,則是採用李克式四點量表的形式來設計,主要讓學生依據試卷 右半部的信心量表選項,來自評答題自信情形。其中「完全正確」表示 4 分、「正確」表示 3 分、「可能正確」表示 2 分,而「不知道」則表示 1 分,該題累計的總分越高,則表示學生在 該題的答題越有自信,反之總分越低,則該題答題自信越差。

其中,對於不同認知層次試題的答題自信計分上,則是比照答題表現的合併計分方式,

分別合併第 1 至 6 題、第 7 至 12 題、第 13 至 18 題、第 19 至 24 題的答題自信總分,為記憶、

瞭解、應用、高層次思考此四類認知層次的答題自信計分。而不同知識種類試題的答題自信 計分亦同,也是比照答題表現的合併計分方式,分別採計各試題的答題自信總分為該知識種 類試題的答題自信計分。

二、答題表現與答題自信的分組及合併計分方式

在答題表現的分組上,則是以答題是否正確的情況,將學生分為「答對」及「答錯」兩 組;而在答題自信的分組上,將原本信心量表上勾選「完全正確」、「正確」的學生合併成「有 信心」一組,而勾選「可能正確」、「不知道」的學生,則是合併成「沒信心」一組,依此我 們將學生區分為「有信心」及「沒信心」兩組,分類後的類型共分四類,如下表 3-8 所示。

其中,我們將學生答對題目卻沒信心的狀況,訂為「缺乏自信」的情形;而對自己有信心卻 答題錯誤的狀況,訂為「過度自信」的情形,之後再依據學生答題表現及答題自信的類型,

- 42 -

逐題進行相關的人數統計。

表 3-8

答題表現對答題自信的類型分類表

沒信心 有信心

答錯組 I.沒信心且答錯 II.有信心卻答錯 (過度自信) 答對組 III.沒信心卻答對

(缺乏自信)

IV.有信心且答對

貳、 資料的統計及處理

轉換完相關資料後,再分別以試題類別、答題表現、答題自信為三個主要變項,並以 SPSS 統計分析軟體為輔助,利用相依樣本重複量數(repeated measured design)的單因子變異數分析

(one-way ANOVA)、卡方考驗(Chi-square Test

的獨立性檢定(test of independence)等方式 來尋求兩兩之間的關聯性,並注意是否有達.05 的顯著水準,兩者之間有無顯著差異。我們依 照資料處理方式的不同,分以下三個部份來說明:

一、試題類別對答題表現及試題類別對答題自信的關聯

在試題類別對答題表現、試題類別對答題自信這兩部分的關聯性研究,主要以相依樣本 的 ANOVA 統計方法來進行研究分析。其中,在試題類別的分類上,又可分為四類不同的認 知層次及三類不同的知識種類,之後再各自以相依樣本 ANOVA 的統計方法,來分別檢定不 同的試題類別分別對答題表現及答題自信的關聯性,若彼此的差異情形達.05 的顯著標準,則 再進一步以最小顯著差異檢定法(Least significant difference,LSD),來進行兩兩的事後比較。

各項目的關聯檢定表則詳見表 3-9。

- 43 -

表 3-9

試題類別各自對答題表現及答題自信的關聯檢定表 試題類別

認知層次(四類) 知識類別(三類)

答題表現 認知層次對答題表現的關聯 知識類別對答題表現的關聯 答題自信 認知層次對答題自信的關聯 知識類別對答題表現的關聯

另外,在進行相依樣本重複量數的 ANOVA 時,透過受試者內效應的檢定表中,來觀察 其淨相關 Eta 平方值(η2)的大小,並藉此判斷自變項與依變項兩者屬於何種關聯強度。根據統 計學者 Cohen(1988)的建議,淨相關 Eta 平方值(η2)是一種自變項在扣除其他效果項的影響之 後,對依變項影響力的一種統計量,其所建議的判斷準則如下所示:

0.010≤η2<0.059 表示自變項與依變項兩者呈現低度關聯強度 0.059≤η2<0.138 表示自變項與依變項兩者呈現中度關聯強度 0.138≤η2 表示自變項與依變項兩者呈現高度關聯強度

二、答題自信對答題表現的關聯

學生的答題表現對答題自信這部份的關聯性研究,則是先以卡方獨立性檢定來逐題分析 兩者是否有關聯,之後再以相依樣本的 ANOVA 統計方法,來分別檢定不同的試題類別分別 對過度自信及缺乏自信的關聯性,並透過事後比較的結果,觀察哪一類別的試題,較易讓學 生有過度自信或缺乏自信的狀況。

另外,在利用卡方獨立性檢定,來逐題判斷學生的答題自信與答題表現是否有關聯的部 分,當我們已確定兩者已呈現關聯後,亦可透過 Cramer’s V 係數的大小來判斷兩者的關聯強 度。而 Cohen(1988)對於 Cramer’s V 係數效果量所建議的判斷準則如下所示:

Cramer’s V 值 < 0.1 表示兩者無關聯強度

0.1 ≤ Cramer’s V 值 < 0.3 表示兩者呈現低度關聯強度

- 44 -

0.3 ≤ Cramer’s V 值 < 0.5 表示兩者呈現中度關聯強度 0.5 ≤ Cramer’s V 值 表示兩者呈現高度關聯強度

而在判定那些類別的題目,比較容易有過度自信或缺乏自信這部分,我們則是先將各題 學生答題表現及答題自信的狀況,依據表 3-5 的分類方式進行分類統計,並統計各題過度自 信及缺乏自信這兩類的人數,並依據四類認知層次及三類知識種類,各自將過度自信及缺乏 自信的人數合併計次(詳細的題號合併方式,可對照表 3-4 的題數統計及題號對照表)。之後,

再以相依樣本的 ANOVA 統計方法,來分別檢定不同的試題類別分別對過度自信及缺乏自信 此兩種答題狀況的關聯性,並藉由淨相關 Eta 平方值(η2)的大小,並觀察兩者的關聯強度為何。

若顯示兩者之間有關聯,則再進一步以最小顯著差異檢定法(Least significant difference)進行事 後比較,比較不同試題類別各項目之間,哪一個項目造成學生在答題上,容易出現過度自信 或缺乏自信的情形。各項目的關聯檢定表則詳見表 3-10。

表 3-10

試題類別各自對過度自信及缺乏自信的關聯檢定表 試題類別

認知層次(四類) 知識類別(三類)

過度自信 認知層次對過度自信的關聯 知識類別對過度自信的關聯 缺乏自信 認知層次對缺乏自信的關聯 知識類別對缺乏自信的關聯

三、綜合整理及說明

綜合上述的資料統計方法,相關的資料處理方式如下:

(一) 在試題的認知層次與學生答題表現的關聯性部分,是以四類不同認知層次的試題為自變 項,學生的答題表現為依變項,再以相依樣本的單因子變異數分析的統計方法,來觀察 學生的答題表現,是否會因記憶、瞭解、應用及高層次思考等四類不同認知層次的試題 類別(每一類皆 6 題),而有顯著差異?並依據淨相關 Eta 平方值(η2),來判斷學生的答題

- 45 -

表現與試題的認知層次之間,兩者的關聯強度為何?

(二) 在試題的知識類別與學生答題表現的關聯性部分,是以三類不同知識類別的試題為自變 項,學生的答題表現為依變項,再以相依樣本的單因子變異數分析的統計方法,觀察學 生的答題表現,是否會因事實知識、概念知識、程序知識等三類不同知識類別的試題(每 一類皆 8 題),而有顯著差異?並依據淨相關 Eta 平方值(η2),來判斷學生的答題表現與 試題的知識種類之間,兩者的關聯強度為何?

(三) 在試題的認知層次與學生答題自信的關聯性部分,是以四類不同認知層次的試題為自變 項,學生的答題自信為依變項,再以相依樣本的單因子變異數分析的統計方法,來觀察 學生的答題自信,是否會因記憶、瞭解、應用及高層次思考等四類不同認知層次的試題 類別(每一類皆 6 題),而有顯著性差異?並依據淨相關 Eta 平方值(η2),來判斷學生的答 題自信與試題的認知層次之間,兩者的關聯強度為何?

(四) 在試題的知識類別與學生答題自信的關聯性部分,是以三類不同知識類別的試題為自變 項,學生的答題自信為依變項,再以相依樣本的單因子變異數分析的統計方法,觀察學 生的答題自信,是否會因事實知識、概念知識、程序知識等三類不同知識類別的試題(每 一類皆 8 題),而有顯著差異?並依據淨相關 Eta 平方值(η2),來判斷學生的答題自信與 試題的知識種類之間,兩者的關聯強度為何?

(五) 在學生的答題表現與答題自信的關聯性探討上,則是分別以下列的狀況來分別進行分析 討論:

1. 逐題依照學生答題表現及答題自信的結果,各自將學生進行分組,之後再以卡方獨立 性檢定(Chi-square test of independence)的統計方法,來逐題瞭解答題表現及答題自信 兩者是否有所關聯?同時依據其 Cramer’s V 係數的大小,來判斷該題中學生的答題表 現與答題自信,兩者的關聯強度為何?

2. 在找出在哪些認知層次或那些知識類別的試題裡,學生容易出現答對題目卻沒信心之 類缺乏自信的情形,或是對自己有信心卻答題錯誤之類過度自信的狀況,在這部分,

- 46 -

則是依據四類認知層次及三類知識種類,先各自將過度自信及缺乏自信的人數合併計

則是依據四類認知層次及三類知識種類,先各自將過度自信及缺乏自信的人數合併計