實驗結果分析

本實驗所著重之重點為比較兩組閱讀輔助系統，是否輔以鷹架式段落大意分 析和英文文章結構分析功能者較具有成效性；並且透過回憶測驗分析受測者是否 有達成學習之效果，而此份態度性問卷主要針對實驗組和控制組使用者於使用本 閱讀輔助系統之後的使用結果作一主觀性的態度評量，探討使用者之態度是否有 正面效果。

而其系統效果的評量主要是透過回憶測驗批閱分數為依據，進而分析兩組受 測者在使用系統過後是否有達到學習之成效，下一節將實驗組和控制組的得分列 出後進行分析與說明。

4.2.3.1 回憶測驗分析

在實驗組和控制組學生使用完註記閱讀輔助系統後，兩組學生都會接受回憶 測驗，藉此測出兩組學生對於文章的了解度，也可看出學生在文章中對各段落的 主題句、控制概念和支持細節三種要素的判斷，以及對各段落大意分析和文章結 構分析。

本次實驗中的回憶測驗將分成兩部分，第一部分是線索回憶測驗，第二部分 是自由回憶測驗。實驗二的回憶測驗和實驗一唯一不同的是，實驗二根據前兩次 受測者練習的狀況而改進回憶測驗出題的方式，原本自由回憶測驗包含的主題句 測驗，將改為選擇題出題，也就是說主題句測驗改為線索回憶測驗的出題方式。

線索回憶測驗採用選擇題，題目總共為10 題，答對一題得十分，總分為 100 分，答案在文章中便可直接取得；主題句測驗和線索回憶測驗一樣採用選擇題，

題數則為文章共有幾個段落則出幾題，每題得分以老師修改成績為主，總分為 100 分，答案一樣在文章中便可直接取得；自由回憶測驗則採用簡答題的方式，

103

題目總共三題，主要是測驗學生對文章的結構判斷和文章的目的還有各段落的支 持句。得分標準是以contest structure analysis (Meyer, 1975)的分析方法獲得(請參 考附錄 F)。回憶測驗兩位批改者，為中原大學應用外語系之研究人員，本研究 開發系統者並沒有參與回憶測驗評分過程，以求公平和公正性。最後透過實驗組 和控制組實施的兩部分回憶測驗評分標準來評量兩組系統在英文閱讀上是否具 有成效。回憶測驗部分將採用獨立樣本T 檢定判斷兩組成績是否有明顯的差異，

以下將兩部分回憶測驗分別做分析比較。

線索回憶測驗(Cue Recall Test)

線索回憶測驗分析總共有三篇文章，分別為「My Dad」、「Public Companies vs. Private Companies」和「The Extinction of the Dinosaurs」。以下將針對此三篇 文章做檢定分析。

實驗組和控制組線索回憶測驗研究假設為，「My Dad」文章：虛無假設 H¹²： μ＝μ¹²，代表兩者無顯著差異；對立假設 H¹³：μ≠μ¹³，代表兩者有顯著差異。「Public Companies vs. Private Companies」文章：虛無假設 H¹⁴：μ＝μ¹⁴，代表兩者無顯著 差異；對立假設 H¹⁵：μ≠μ¹⁵，代表兩者有顯著差異。「The Extinction of the Dinosaurs」文章：虛無假設 H¹⁶：μ＝μ¹⁶，代表兩者無顯著差異；對立假設 H¹⁷： μ≠μ¹⁷，代表兩者有顯著差異。實驗組和控制組兩組三篇文章成績統計量如下表 4-34、表 4-36 和表 4-38，可看出兩組成績的平均數和標準差；實驗組和控制組 兩組三篇文章線索回憶測驗成績獨立樣本 T 檢定如下表4-34、表 4-36 和表 4-38 所示，可藉此判斷出兩組成績是否具有顯著的差異。

表4-34 實驗組和控制組「My Dad」文章線索回憶測驗組別統計量

GROUP 個數 平均數 標準差 平均數的標準誤 SCORE 實驗組 15 83.33 11.13 2.87

控制組 15 70.00 18.90 4.88

104

表4-35 實驗組和控制組「My Dad」文章線索回憶測驗獨立樣本 T 檢定

變異數 相等的 Levene 檢定

平均數相等的T檢定

差異的95%信 F 檢定 顯著性 t 自由度 顯著性 賴區間

(雙尾) 平均差異 標準誤

差異

下界 上界

SCORE 假設變 異數相 等

1.217 0.279 2.355 28 0.026 13.33 5.66 1.73 24.93 不假設

變異數 相等

2.355 22.665 0.028 13.33 5.66 1.61 25.06

由表4-34 和表 4-35 所示，實驗組和控制組兩組，顯示在成績裡，檢定統計 量 t = 2.355，顯著性(雙尾) P = 0.026＜0.05，拒絕虛無假設，在α= 0.05 水準下，

實驗組和控制組的成績平均數是不一樣的，有顯著的差異。

表4-36 實驗組和控制組「Public Companies vs. Private Companies」文章線索 回憶測驗組別統計量

GROUP 個數 平均數 標準差 平均數的標準誤 SCORE 實驗組 15 96.67 4.88 1.26

控制組 15 90.00 9.26 2.39

105

表4-37 實驗組和控制組「Public Companies vs. Private Companies」文章線索回憶 測驗獨立樣本T 檢定

變異數 相等的 Levene 檢定

平均數相等的T檢定

差異的95%信 F 檢定 顯著性 t 自由度 顯著性 賴區間

(雙尾) 平均差異 標準誤

差異

下界 上界

SCORE 假設變 異數相 等

1.818 0.188 2.467 28 0.020 6.67 2.70 1.13 12.20 不假設

變異數 相等

2.467 21.221 0.022 6.67 2.70 1.05 12.28

由表4-36 和表 4-37 所示，實驗組和控制組兩組，顯示在成績裡，檢定統計 量 t = 2.467，顯著性(雙尾) P = 0.020＜0.05，拒絕虛無假設，在α= 0.05 水準下，

實驗組和控制組的成績平均數是不一樣的，有顯著的差異。

表4-38 實驗組和控制組「The Extinction of the Dinosaurs」文章線索回憶測 驗組別統計量

GROUP 個數 平均數 標準差 平均數的標準誤 SCORE 實驗組 14 75.71 12.84 3.43

控制組 14 79.29 16.39 4.38

106

表4-39 實驗組和控制組「The Extinction of the Dinosaurs」文章線索回憶測驗獨 立樣本T 檢定

變異數 相等的 Levene 檢定

平均數相等的T檢定

差異的95%信 F 檢定 顯著性 t 自由度 顯著性 賴區間

(雙尾) 平均差異 標準誤

差異

下界 上界

SCORE 假設變 異數相 等

0.229 0.636 -0.642 26 0.527 -3.57 5.56 -15.01 7.87 不假設

變異數 相等

-0.642 24.589 0.527 -3.57 5.56 -15.04 7.90

由表4-38 和表 4-39 所示，實驗組和控制組兩組，顯示在成績裡，檢定統計 量 t = -0.642，顯著性(雙尾) P = 0.527＞0.05，接受虛無假設，在α= 0.05 水準下，

實驗組和控制組的成績平均數是一樣的，沒有顯著差異。歸咎其原因可能為受測 者對於實驗過程態度已經表現出不耐煩和缺乏耐心，所以在最後一週測驗成績顯 示為不顯著。

自由回憶測驗

自由回憶測驗和線索回憶測驗一樣將針對此三篇文章做檢定分析「My Dad」、「Public Companies vs. Private Companies」和「The Extinction of the Dinosaurs」。

首先，在進行自由回憶測驗成績分析前，必須先評估兩位批改者成績的相關 係數分析，可藉由相關係數高低判斷分數的可靠性是否採用，兩組三篇文章相關 係數分析如下表4-40、表 4-41 和表 4-42 所示。而自由回憶測驗研究假設和線索 回憶測驗一樣為，「My Dad」文章：虛無假設 H¹⁸：μ＝μ¹⁸，代表兩者無顯著差異；

對立假設 H¹⁹：μ≠μ¹⁹，代表兩者有顯著差異。「Public Companies vs. Private

107

Companies」文章：虛無假設 H²⁰：μ＝μ²⁰，代表兩者無顯著差異；對立假設 H²¹： μ≠μ²¹，代表兩者有顯著差異。「The Extinction of the Dinosaurs」文章：虛無假設 H²²：μ＝μ²²，代表兩者無顯著差異；對立假設 H²³：μ≠μ²³，代表兩者有顯著差異。

實驗組和控制組兩組三篇文章成績統計量如下表4-43、表 4-45 和表 4-47，可看 出兩組成績的平均數和標準差；實驗組和控制組兩組三篇文章自由回憶測驗成績 獨立樣本 T 檢定如下表4-44、表 4-46 和表 4-48 所示，可藉此判斷出兩組成績是 否具有顯著的差異。

相關係數分析

自由回憶測驗相關係數分析，採用斯皮爾曼等級相關(Spearman rank-order correlation)，其使用在計算兩組等級之間一致的程度，如兩個評分者評 N 件作 品，或同一個人先後兩次評 N 件作品等。此分析研究假設將用三篇文章做為分 組，「My Dad」文章：虛無假設 H6：

r

S = 0，代表兩者無相關；對立假設 H7：

r

S ≠0，代表兩者有相關。「Public Companies vs. Private Companies」文章：虛無

假設 H8：

r

S = 0，代表兩者無相關；對立假設 H9：

r

S ≠0，代表兩者有相關。「The Extinction of the Dinosaurs」文章：虛無假設 H10：

r

S = 0，代表兩者無相關；對 立假設 H11：

r

S ≠0，代表兩者有相關。以下將分別對實驗組和控制組在三篇文章 自由回憶測驗成績上做相關係數分析。

108

表4-40「My Dad」文章自由回憶測驗成績相關係數分析

SCORE1 SCORE2 Spearman's rho係數 SCORE1 相關係數 1.000 0.959**

顯著性(雙尾) . 0.000

個數 30 30

SCORE2 相關係數 0.959** 1.000

顯著性(雙尾) 0.000 .

個數 30 30

註：**在.01水準(雙尾)上的相關才會顯著。

表4-41「Public Companies vs. Private Companies」文章自由回憶測驗成績相關係 數分析

SCORE1 SCORE2 Spearman's rho係數 SCORE1 相關係數 1.000 0.715**

顯著性(雙尾) . 0.000

個數 30 30

SCORE2 相關係數 0.715** 1.000

顯著性(雙尾) 0.000 .

個數 30 30

註：**在.01水準(雙尾)上的相關才會顯著。

表4-42「The Extinction of the Dinosaurs」文章自由回憶測驗成績相關係數分析

SCORE1 SCORE2 Spearman's rho係數 SCORE1 相關係數 1.000 0.950**

顯著性(雙尾) . 0.000

個數 29 29

SCORE2 相關係數 0.950** 1.000

顯著性(雙尾) 0.000 .

個數 29 29

註：**在.01水準(雙尾)上的相關才會顯著。

109

從上表4-40便可以得知 p-value = 0.000＜0.05，拒絕H6，表示兩筆成績評分 給等級之間的結果相近，相關係數達0.864，屬於高度正相關。而從表4-41可以看 出同樣 p-value=0.000＜0.05，拒絕H8，表示兩筆成績評分給等級之間的結果相 近 ， 相 關 係 數 達0.715 ， 屬 於 高 度 正 相 關 。 最 後 由 表 4-42 也 可 以 看 出 同 樣 p-value=0.000＜0.05，拒絕H10，表示兩筆成績評分給等級之間的結果相近，相關 係數達0.950，屬於高度正相關。由此可知，兩位批改者所改出來的成績是很相 近的，所以兩筆成績是屬於可採用的分數，接著便可開始對實驗組和控制組兩組 自由回憶測驗成績做獨立樣本T檢定，如下表4-43到表4-48所示，可藉此判斷出 兩組成績是否具有顯著的差異。

表4-43 實驗組和控制組「My Dad」文章自由回憶測驗組別統計量

GROUP 個數 平均數 標準差 平均數的標準誤 SCORE 實驗組 15 87.867 27.683 7.148

控制組 15 53.867 22.469 5.801

表4-44 實驗組和控制組「My Dad」文章自由回憶測驗獨立樣本 T 檢定

變異數 相等的 Levene 檢定

平均數相等的T檢定

差異的95%信 F 檢定 顯著性 t 自由度 顯著性 賴區間

(雙尾) 平均差異 標準誤

差異

下界 上界

SCORE 假設變 異數相 等

0.049 0.827 3.693 28 0.001 34.000 9.206 15.143 52.857 不假設

變異數 相等

3.693 26.863 0.001 34.000 9.206 15.107 52.893

由表4-43 和表 4-44 所示，實驗組和控制組兩組，顯示在成績裡，檢定統計

110

量 t = 3.693，顯著性(雙尾) P = 0.001＜0.05，拒絕虛無假設，在α= 0.05 水準下，

實驗組和控制組的成績平均數是不一樣的，有顯著的差異。

表4-45 實驗組和控制組「Public Companies vs. Private Companies」文章自由 回憶測驗組別統計量

GROUP 個數 平均數 標準差 平均數的標準誤

SCORE 實驗組 15 25.333 5.903 1.524

控制組 15 18.733 5.710 1.474

表4-46 實驗組和控制組「Public Companies vs. Private Companies」文章自由回憶 測驗獨立樣本T 檢定

變異數 相等的 Levene 檢定

平均數相等的T檢定

差異的95%信 F 檢定 顯著性 t 自由度 顯著性 賴區間

(雙尾) 平均差異 標準誤

差異

下界 上界

SCORE 假設變 異數相 等

0.022 0.884 3.112 28 0.004 6.600 2.120 2.256 10.944 不假設

變異數 相等

3.112 27.969 0.004 6.600 2.120 2.256 10.944

由表4-45 和表 4-46 所示，實驗組和控制組兩組，顯示在成績裡，檢定統計 量 t = 3.112，顯著性(雙尾) P = 0.004＜0.05，拒絕虛無假設，在α= 0.05 水準下，

實驗組和控制組的成績平均數是不一樣的，有顯著的差異。

在文檔中 中 華 大 學 (頁 116-136)