第四章 實驗設計與分析
4.1 實驗一：文章閱讀支援介面
4.1.3 實驗結果分析
76
77
線索回憶測驗
線索回憶測驗分析將分成兩兩一組做獨立樣本 T 檢定，也就是第一組為實 驗組和控制組A，第二組為實驗組和控制組 B，最後一組為控制組 A 和控制組 B。
首先，實驗組和控制組A 線索回憶測驗研究假設為：虛無假設 H0：μ＝μ0， 代表無顯著差異；對立假設 H0a：μ≠μ0a，即代表有顯著差異。實驗組和控制組A 兩組成績統計量如下表4-2，可看出兩組成績的平均數和標準差；實驗組和控制 組 A 兩組線索回憶測驗成績獨立樣本 T 檢定如下表 4-3 所示，可藉此判斷出兩 組成績是否具有顯著的差異。
表 4-2 實驗組和控制組 A 線索回憶測驗組別統計量
GROUP 個數 平均數 標準差 平均數的標準誤 SCORE 實驗組 32 3.8125 1.7309 0.3060
控制組A 32 3.7188 1.3010 0.2300
表4-3 實驗組和控制組 A 線索回憶測驗獨立樣本 T 檢定
變異數 相等的 Levene 檢定
平均數相等的T檢定
差異的95%信 F 檢定 顯著性 t 自由度 顯著性 賴區間
(雙尾) 平均差異 標準誤
差異
下界 上界
SCORE 假設變 異數相 等
2.863 0.096 0.245 62 0.807 9.375E-02 0.3828 -0.6714 0.8589 不假設
變異數 相等
0.245 57.552 0.807 9.375E-02 0.3828 -0.6726 0.8601
由表4-2和表4-3所示，實驗組和控制組A兩組，顯示在成績裡，檢定統計量 t
78
= 0.245，顯著性(雙尾) P = 0.807＞0.05，接受虛無假設，在α= 0.05水準下，實 驗組和控制組A的成績平均數是一樣的，並沒有顯著差異。
再來，實驗組和控制組B 線索回憶測驗研究假設為：虛無假設 H1：μ＝μ1， 代表無顯著差異；對立假設 H1a：μ≠μ1a，即代表有顯著差異。實驗組和控制組B 兩組成績統計量如下表4-4，可看出兩組成績的平均數和標準差；實驗組和控制 組B 兩組線索回憶測驗成績獨立樣本 T 檢定如下表 4-5 所示，可藉此判斷出兩組 成績是否具有顯著的差異。
表4-4 實驗組和控制組 B 線索回憶測驗組別統計量
GROUP 個數 平均數 標準差 平均數的標準誤 SCORE 實驗組 32 3.8125 1.7309 0.3060
控制組B 32 3.0625 0.9483 0.1676
表4-5 實驗組和控制組 B 線索回憶測驗獨立樣本 T 檢定
變異數 相等的 Levene 檢定
平均數相等的T檢定
差異的95%信賴 F 檢定 顯著性 t 自由度顯著性 區間
(雙尾) 平均差異 標準誤 差異
下界 上界
SCORE 假設變 異數相 等
17.896 0.000 2.150 62 0.035 0.7500 0.3489 5.258E-02 1.4474 不假設
變異數 相等
2.150 48.071 0.037 0.7500 0.3489 4.854E-02 1.4515
由表4-4和表4-5所示，實驗組和控制組B兩組，顯示在成績裡，檢定統計量 t
= 2.150，顯著性(雙尾) P = 0.035＜0.05，拒絕虛無假設，在α= 0.05水準下，實
79
驗組和控制組B的成績平均數是不一樣的，有顯著的差異。
最後，控制組A 和控制組 B 線索回憶測驗研究假設為：虛無假設 H3：μ＝μ3， 代表無顯著差異；對立假設 H3a：μ≠μ3a，即代表有顯著差異。控制組A 和控制組 B 兩組成績統計量如下表 4-13，可看出兩組成績的平均數和標準差；控制組 A 和控制組B 兩組線索回憶測驗成績獨立樣本 T 檢定如下表 4-14 所示，可藉此判 斷出兩組成績是否具有顯著的差異。
表 4-6 控制組 A 和控制組 B 線索回憶測驗組別統計量
GROUP 個數 平均數 標準差 平均數的標準誤 SCORE 控制組A 32 3.7188 1.3010 0.2300
控制組B 32 3.0625 0.9483 0.1676
表4-7 控制組 A 和控制組 B 線索回憶測驗獨立樣本 T 檢定
變異數 相等的 Levene 檢定
平均數相等的T檢定
差異的95%信賴 F 檢定 顯著性 t 自由度顯著性 區間
(雙尾) 平均差異 標準誤 差異
下界 上界
SCORE 假設變 異數相 等
9.502 0.003 2.306 62 0.024 0.6563 0.2846 8.736E-02 1.2251 不假設
變異數 相等
2.306 56.688 0.025 0.6563 0.2846 8.630E-02 1.2262
由表4-6和表4-7所示，控制組A和控制組B兩組，顯示在成績裡，檢定統計量 t = 2.306，顯著性(雙尾) P = 0.024＜0.05，拒絕虛無假設，在α= 0.05水準下，控 制組A和控制組B的成績平均數是不一樣的，有顯著的差異。
80
自由回憶測驗
首先，在進行自由回憶測驗成績分析前，必須先評估兩位批改者成績的相關 係數分析，可藉由相關係數高低判斷分數的可靠性是否採用，兩組相關係數分析 如下表4-12 和表 4-13 所示。而自由回憶測驗研究假設和線索回憶測驗一樣為：
虛無假設 H4：μ＝μ4，代表無顯著差異；對立假設 H4a：μ≠μ4a，即代表有顯著差 異。實驗組、控制組A 和控制組 B 三組成績統計量如下表 4-16 到表 4-18，可看 出兩組成績的平均數和標準差。
相關係數分析
自由回憶測驗相關係數分析，採用斯皮爾曼等級相關(Spearman rank-order correlation)，其使用在計算兩組等級之間一致的程度，如兩個評分者評 N 件作 品，或同一個人先後兩次評N 件作品等。此分析研究假設將分為三組，實驗組：
虛無假設 H0：
r
S = 0，代表兩者無相關；對立假設 H0a：r
S ≠0，代表兩者有相關。控制組A：虛無假設 H1：
r
S = 0，代表兩者無相關；對立假設 H1a：r
S ≠0，代表兩者有相關。控制組B：虛無假設 H2：
r
S = 0，代表兩者無相關；對立假設 H2a：r
S ≠0，代表兩者有相關。以下將分別對實驗組、控制組 A 和控制組 B 在自由回 憶測驗成績上做相關係數分析。81
表4-8 實驗組自由回憶測驗成績相關係數分析
SCORE1 SCORE2 Spearman's rho係數 SCORE1 相關係數 1.000 0.864**
顯著性(雙尾) . 0.000
個數 32 32
SCORE2 相關係數 0.864** 1.000
顯著性(雙尾) 0.000 .
個數 32 32
註：**在.01水準(雙尾)上的相關才會顯著。
表4-9 控制組 A 自由回憶測驗成績相關係數分析
SCORE1 SCORE2 Spearman's rho係數 SCORE1 相關係數 1.000 0.877**
顯著性(雙尾) . 0.000
個數 32 32
SCORE2 相關係數 0.877** 1.000
顯著性(雙尾) 0.000 .
個數 32 32
註：**在.01水準(雙尾)上的相關才會顯著。
表4-10 控制組 B 自由回憶測驗成績相關係數分析
SCORE1 SCORE2 Spearman's rho係數 SCORE1 相關係數 1.000 0.854**
顯著性(雙尾) . 0.000
個數 32 32
SCORE2 相關係數 0.854** 1.000
顯著性(雙尾) 0.000 .
個數 32 32
註：**在.01水準(雙尾)上的相關才會顯著。
從上表4-8便可以得知 p-value = 0.000＜0.05，拒絕H0，表示兩筆成績評分給 等級之間的結果相近，相關係數達0.864，屬於高度正相關。而從表4-9可以看出
82
同樣 p-value=0.000＜0.05，拒絕H2，表示兩筆成績評分給等級之間的結果相近，
相關係數達0.877，屬於高度正相關。最後由表4-10也可以看出同樣 p-value=0.000
＜0.05，拒絕H4，表示兩筆成績評分給等級之間的結果相近，相關係數達0.854，
屬於高度正相關。由此可知，兩位批改者所改出來的成績是很相近的，所以兩筆 成績是屬於可採用的分數，接著便可開始對實驗組、控制組A和控制組B三組自 由回憶測驗成績做獨立樣本T檢定，如下表4-11到表4-16所示，可藉此判斷出三 組成績是否具有顯著的差異
表4-11 實驗組和控制組 A 自由回憶測驗組別統計量
GROUP 個數 平均數 標準差 平均數的標準誤 SCORE 實驗組 32 4.391 2.675 0.473
控制組A 32 3.531 1.800 0.318
表4-12 實驗組和控制組 A 自由回憶測驗獨立樣本 T 檢定
變 異 數 相 等 的 Levene 檢定
平均數相等的T檢定
差 異 的 95% 信 F 檢定 顯著性 t 自由度顯 著 性 賴區間
(雙尾) 平均差異 標 準 誤 差異
下界 上界 SCORE
假 設 變 異 數 相 等
3.513 0.066 1.508 62 0.137 0.859 0.570 -0.280 1.9999 不 假 設
變 異 數 相等
1.508 54.298 0.137 0.859 0.570 -0.283 2.002
由表4-11和表4-12所示，實驗組和控制組A兩組，顯示在成績裡，檢定統計 量 t = 1.508，顯著性(雙尾) P = 0.137＞0.05，接受虛無假設，在α= 0.05水準下，
實驗組和控制組A的成績平均數是一樣的，並沒有顯著差異。
83
表4-13 實驗組和控制組 B 自由回憶測驗組別統計量
GROUP 個數 平均數 標準差 平均數的標準誤 SCORE 實驗組 32 4.391 2.675 0.473
控制組B 32 2.688 1.441 0.255
表4-14 實驗組和控制組 B 自由回憶測驗獨立樣本 T 檢定
變 異 數 相 等 的 Levene 檢定
平均數相等的T檢定
差 異 的 95% 信 F 檢定 顯著性 t 自由度顯 著 性 賴區間
(雙尾) 平均差異 標 準 誤 差異
下界 上界 SCORE
假 設 變 異 數 相 等
7.341 0.009 3.171 62 0.002 1.703 0.537 0.629 2.777 不 假 設
變 異 數 相等
3.171 47.592 0.003 1.703 0.537 0.623 2.783
由表4-13和表4-14所示，實驗組和控制組B兩組，顯示在成績裡，檢定統計 量 t = 3.171，顯著性(雙尾) P = 0.002＜0.05，拒絕虛無假設，在α= 0.05水準下，
實驗組和控制組B的成績平均數是不一樣的，有顯著的差異。
表4-15 控制組 A 和控制組 B 自由回憶測驗組別統計量
GROUP 個數 平均數 標準差 平均數的標準誤 SCORE 控制組A 32 3.531 1.800 0.318
控制組B 32 2.688 1.441 0.255
84
表4-16 控制組 A 和控制組 B 自由回憶測驗獨立樣本 T 檢定
變 異 數 相 等 的 Levene 檢定
平均數相等的T檢定
差異的95%信賴區 F 檢定 顯著性 t 自由度顯 著 性 間
(雙尾)
平 均 差 異
標 準 誤 差異
下界 上界 SCORE
假 設 變 異 數 相 等
0.869 0.355 2.070 62 0.043 0.844 0.408 2.888E-02 1.659 不 假 設
變 異 數 相等
2.070 59.164 0.043 0.844 0.408 2.810E-02 1.659
由表4-15和表4-16所示，控制組A和控制組B兩組，顯示在成績裡，檢定統計 量 t = 2.070，顯著性(雙尾) P = 0.043＜0.05，拒絕虛無假設，在α= 0.05水準下，
控制組A和控制組B的成績平均數是不一樣的，有顯著的差異。
4.1.3.2 回憶測驗分析結果
經過兩部分回憶測驗分析顯示，控制組B 對實驗組和控制組 A 有顯著的差 異，代表實驗組和控制組A 所使用之系統較控制組 B 來的有成效，也進而代表 了具有較多閱讀註記輔助之功能，對閱讀者來說是有幫助的。而實驗組和控制組 A 在成績上並無顯著差異，原因是因為兩組所使用的註記閱讀輔助系統為相同之 系統，皆提供輔助工具，只是輔助功能多寡上之差異；不過我們可從兩組統計量 平均分數上不難看出，實驗組成績還是較控制組來的高，所以雖然兩組並無顯著 差異，但實驗組系統還是比控制組系統在英文閱讀輔助教學上來的較有成效。
4.1.3.3 問卷分析
本實驗問卷的製作並非是依照構面排序的，而是依照學習背景的瞭解再來討
85
論系統的使用是否容易和有用，最後才探討使用系統後的態度與意圖，問卷題目 總共為15 題，構面與題項如下表 4-17：構面與題項組成表。
表4-17：構面與題項組成表 系統易用性 題項：1、2、4、12 系統有用性 題項：3、5、13 系統使用態度 題項：6、7
系統使用意圖 題項：8、9、10、15
分別收集各組的問卷原始資料：學生實驗組及控制組A，各有 32 份，皆採 用李克特五點評量法 ，在李克特五點評量法中：5 表示「非常同意」、4 表示「同 意」、3 表示「無意見」、2 表示「不同意」、1 表示「非常不同意」，數值 5 是最 高，分數越高代表越能滿足使用者需求，最低則為1。對於問卷每個題項的實驗 組、控制組A 其問卷資料的信度分析則於下表 4-18 中。
表 4-18：兩組問卷之構面信度檢測表 構面及衡量項目 實驗組和控制
組A 信度 (Cronbach’s α) 系統易用性 0.7481 系統有用性 0.4649 系統使用態度 0.6796 系統使用意圖 0.8726
實驗結束後所有受測者所填寫的態度性問卷經過統計方法來加以分析，本實
86
驗將所有的構面分開來個別分析，依照系統易用性、系統有用性、系統使用態度 以及系統使用意圖利用 T-檢定驗證實驗組、控制組 A 三組之間的資料平均數是 否有差別，而下表4-19 為實驗組、控制組 A 在各構面之敘述性統計表。
表 4-19 實驗組與控制組 A 在各構面之敘述性統計表 實驗組 控制組A 構面 個數
平均數 標準差 平均數 標準差 系統易用性 32 3.78 0.67 3.65 0.68 系統有用性 32 3.48 0.73 3.38 0.78 系統使用態度 32 3.32 0.74 3.29 0.74 系統使用意圖 32 3.32 0.83 3.21 0.80
系統易用性構面
在此註記閱讀輔助系統容易使用的部分，實驗組的平均數為3.78，控制組為 3.65，兩組對於此系統容易使用的部分均有正面的效果。
根據表 4-20 實驗組單一樣本 T 檢定顯示檢定統計量 t=13.271，P=0.000＜
0.05，所以在實驗組系統易用性統計平均數對平均數 3 而言，具有顯著差異。而 表4-21 控制組 A 單一樣本 T 檢定顯示檢定統計量 t=7.406，P=0.000＜0.05，所以 在控制組A 系統易用性統計平均數對平均數 3 而言，一樣具有顯著差異。
而利用獨立樣本 T 檢定此兩組數據，結果發現並不顯著(P 值=0.280)，代表 兩組間並未有特別差異，而因為兩組所使用的系統為相同之系統，皆提供輔助工 具，只是輔助功能多寡上之差異，因此這個結果代表兩組認為系統對於提高英文 閱讀效率均有正面效果且兩組均不拒絕對於此系統可以提升閱讀之效率之結 果；數據整理如下表4-22。
而從數值中，在平均得分方面可以瞭解實驗組得分較為高分，也顯示出兩組 在操作難度上並無顯著差異。