第四章 實驗設計與分析
4.1 實驗一：文章閱讀支援介面
4.1.1 實驗設計
4.1.1.1 實驗對象
本實驗對象是以中華大學英文能力電腦分級測驗為依據，此分級測驗依測驗 結果分為 A（高級）、B（中級）、C（初級）三級。而分級標準將以一定比率來 界定，測驗成績全校前 30﹪之同學將列入A 級，後 30﹪之同學將列為 C 級，其 餘 40﹪將列為B 級。因為受測者已經經過英文能力分級測驗，所以本次實驗將 不再對受測者做前測。本實驗受測時間為 2009 年（97 學年度第 2 學期），實驗 對象為英文能力電腦分級測驗等級 A 級且為大學二年級的非外文系學生，授課 課程皆為大二英文，雖然受測者為不同系學生，但在英文能力上卻具有相同程度 的能力，所以所有受測者皆相當符合這次實驗的對象準則。
受測者依照上課班級來分成三組，人數共96 人，每 32 人為一班級，共三個 班級。因為三組系統是按照註記輔助功能多寡做為區分(如表：4-1)，所以將輔助 功能最多的那組定義為實驗組（如圖4-1），另外兩組為控制組 A（如圖 4-2）和 控制組 B（如圖 4-3）。但因為控制組 B 缺席率太高，所以不足的人數則另外找 一班同樣為大二英文 A 級的班級做實驗。三組的實驗時間為一堂課的時間大約 50 分鐘，前 2 分鐘稍做系統操作說明，30 分鐘讓受測者使用輔助系統閱讀英文 文章，剩餘時間則做回憶測驗和態度性問卷。以下將針對實驗流程稍做說明，如 下圖4-1：實驗流程所示。
1. 本實驗進行的方式為事先準備好實驗教室，以及電腦及網路等實驗器材，並 且給予每位受測者登入系統的帳號和密碼。
2. 接著對各實驗對象講解實驗目的及每組受測者之任務，接著說明系統目的及 操作流程。
3. 接著讓受測者開始進行使用系統，並且利用系統提供之註記閱讀輔助功能做 英文閱讀。
63
4. 閱讀完畢後，受測者將接受回憶測驗和填寫一份關於系統的態度性問卷，以 藉此分析使用者對於本系統之使用後的成效和感想。
圖4-1：實驗流程
表4-1：實驗分組配置表 實驗準備 講解實驗目的 講解系統操作 受測者開始進行實驗
實驗結束 填寫態度性問卷
接受回憶測驗
實驗組 控制組A 控制組B 文章閱讀支援介面
(多樣註記功能含字 典)
文章閱讀支援介面 (純註記含字典)
文章閱讀支援介面 (僅字典)
32 人 32 人 32 人
64
圖4-2 實驗組閱讀輔助系統畫面
圖4-3 控制組 A 閱讀輔助系統畫面
圖4-4 控制組 B 閱讀輔助系統畫面
65
本次實驗地點為中華大學計算機中心的電腦教室，受測文章採用「Read to Write」(Gillie, Ingle, & Mumford, 2001), pp. 232.一書中的「Stress」文章(詳細文章 如附錄 A)，並且使用隨堂測驗的名義來進行實驗，每位同學都會積極面對與思 考文章的撰寫方式，就可以排除消極的實驗態度，所以實驗的對象是以積極參與 的態度來進行實驗的，實驗所產生出來的結果將具有相當高的參考價值。
為了減低電腦使用經驗對本實驗的影響，在實驗之前給予受測者完整的系統 操作說明，操作內容包括系統的位址、登入方式、如何利用系統來進行英文閱讀 等等，並且將系統的操作說明分發給每位使用者，在操作過程中現場的助教只提 供協助其系統的操作，以確保每位使用者都能順暢地使用該系統的每項功能。
4.1.1.2 回憶測驗
本實驗中回憶測驗分成兩種(見附錄B)，第一種是線索回憶測驗，第二種是 自由回憶測驗。其中線索回憶測驗的題目是在有提供線索的情況下做答，題型為 選擇題；自由回憶測驗的題目是在沒有提供線索的情況下做答，題型為問答題。
本實驗所著重之重點主要為探討三組英文閱讀註記輔助系統對於英文閱讀 學習之效果影響，尤以針對探討英文文章中各段落的主題句、控制概念和支持細 節此三種要素為主，而其效果的評量主要是透過回憶測驗的評分標準來分析。
4.1.1.3 態度性問卷
受測者在實際操作實驗系統和做完回憶測驗過後，將會填寫一份態度性問卷 (見附錄 E)，本實驗將透過態度性問卷每個構面的分析來瞭解此系統是否有效的 幫助使用者進行英文閱讀。本實驗中主要分為三組進行，對象為中華大學大二英 文為A 級者學生，每 32 人為一組，共三組。
實驗組：使用文章閱讀支援介面(多樣註記功能含字典)進行文章閱讀。
66
控制組A：使用文章閱讀支援介面(純註記含字典)進行文章閱讀。
控制組B：使用文章閱讀支援介面(僅字典)進行文章閱讀。
此份態度性問卷主要針對實驗組以及控制組受測者於使用實驗系統之後的 結果作一主觀性的態度評量，構面的設計是參考自(曹忠學, 2004)的態度性問卷 中配合本實驗而產生，以下為構面的探討與說明：
(1) 系統易用性：系統易用性主要是探討受測者在實驗中，對於系統操作是 否容易，針對於系統操作步驟、系統內容等等加以探討之。
(2) 系統有用性：因為系統的建置是針對於輔助文章閱讀的進行，針對文章 閱讀的輔助以及判斷主題句、控制句、支持句來瞭解該系統對受測者有 確實的幫助。
(3) 系統使用態度：此構面希望能夠瞭解受測者對於系統使用的滿意度，無 論是系統內容或者是系統的使用上，都希望能夠瞭解受測者使用系統後 的滿意度。
(4) 系統使用意圖：受測者在使用系統後對於系統的內容的印象，往後在閱 讀的時候是否會考慮再度使用系統，在未來是否能夠接受這樣的閱讀系 統。
4.1.1.4 實驗假說與檢定方式
本實驗對於學生實驗組、控制組A和控制組B，所定的假說分別為線索回憶 測驗研究假說、自由回憶測驗研究假說和態度性問卷研究假說，如下所列：
線索回憶測驗研究假說
本實驗將採用下列假說分別對實驗組、控制組A 和控制組 B 兩兩相比做獨 立樣本 T 檢定。實驗組和控制組 A 線索回憶測驗研究假設為：虛無假設 H0：μ
＝μ0，代表無顯著差異；對立假設 H0a：μ≠μ0a，即代表有顯著差異。實驗組和控 制組B 線索回憶測驗研究假設為：虛無假設 H1：μ＝μ1，代表無顯著差異；對立
67
假設 H1a：μ≠μ1a，即代表有顯著差異。控制組 A 和控制組 B 線索回憶測驗研究 假設為：虛無假設 H2：μ＝μ，代表無顯著差異；對立假設 H2a：μ≠μ2a，即代表 有顯著差異。
自由回憶測驗研究假說
自由回憶測驗部分，本實驗採用匿名批閱，以求公平公正性，因為有兩位批 改者，所以必須先分析兩位批改者所批閱的成績相關性，可藉由相關係數高低判 斷分數的可靠性是否採用，才能繼續做研究分析。所以自由回憶測驗包含兩項研 究假說，如下所示：
(1) 兩筆成績相關係數分析：
採用斯皮爾曼等級相關(Spearman rank-order correlation)，其使用在計算兩組 等級之間一致的程度，如兩個評分者評N 件作品，或同一個人先後兩次評 N 件作品等。此分析研究假設將分為三組，實驗組：虛無假設 H0：
r
S = 0，代表兩者無相關；對立假設 H0a：
r
S ≠0，代表兩者有相關。控制組 A：虛無假 設 H1：r
S = 0，代表兩者無相關；對立假設 H1a：r
S ≠0，代表兩者有相關。控制組B：虛無假設 H2：
r
S = 0，代表兩者無相關；對立假設 H2a：r
S ≠0，代表兩者有相關。
(2) 自由回憶測驗研究假說：
此部分採用的假說和線索回憶測驗一樣採用下列假說分別對實驗組、控制組 A 和控制組 B 兩兩相比做獨立樣本 T 檢定。實驗組和控制組 A 線索回憶測驗 研究假設為：虛無假設 H3：μ＝μ3，代表無顯著差異；對立假設 H3a：μ≠μ3a， 即代表有顯著差異。實驗組和控制組B 線索回憶測驗研究假設為：虛無假設 H4：μ＝μ4，代表無顯著差異；對立假設 H4a：μ≠μ4a，即代表有顯著差異。控
68
制組A 和控制組 B 線索回憶測驗研究假設為：虛無假設 H5：μ＝μ5，代表無 顯著差異；對立假設 H5a：μ≠μ5a，即代表有顯著差異。
態度性問卷研究假說
態度性問卷研究假說分別對實驗組、控制組 A 做獨立樣本 T 檢定。如下所 示：
實驗組與控制組A
(1) H1.1:μse=μsca 實驗組及控制組A，對於『系統易用性』此構面的看法並沒 有顯著的差異。
(2) H1.2:μse=μsca 實驗組及控制組A，對於『系統有用性』此構面的看法並沒 有顯著的差異。
(3) H1.3:μse=μsca 實驗組及控制組A，對於『系統使用態度』此構面的看法並 沒有顯著的差異。
(4) H1.4:μse=μsca 實驗組及控制組A，對於『系統使用意圖』此構面的看法並 沒有顯著的差異。
H1.1~ H1.4是利用構面平均數來檢驗的虛無假設，μse表示在該構面下，實驗 組所得的平均數，而 μsca則表示控制組 A 所得的平均數； t-檢定主要目的在於 驗證實驗組及控制組A，對於各個構面所得的平均數是否具有差異性；而實驗組 及控制組 A 的控制因素差異在於，實驗組所使用的英文閱讀輔助系統功能較控 制組A 來的多，因此，H1.1a ~ H1.4a:μse≠μsca對立假說主要是要驗證實驗組系統的 確比控制組A 所使用的系統更好。