• 沒有找到結果。

實驗設計

在文檔中 中 華 大 學 (頁 108-114)

第四章 實驗設計與分析

4.2 實驗二:鷹架式閱讀介面和文章結構分析介面

4.2.1 實驗設計

4.2.1.1 實驗對象

本實驗對象為中原大學應用外語系學生,實驗時間為2009 年 98 學年度第一 學期,在進行實驗之前,每位受測者皆經過前測密西根測驗,此(密西根)測驗是 為非英語系國家但想要赴美留學之學生所設計,考試內容大致可分為聽力測驗、

英語能力測驗和寫作測驗。每位受測者的授課課程皆為大一英文寫作,所以受測 者在英文能力上都具有相同程度的能力,所以所有受測者皆相當符合這次實驗的 對象準則。

受測者依照前測成績做獨立樣本 T 檢定分成兩組,人數共 30 人,每 15 人 為一組。本實驗將本研究開發之系統定義為實驗組(如圖4-18),另外一組為控 制組(如圖4-19)。兩組的實驗時間為一堂課的時間大約50 分鐘,並給予受測者 充分時間使用輔助系統閱讀英文文章,剩餘時間則做回憶測驗和態度性問卷。兩

95

組都必須在時間內完成實驗中所有的步驟,所以沒有其他多於時間可以作其他無 關實驗的事情。

圖4-18:實驗二實驗組畫面

圖4-19:實驗二控制組畫面

本次實驗地點為中原大學全人村的電腦教室,在進行實驗之前,實驗組和控 制組受測者皆已經實地練習操作過各自的系統兩次,所以受測者對於系統使用方 式皆已經具備一定的了解程度,受測文章採用「Read to Write」(Gillie, Ingle, &

Mumford, 2001)一書中的「My Dad」、「Public Companies vs. Private Companies」

兩篇文章和「Ready to Write more: from paragraph to essay」(Blanchard, K., & Root,

96

Christine 2004)一書中的「The Extinction of the Dinosaurs」文章(詳細文章如附錄 C),其中「My Dad」文章為描述文體,「Public Companies vs. Private Companies」

文章為比較和對比文體,「The Extinction of the Dinosaurs」文章為因果關係文體。

所以受測文章總共為三篇,為期三個星期,每星期於課堂上測驗一篇文章。由於 線上閱讀這三篇文章為課程的重要練習,因此每位同學都積極面對與思考文章的 撰寫方式,實驗所產生的結果也具有顯著的參考價值。表 4-33 為本實驗的分組 狀況。

表4-33:實驗分組配置表 實驗組 控制組 鷹架式閱讀介面和

文章結構分析介面 (含字典)

文章閱讀支援介面 (多樣註記功能含字 典)

15 人 15 人

為了減低電腦使用經驗對本實驗的影響,在實驗之前給予受測者完整的系統 操作說明,操作內容包括系統的位址、登入方式、如何利用系統來進行英文閱讀 等等,並且將系統的操作說明分發給每位使用者,且因為實驗組系統操作過程較 為繁雜,所以將操作說明擺放在實驗組系統頁面上,讓受測者在操作系統時隨時 都可線上觀看系統的操作說明。而在操作過程中現場的助教只提供協助其系統的 操作,以確保每位使用者都能順暢地使用該系統的每項功能。

4.2.1.2 回憶測驗

本實驗中回憶測驗所使用的問卷和實驗一相同分成兩種(見附錄 D),第一種

97

是線索回憶測驗,第二種是自由回憶測驗。其中線索回憶測驗的題目是在有提供 線索的情況下做答,題型為選擇題;自由回憶測驗的題目是在沒有提供線索的情 況下做答,題型為問答題。

本實驗所著重之重點主要為探討兩組系統對於英文閱讀學習之效果影響,除 了針對探討英文文章中各段落的主題句、控制概念和支持細節此三種要素為主 外,實驗二的實驗組系統還針對文章文體結構分析為主來做探討,而其效果的評 量主要是透過回憶測驗的評分標準來分析。

4.2.1.3 態度性問卷

受測者在實際操作實驗系統和做完回憶測驗過後,會填寫一份態度性問卷,

本實驗將透過態度性問卷每個構面的分析來瞭解此系統是否有效的幫助使用者 進行英文閱讀。本實驗中主要分為兩組進行,對象為中原大學應用外語系大一學 生,每15 人為一組,共兩組。

實驗組:使用英文閱讀註記輔助系統(多功能) 結合鷹架式英語結構分析系 統進行文章閱讀。

控制組:使用英文閱讀註記輔助系統(多功能)進行文章閱讀。

此份態度性問卷主要針對實驗組以及控制組受測者於使用實驗系統之後的 結果作一主觀性的態度評量,構面的設計是參考自(曹忠學, 2004)的態度性問卷 中配合本實驗而產生,以下為構面的探討與說明:

(1) 系統易用性:系統易用性主要是探討受測者在實驗中,對於系統操作是 否容易,針對於系統操作步驟、系統內容等等加以探討之。

(2) 系統有用性:因為系統的建置是針對於輔助文章閱讀的進行,針對文章 閱讀的輔助和文章結構分析以及判斷主題句、控制句、支持句來瞭解該 系統對受測者有確實的幫助。

(3) 系統使用態度:此構面希望能夠瞭解受測者對於系統使用的滿意度,無

98

論是系統內容或者是系統的使用上,都希望能夠瞭解受測者使用系統後 的滿意度。

(4) 系統使用意圖:受測者在使用系統後對於系統的內容的印象,往後在閱 讀的時候是否會考慮再度使用系統,在未來是否能夠接受這樣的閱讀系 統。

4.2.1.4 實驗假說與檢定方式

本實驗對於學生實驗組和控制組,所定的假說分別為線索回憶測驗研究假 說、自由回憶測驗研究假說和態度性問卷研究假說,如下所列:

線索回憶測驗研究假說

線索回憶測驗研究假設將針對三篇文章做分析,「My Dad」文章:虛無假設 H6:μ=μ6,代表兩者無顯著差異;對立假設 H6a:μ≠μ6a表兩者有顯著差異。「Public Companies vs. Private Companies」文章:虛無假設 H7:μ=μ7代表兩者無顯著差 異;對立假設 H7a:μ≠μ7a表兩者有顯著差異。「The Extinction of the Dinosaurs」

文章:虛無假設 H8:μ=μ8,代表兩者無顯著差異;對立假設 H8a:μ≠μ8a,代表 兩者有顯著差異。本實驗將採用此假說分別對實驗組和控制組相比做獨立樣本T 檢定。

線索回憶主題句測驗研究假說

主題句測驗研究假設將針對三篇文章做分析,「My Dad」文章:虛無假設 H9:μ=μ9,代表無顯著差異;對立假設 H9a:μ≠μ9a,即代表有顯著差異。「Public Companies vs. Private Companies」文章:虛無假設 H10:μ=μ10,代表無顯著差異;

對立假設 H10a:μ≠μ10a,即代表有顯著差異。「The Extinction of the Dinosaurs」文 章:虛無假設 H11:μ=μ11,代表無顯著差異;對立假設 H11a:μ≠μ11a,即代表有

99

顯著差異。本實驗將採用此假說分別對實驗組和控制組相比做獨立樣本T 檢定。

自由回憶測驗研究假說

自由回憶測驗部分和實驗一相同,批改者有兩位,必須先分析兩位批改者所 批閱的成績相關性,可藉由相關係數高低判斷分數的可靠性是否採用,才能繼續 做研究分析。所以自由回憶測驗包含兩項研究假說,如下所示:

(1) 兩筆成績相關係數分析:

採用斯皮爾曼等級相關(Spearman rank-order correlation),其使用在計算兩組 等級之間一致的程度,如兩個評分者評N 件作品,或同一個人先後兩次評 N 件作品等。此分析研究假設將用三篇文章為分組,「My Dad」文章:虛無假 設 H3

r

S = 0,代表兩者無相關;對立假設 H3a

r

S ≠0,代表兩者有相關。「Public Companies vs. Private Companies」文章:虛無假設 H4

r

S = 0,代表兩者無 相關;對立假設 H4a

r

S ≠0,代表兩者有相關。「The Extinction of the Dinosaurs」

文章:虛無假設 H5

r

S = 0,代表兩者無相關;對立假設 H5a

r

S ≠0,代表 兩者有相關。

(2) 自由回憶測驗研究假設:

此部分採用的假說和線索回憶測驗一樣採用下列假說分別對實驗組和控制組 相比做獨立樣本T 檢定。「My Dad」文章:虛無假設 H12:μ=μ12,代表兩者 無顯著差異;對立假設 H12a:μ≠μ12a,代表兩者有顯著差異。「Public Companies vs. Private Companies」文章:虛無假設 H13:μ=μ13,代表兩者無顯著差異;

對立假設 H13a:μ≠μ13a,代表兩者有顯著差異。「The Extinction of the Dinosaurs」

文章:虛無假設 H14:μ=μ14,代表兩者無顯著差異;對立假設 H14a:μ≠μ14a

,代表兩者有顯著差異。

100

態度性問卷研究假說

態度性問卷研究假說分別對實驗組和控制組相比做獨立樣本 T 檢定。如下 所示:

(1) H1.5seascc 實驗組及控制組,對於『系統易用性』此構面的看法並沒有顯 著的差異。

(2) H1.6seascc 實驗組及控制組,對於『系統有用性』此構面的看法並沒 有顯著的差異。

(3) H1.7seascc 實驗組及控制組,對於『系統使用態度』此構面的看法並 沒有顯著的差異。

(4) H1.8seascc 實驗組及控制組,對於『系統使用意圖』此構面的看法並 沒有顯著的差異。

H1.5~ H1.8是利用構面平均數來檢驗的虛無假設,μsea表示在該構面下,實驗 組所得的平均數,而 μscc則表示控制組所得的平均數; T 檢定主要目的在於驗 證實驗組及控制組,對於各個構面所得的平均數是否具有差異性;而實驗組及控 制組的控制因素差異在於,實驗組所使用的英文閱讀輔助系統功能較控制組來的 多,因此,H1.5a ~ H1.8asea ≠μscc對立假說主要是要驗證實驗組系統的確比控制組 所使用的系統更好。

在文檔中 中 華 大 學 (頁 108-114)

相關文件