第三章 研究設計與實施
第二節 研究方法與工具
國
立 政 治 大 學
‧
N a tio na
l C h engchi U ni ve rs it y
32
(三) 評量者：小論文評分教師相同，兩組均由實驗者與相同任課教師交叉評閱。
(四) 完成小論文時間：兩組完成小論文的時間均為 2.5 個月。
第二節 研究方法與工具
一、 研究方法
本研究主要是採準實驗法進行課堂教學實驗，輔以參與觀察記錄學生學習歷程，最後再 以教師及學生訪談紀錄進行文件分析，了解學生學習歷程以及意見。以研究者任教的二個班 級為研究場域進行研究，探究如何藉由 Big6 技能資訊素養教學提升學生的小論文研究能力。
本研究分為二個班級進行，對照組班級採傳統教學，實驗組班級研究者利用主題式 Big6 技能教學的六個階段進行引導，於實驗教學結束後皆進行小論文評比，並使用量化工具研究 分析，將所得的資料與所蒐集的教師回饋、學生訪談等相關質性資料進行歸納與整理，連同 學生的學習檔案，分析學習成果的差異。
(一) 準實驗法
由於學校情境，不便為了應付實驗需要，更動課表或重新編班。因此，本研究係採現有 的班級當作實驗組與對照組，傳統教學的為對照組，實驗教學的為實驗組。
因小論文為學生學習的綜合能力表現，故以高一入學會考成績為前測，了解班級程度，
對照組進行傳統式的小論文教學，只教小論文架構及引註格式的寫法及範例，第一節課進行 分組，自行決定主題，教師採分段寫作教學模式，分為前言、大綱、正文、小論文全文四階 段寫作教學。過程中遇有困難可與老師進行討論，期限內無法繳交者進行口頭報告，由研究 者及另位經驗豐富教師就學生作品進行交叉分項評分，二者平均分數即為學生該項後測成績。
實驗組學生進行 8 週課程，每週 1 節，共 8 小時的 Big6 技能教學引導課程，並與資訊概 論課程合作，進行 2 小時的布林邏輯及網路資訊查找課程，配合公民 2 節課的人權議題給予 主題方向，有利於教師進行專業知識引導，然後學生分組自訂研究主題，於二週內完成作品
‧ 國
立 政 治 大 學
‧
N a tio na
l C h engchi U ni ve rs it y
33
繳交，過程中遇有困難可與老師進行討論，期限內無法繳交者進行口頭報告。最後由研究者 與另一位指導小論文、科展經驗豐富的教師就學生作品進行交叉分項評分，二者平均分數即 為學生該項後測成績。
有鑑於「評分指標」(rubric)利於衡量學生在論文或專題等作業上的表現，可使評量更標 準化、更精確，所以評量標準均參考前國立台北師範學院社會科教育學系所發展的【小論文 評分參考指標】，由教師社群商討進行四次修訂，以符合教學所需，量化及標準化學生表現。
表3-1 實驗設計模式
前測 實驗 後測
對照組 O1 X1 O2
實驗組 O3 X2 O4
X1 是傳統式教學 X2 是主題式大六教學
O1、O3 是前測成績(會考成績) O2、O4 是後測成績
惟此項研究設計，以實驗的內外在效度因素而論，可見的優缺點如下，需於後續分析時 納入參考：
1. 優點：本設計有分實驗組與控制組，並分別施以前後測，前測採會考成績，為全國性 的樣本群數據，信效度高，可了解二組學生的程度是否整齊，若前測分數一致，則可 說成熟度、測驗工具等的影響力已受控制，實驗處理若發生影響，即可肯定。
2. 缺點：受試者無法隨機處理，則無關變項無法控制，且受試者先前具備的特質，可能 造成對實驗結果的誤導，控制組無法確保不受臨時事故、成熟與工具造成的錯誤影 響，易形成統計回歸的現象，致誤將實驗組與控制組的差異，歸之於實驗的結果。
‧ 國
立 政 治 大 學
‧
N a tio na
l C h engchi U ni ve rs it y
34
3. 改善策略：由以上二點可知，應於研究之初，盡一切努力，謀求二組程度要近乎相等，
此次研究者任教學校分班之初是採 S 型編班，應可初步符合此一條件，並將對前測分 數進行分析，視二組的平均數與標準差的差異是否達顯著標準，若二組前測分數不 等，則採前測分數為共變項，進行共變數分析。
(二) 參與觀察
根據《教育大辭書》釋義，參與觀察研究是觀察研究法之一種，其主要特徵為觀察者成 為被觀察團體中的一員，參與活動或生活，一方面扮演參與者的角色，另一方面扮演觀察者 的角色(黃國彥，2000)。
此次研究旨在了解主題式大六教學是否有助於提升學生小論文撰寫研究的質與量，研究 者即施教教師，在教學情境中自然的互動，並於教學過後，進行參與教學教師的訪談，了解 教師教學過程觀察所得，提供的資料亦納入後續分析。
(三) 訪談法
葉乃靜(2012)指出訪談法是質性研究中，用於理解受訪者對研究問題的看法，或陳述對 生活、經驗或情況的觀點等所採用的方法。本實驗擬採半結構性的訪談法，發展訪談題目、
執行預試、實施訪談、編碼、列表、分析，以求具有合理的客觀性之餘，並允許受訪者充分 反映己見，獲得有價值的質性資料。設計訪談對象為學生，篩選前後表現有顯著差異的學生 20 名，進行焦點訪談，釐清其對學習過程的真正感受或困難點，及對學習方式的建議。
(四) 文件分析法
文件分析法(documentary analysis)，係指透過相關文件的蒐集與分析，從中獲得結論的一 種方法 (黃乃熒等，2015) 。本次研究擬收集研究過程中教師教學觀察紀錄、教師社群會議 扎記，了解此教學設計實施的優缺點，總結經驗，記錄學生學習歷程中的表現，提供教學改 進的參考，同時藉由學生訪談及回饋，了解學生對資訊的搜尋、取得、統整、分析技巧的掌 握程度，以及其邏輯架構的體現。
‧ 國
立 政 治 大 學
‧
N a tio na
l C h engchi U ni ve rs it y
35
二、 研究工具
根據研究目的及相關文獻探討，本研究選擇以前國立台北師範學院社會科教育學系所發 展的「小論文評分參考指標」（附錄一），量化及標準化學生表現；並佐以質性之教師課程教 學設計、教學觀察紀錄、課程學習單、學生小論文作品、回饋單、學生訪談紀錄、教師社群 會議扎記（附錄二~七）相輔。茲分別說明如下：
(一) 小論文評分參考指標
因小論文的評鑑或評分的進行，常常決定於判斷者主觀的評斷，所以本研究乃選擇以參 照評分指標(Rubrics)來作為評分的工具。評分指標的主要特徵：（1）聚焦測量一個明確的表 現與行為；（2）利用一個分數間距或級數來衡量表現；（3）指出特定的評分表現，據以給予 等級排列與評分(Miller, 1995)。由此可知，評分指標使得評量有著較一致性的標準，讓老師、
學生都較能掌握複雜與主觀的評核判斷。
經徵詢本校有指導小論文經驗之教師及文獻探討，選擇前國立台北師範學院社會科教育 學系所發展的「小論文評分參考指標」，其原為該系公告用來評量學生申請入學小論文的標 準，目前於網路上廣為各高中學校指導小論文參考引用，由本校教師社群進行修訂以符合本 校課程使用，其內容包含衡量小論文表現的規準、描述、以及等級等，有助於使教師評量更 標準化、更精確，因此次研究學生數達 90 人，也透過此參考指標讓教師評閱小論文更省時簡 單、也更透明而公平。
「小論文評分參考指標」評量的特質向度如下：
1. 內容：是否能界定切合的主題，並能完整、具體的表達與主題相關的專業知識。
2. 組織：行文的邏輯架構、起承轉合、段落發展是否良好。
3. 創意：是否透過批判辯證或總和歸納，發展新概念、轉換觀念。
4. 文字表達：遣詞用字是否精確、流暢，合乎習慣用法。
5. 版面及格式：包含引用及引註資料格式、標題層次、文書版面安排是否合乎規定，此
‧ 國
立 政 治 大 學
‧
N a tio na
l C h engchi U ni ve rs it y
36
項目關乎學生對著作權的尊重以及電腦文書處理的能力展現。
同時，此次研究也將事先公布評量指標給學生參考，讓學生得以掌握評量的重點，預訂 表現目標，進行自我評量、反省，使其學習更聚焦。教師評量的結果，研究分析後，也可提 供未來教學規劃重點。
(二) 課程回饋單
本回饋單在整個教學結束後讓學生填答。其目的在於了解學生對此主題式大六課程之看 法，及本教學方式對學生的實際幫助或困難處，並於訪談前實施作為訪談方向引導。
(三) 質性資料分析
除了測驗量表，本研究再輔以「教學觀察記錄」、「學生訪談紀錄」、「教師社群會議紀錄」、
「小論文作品」四項質性資料，分別加以討論分析。
‧ 國
立 政 治 大 學
‧
N a tio na
l C h engchi U ni ve rs it y
37