第三章 研究方法與工具
第三節 教學評量方式
一、實作評量
參照與Piedra,Yiu ChiLai、Eugenia 針對評測維基百科編輯頁面的評分尺規,
為符合連結主義式教學目標,增訂修改後自行編製新的評分尺規,其中評分項目 分為五點,內容、參考來源、組織、屬性、文字準確性(Piedra, Chicaiza, Lopez, Romero, & Tovar, 2010)。
表3-3-1 維基百科評分尺規
39
二、核心素養量表
進行連結主義式的教學設計後,為了評估學生是否有因該課程而在核心素養 能力上有所進步,因此參照相關量表、與核心素養內容後,研究者自製核心素養 量表對學生進行施測,本節分為三部分「量表依據」、「內容效度」、「信度分析」。
(一)、量表依據
本研究依前人所製作的大學生通識核心素養量表(李坤崇, 2013),參照十二 年國民基本教育課程綱要總綱發布版內的素養內容設計出核心素養量表後,自行 編製「核心素養態度量表」作為研究工具,此量表依照教學設計所需要的核心素 養向度為「溝通互動」、「媒體素養」、「主動學習」、「合作學習」、「資訊素養」。 各分量的定義如下:
「溝通互動」定義為:乃是有效利用各種符號(例如語言、文字、聲音、動 作、圖像或藝術等)和工具,表達個人的思想或觀念,善於傾聽及與他人溝通,
並能與他人分享不同的見解或資訊。「媒體識讀」定義為:瞭解傳播媒體的性質 及常用的傳播技術、技巧的基礎上,批判性地解讀媒體信息,並有效利用傳播媒 體的能力。媒介識讀的對象既包括電視、廣播、報紙等大眾媒體。「主動學習」
定義為:「激發好奇心及觀察力,主動探索和發現問題,並積極運用所學的知能 於生活中。」「合作學習」定義為:1.與另一個人或其他人一起行動或工作、協同 行動;2.為彼此的利益而聯合另一人或他人。然合作卻並不一定僅限於這種外在 誘因的協同行動。「資訊素養」定義為:不僅僅是懂得如何蒐集及應用資訊,更 應是對資訊科技的範疇、內涵和發展具有相當的認識,並能有效地使用電腦的軟 硬體設施來進行資訊的搜尋、處理、建檔及傳遞等作業,進而將其應用於生活、
工作、學習上的基本素養能力。依照以上定義進行預試問卷的編制。
40
(二)、內容效度
預試量表設計好後,為了確立量表構面的正確性、一致性、穩定性和可靠性,
還有問卷是否周延,量表問項的內容是否能適度反應出研究主題的研究架構與內 容。邀請地理、歷史、公民領域之專家學者,進行專家效度檢驗,予以修改和建 議,並建立本量表之專家效度,各領域專家學者如表3-3-1。
表3-3-2 問卷內容效度專家 職稱
1 老師 新北市高中現職地理老師、臺灣大學地理所碩士 2 老師 新北市高中現職地理老師、國立台灣師範大學碩士 3 老師 新北市高中現職地理老師、國立台灣師範大學碩士 4 老師 新北市高中現職公民老師
5 老師 新北市高中現職歷史老師、國立台灣師範大學碩士
將個別專家審題後的量表進行統整,增提、刪題、和修正後,將原本的40 題 當中不切合主題、用詞不夠精確的部分修改後,總題數變更為 30 題,包含溝通 素養5 題、媒體素養 7 題、主動學習 6 題、合作學習 5 題、資訊素養 7 題,在過 程中需要注意動詞的表達,使得學生能夠清楚理解題目內容,也要避免同一道題 目中具有多個概念在裏頭,導致學生誤解題意。
(三)、信度分析
為了確認該素養問卷是否能夠作為研究工具,其內容、用詞是否能讓研究對 象容易理解,閱讀,於實驗前一週於高中二年級的兩個班進行預試,共85 個人,
各題皆無漏答,其中 10、11、15、22 為反向題。最後為了確保問卷具備信度,
採用使用Cronbach's α 係數來做為問卷的前測信度,Cronbach's α 值愈大,表示 信度愈高,量表愈是穩定,一般來說Cronbach's α 值至少要大於 0.7,實務上最佳
41
採取為大於0.8 以上,因此將將五個向度量表進行分析後得到的 Cronbach's α 值 如表3-3-2。
表3-3-3 各向度 Cronbach Alpha 值 向度 Cronbach Alpha 值 項目數
溝通互動 .656 8
媒體素養 .820 7
主動學習 .806 6
合作學習 .840 5
資訊素養 .881 7
在量表初測的信度中除了溝通表達以外的都有達到標準,因此將題目進行修 正後,將溝通互動素養的6、7、8 題刪除,因為題目會誤導學生理解題意,像是
「當別人提出與我相異的論點時,我會嘗試說明並懂得避開爭執點」這題學生會 認為在逃避問題,但原意是希望學生能夠心平氣和地與人溝通討論後解決問題,
而這題也與第 3、4 題的題意有重複因此去除該題,而在請專家審核後,進行溝 通互動的信度重測,第二次的 Cronbach's α 值達到 0.874,確認該量表為正式量 表。
表3-3-4 溝通互動重測信度
向度 Cronbach Alpha 值 項目數
溝通互動 .874 5
42