• 沒有找到結果。

第三章 研究方法

第五節 研究工具

壹、兒童語料庫

本研究指標建置資料來源為廖晨惠(2010)之國科會「閱讀研究議題八:以 LSA 為基礎之電腦化閱讀認知測驗及 AutoTutor 建置」計畫(編號:NSC

100-2420-H-142-001-MY3)所建置的國小語料庫,共收錄經授權的 945 篇國小各版 本跨領域之課文及國語日報等文本。本研究主要分析國小一至六年級課文中國 語、自然與社會等科目,計 787 篇文章。

貳、斷詞系統

本研究使用中央研究院數位典藏國家型科技計畫建置之中文斷詞系統,完成 兒童語料庫文本第一階段斷詞。中文斷詞系統包含約十萬詞的詞彙庫,另附加詞 類、詞頻、詞類頻率等資料。分詞依據為此一詞彙庫及定量詞、重疊詞等構詞規 律 及 線上 辨識 的新 詞, 並解 決分 詞歧 義問 題。 ( 中研 院中 文斷 詞系 統,

http://ckipsvr.iis.sinica.edu.tw/ )

使用中研院系統初步斷詞後,使用該系統提供的精簡詞類,精簡兒童語料庫 詞類標記,以利後續運算。檢視初步斷詞後的文本內容,發現部分詞類標記與現 代漢語不甚相符,故修改其中部分斷詞規則,完成本次兒童語料庫文本斷詞。表 3-1 為節錄本研究部份修改中研院精簡詞性後斷詞標記規則列表。

表 3-1 修改斷詞標記規則

二、SPSS for windows

使用皮爾遜積差相關、迴歸分析及單因子變異數分析等方法,分析研究建置 指標、文本理解測驗及學生能力間的相關。

肆、中高年級文本理解測驗

本研究除分析兒童語料庫文章,另收集國立編譯館民國七十八年,國小四、

六年級國語教科書文章。使用研究建置指標分析文章,根據指標計算結果,按年 級、文章長短及文體(記敘文、非記敘文)篩選測驗文章,並仿 PIRLS 四項閱讀理 解層次編製試題,閱讀理解層次包含:直接提取、直接推論、詮釋整合及檢驗評 估。

閱讀理解層次可依內涵性質加以分類,直接提取、直接推論屬於直接理解歷 程,詮釋整合、檢驗評估屬於詮釋理解歷程。直接提取子層次包含:(1)找出與閱 讀目標有關訊息 (2)找出特定觀點 (3)搜尋字詞或句子的定義 (4)指出故事的場 景 (5)當文章明顯陳述出來時,找出主題句或主旨。直接推論子層次包含:(1)推 論出某事件所導致的另一事件 (2)在一串的論點後,歸納出重點 (3)找出代名詞和 主詞的關係(4)歸納文章的主旨 (5)描述人物間的關係。詮釋整合子層次包含:(1) 清楚分辨出文章整體訊息或主旨 (2)考慮文中人物可選擇的其他行動 (3)比較及 對照文章訊息(4)推測故事中的情緒或氣氛(5)詮釋文中訊息在真實世界的適用 性。檢驗評估子層次包含:(1)評估文章所描述事件實際發生的可能性 (2)揣測作 者如何想出讓人出乎意料的結局 (3)評斷文章中訊息的完整性 (4)找出作者的 觀點(引自柯華葳、詹益綾、張建妤、游婷雅,2008)。

初編製中高年級文本理解測驗含中、高年級文章各四篇,記敘文、非記敘文 文章各四篇及長、短文(500 字為界線)各四篇。測驗預試對象為臺中市某國小四、

六年級學生約 60 人,原始測驗題本為 53 題單選題。經預試後,刪除通過率過高 (超過 9 成學生答對)/過低(不滿 2 成學生答對)題目或在不同年級上通過率無明 顯差異的題目,完成中高年級文本理解測驗文本,計 8 篇文章,44 題單選題。題 本內含 PIRLS 閱讀理解層次題數分布:直接提取層次 13 題,直接推論層次 12 題,

詮釋整合層次 13 題及檢驗評估層次 6 題。預試時發現:「詮釋理解層次」題目較 多的文章,通過率低於「直接理解層次」題目較多的文章。

本測驗題本經臺中教育大學三位教授,以及七位平均教學年資達十年以上的 小學現職教師共同編審而成,具有良好的專家效度。使用 SPSS 作為信度分析工

具,以 Cronbach α係數檢視題本信度。據 De Vellis (1991)提出若α值大於 0.7,

表示擁有可接受的最小信度;Bryman & Cramer (1997)表示若α值大於 0.8,則是 擁有高信度。本研究中高年級文本理解測驗的信度為 0.85,表示此測驗題本為高 信度的測驗工具。且當任一試題被刪除後,發現結果對題本信度的影響不大,表 示本題本具有不錯的內部一致性。

本研究使用古典測驗理論(Classical Test Theory, CTT)及試題反應理論(Item Response Theory, IRT)兩種方式分析中高年級文本理解測驗的難度及鑑別度,因兩 理論都是現今測驗文本常使用的分析方法,CTT 題目參數雖易受樣本影響,且受 測者接受不同題目的結果較難互相比較,但 CTT 理論淺顯,實際運用便利;IRT 的參數不受樣本影響,且能估算出受試者的能力值,辨別同分者的能力高低,但 理論較艱深,施行上需有較大的樣本數。以下使用兩種理論分析測驗資料,觀察 數值的趨勢現象。

1.古典測驗理論(CTT):

古典測驗理論又稱『古典信度理論』,用來估計測驗實得分數的信度,也就是估 計實得分數和真實分數間的關聯程度,「實得分數」為「真實分數」加上「誤差 分數」,真實分數為表示研究者觀察不到,但想測量的潛在特質;誤差分數則是 研究者想去避免或降低的部分(引自余民寧,1997)。中高年級文本理解測驗在古 典測驗理論分析的平均難度為 0.6,本研究古典測驗理論的難度亦指通過率,為 所有受試者答對的百分比率,難度(通過率)愈高,表示通過人數愈多,題目愈容 易,難度愈接近 0.5,表示題本的難易適中。中高年級文本理解測驗平均鑑別度 為 0.43,鑑別度計算方法是比較高低分組受試者在個別試題上通過人數的百分 比,鑑別度愈大,愈能鑑別出高低分組的受試者。鑑別度達 0.4 以上,即試題非 常優秀。顯示本試題頗具鑑別度。

2.試題反應理論(IRT):

試題反應理論使用不受樣本影響的參數指標(難度、鑑別度、猜測度),能提供每 位受試者個別差異的測量誤差指標,精準推估每位受試者能力,所以對於相同原 始得分的受試者,可給予不同的能力估計值(引自余民寧,1997)。使用 BILOG-MG

軟體計算中高年級文本理解測驗之三參數,由三參數可得知參加測驗學生的個別

壹、皮爾遜積差相關(Pearson product-moment correlation)

本研究運用皮爾遜積差相關探討以下幾個項目:

一、檢視研究建置指標與文本適讀年級相關程度。

相關文件