• 沒有找到結果。

第三章 研究方法

第四節 研究工具

根據研究目的的需要,研究工具如下:

壹、兒童語料庫文本

本研究指標建置之兒童語料庫文本文本來源為廖晨惠(2011)之國科會「閱 讀研究議題八:以LSA 為基礎之電腦化閱讀認知測驗及AutoTutor 建置」計畫(編 號:NSC100-2420-H-142-001-MY3)所建置,共收錄經授權之國小坊間N、H、K 三版本之國小教科書中國語、社會、自然生活與科技、藝術與人文及健康與體育 等五大領域之教科書及國語日報等共874 篇文本,共計兩萬多個詞彙。

貳、斷詞系統

本研 究使 用中 央 研 究院 數位 典藏 國 家 型科 技計 畫建 置 之 中文 斷詞 系統

(http://ckipsvr.iis.sinica.edu.tw/),完成「兒童語料庫文本文本」第一次斷詞。此 系統提供了自動抽取新詞建立領域用詞或線上即時分詞功能。是一個有新詞辨識 能力並附加詞類標記的選擇性功能之中文斷詞系統。此一系統包含約拾萬詞的詞 彙庫及附加詞類、詞頻、詞類頻率、雙連詞類頻率等資料。分詞依據為此一詞彙 庫及定量詞、重疊詞等構詞規律及線上辨識的新詞,並解決分詞歧義問題。

使用中研院系統進行第一次斷詞後,發現部分詞類標記與現代漢語不甚相

36

37

参、電腦軟體

一、MATLAB 軟體:依據Coh-Metrix詞彙多樣性指標公式並利用MATLAB 軟體 撰寫程式予以計分。

二、SPSS 軟體:使用皮爾森積差相關、單因子變異分析、迴歸分析等方式分析 指標與文本測驗之關係。

肆、中高年級文本理解測驗

一、 測驗編製依據

本測驗題本,採用國立臺中教育大學測驗統計與適性學習研究中心所編製之 詳細內容參閱「中高年級文本理解測驗技術報告」(郭伯臣等,2013)及碩士論 文「兒童文本詞類指標分析系統建置與應用」(陳建宏,2013)之八篇文本,另 外加上後續發展所建置的二十四篇文本,共計三十二篇文本。根據指標結果,按 年級(四、六年級)、文體(記敘文、非記敘文)篩選測驗文本,依據PIRLS四項 閱讀理解層次編製中高年級文本理解測驗題本。在PIRLS的研究中將閱讀歷程分 為「直接理解歷程」和「解釋理解歷程」兩部份;其中「直接理解歷程」分為「直 接提取」以及「直接推論」;至於「解釋理解歷程」則分別為「詮釋、整合觀點 和訊息」以及「檢驗、評估內容、語言和文章的元素」(柯華葳、詹益綾、張建 妤、 游婷雅,2008)。

表 3-2

國際閱讀素養研究(PIRLS)閱讀理解層次

閱讀理解層次 子層次

直接提取

(1)找出與閱讀目標有關訊息

(2)找出特定觀點

(3)搜尋字詞或句子的定義

(4)指出故事的場景

(5)當文本明顯陳述出來時,找出主題句或主旨

(續下頁)

38

39

三、信度與效度分析:

本測驗題本經臺中教育大學三位教授,以及八位平均教學年資達十年以上的 小學現職教師,根據閱讀理解概念層次共同編審,具有良好的信度與效度。本測 驗的Cronbach α 值達.85,表示信度高,具有穩定性及一致性。

四、 試題分析:

1、古典測驗理論

又稱「古典信度理論」,用來估計測驗實得分數的信度,也就是估計實得分 數和真實分數間的關聯程度。古典測驗理論中的難度指數值(P),表示受試者答 對此題的機率,其值介於0 至1 之間,當值愈大表示試題愈容易,通過的人數越 多,難度指數以接近0.5 為最佳;鑑別度指數值(D),目的在於區辨受試者能力 的高低。也就是當指數愈高,表示區辨力愈強。D 值介於- 1.00~ + 1.00 之間,D 值愈大,表示鑑別度愈大。鑑別度0.4 以上表示試題非常優良,一般可接受的最 低標準為0.25。

2、試題反應理論(Item Response Theory; IRT)

在試題反應理論中,鑑別參數(a),理論上a 值的範圍介於- ∞ 至+ ∞ 之間,

但在實際應用上,常用的範圍介於0 至2 之間;難度參數(b),理論上b 值的 範圍介於- ∞ 至+ ∞ 之間,但在實際應用上,常用的範圍介於-3 至3 之間;猜測 參數又稱為(c),理論上c 值的範圍介於0 至1 之間,當c 值愈小,試題愈能有 效測出受試者的真實能力,即為受試者在能力極低時,仍能答對試題的機率。此 測驗的平均難度值為0.65 ,平均鑑別度為0.38 ,顯示此測驗題本的難度篇難,

鑑別度偏低。

古典測驗理論係以整份測驗分數(test scores)為主要思考依據的一種測驗 理論,而試題反應理論則是以單一試題分數(item score)為主要思考依據的一種 測驗理論。

試題反應理論將試題視為測量受試能力的基本單位,而試題的特質就是用試

40

題參數來描述。主要依據受試者的測驗表現結果來推估受試者的能力(abilities)

或潛在特質(latent traits),以機率的概念來解釋受試者能力和測驗反應間之關係。

相關文件