第三章 研究設計與實施
第三節 研究工具
本節依據研究目的包含二部分,一為分析字彙涵蓋量的 RANGE 程式,二 為分析適讀性分布情形的 SMOG 公式,三為讀本內容的質性分析。
一、RANGE Program
雖然各出版社的英文讀本都有標示重要單字(head word),但是每家出版社 的依據標準不同。為了統一瞭解英文讀本初級及中級的字彙涵蓋量,研究者使用 RANGE 程式做為研究工具。RANGE 程式是由 Nation 與 Heatley (2002)所研 發用來估算文本字彙量的電腦軟體程式,最多可以同時比較 32 篇文本的單字 量。運用這個程式,可以算出文本中的字彙量總數、字彙種類及字族。使用 RANGE 分析一篇文本可以找出文本中所使用的單字有哪些以及這些字彙在字彙表中所 佔的比例有多少。它也可以用來比較兩篇文本的字彙,算出有多少同樣的字彙在 兩篇文本中出現,以及兩篇文本使用字彙的差異。RANGE 使用字族的單位定義 一個字彙,例如目標字「able」與「abler」、「ablest」與「ably」都視為同一個 字族。此工具包含三種單字表:GSL 的前一千個高頻率字族(Wordlist one)、
GSL 的後一千個高頻率字族(Wordlist two)及 AWL(Wordlist three)。以下就
69
Nation 和 Wang(1999)及 Wan-a-rom(2008)使用 RANGE 程式檢測讀本字彙 涵蓋量的結果來說明信度:
表 3-3-1 為 Nation 和 Wang(1999)使用牛津 Bookworms 系列讀本所計算的 總字數,因此可知,RANGE 程式可以計算出每本讀本的總字數,進而瞭解各級 別總字數的範圍。
表 3-3-1
牛津 Bookworms 系列總字數
級別 本數 總字數 總字數範圍
1 7 38,186 4,743-5,890 2 7 45,579 5,511-7,960 3 7 75,571 8,819-12,194 4 7 111,214 14,342-20,142 5 7 158,370 20,379-25,272 6 7 198,509 24,840-31,501 總計 42 627,429 4,743-31,501 註:引自“Graded readers and vocabulary.” Nation, P. & Wang, K. M.T. (1999).
Reading in a Foreign Language, 12 (2), p.359.
除了瞭解文本的總字數,RANGE 程式也可計算出每個系列的字族數量,並 且算出每個級別中累積的字族數量,如表 3-3-2 可知,級別 2 含有 341 個字族,
加上級別 1 的 530 個字族,代表級別 1 及級別 2 中所使用的字族總數。
表 3-3-2
牛津 Bookworms 系列字族數量
級別 每個級別中所包含的 字族數量
每個級別中累積的 字族數量
1 530 530
2 341 871
3 320 1,191
70
4 296 1,487
5 459 1,946
6 464 2,410
註:引自“Graded readers and vocabulary.” Nation, P. & Wang, K. M.T. (1999).
Reading in a Foreign Language, 12 (2), p.358.
此程式內建有三個字彙表:West 的 GSL I(GSL 的前一千個高頻率字族)、 註:引自“Comparing the vocabulary of different graded-reading schemes.”
Wan-a-rom, U. (2008). Reading in a Foreign Language, 20(1), 52.
本研究所使用的 RANGE 程式可直接由網站下載,其網址為
http://www.victoria.ac.nz/lals/about/staff/paul-nation。研究者以 The Wizard of Oz
(牛津書蟲系列)為範例(如圖 3-3-1),將讀本內容先輸入至記事本,接著執行 此程式,並將讀本內容匯入(如圖 3-3-2),即可得到該讀本之字彙涵蓋量資料(如 表 3-3-1)。
71
圖 3-3-1 The wizard of Oz (牛津書蟲系列)讀本內容
圖 3-3-2 以 RANGE 程式計算字彙涵蓋量之範例
72
從表 3-3-4 可知,此讀本共有 5678 個字,但實際上以 Microsoft Word 來算是 5544 個字,因為 RANGE 無法計算複合字,而且縮寫會被視為空格鍵,因此 two-year-old 會被視為三個單字,而 I’ve 會被當成 I 及 have 兩個單字。此讀本的 字彙在第一種字表中字彙總量為 4767 字 ,佔了全書的 83.96%,字的種類為 407 字,字族為 276 個;在第二種字表中字彙總量為 381 字,佔了全書的 6.71,字的 種類為 77 字,字族為 58 個;第三種字表,即 AWL 的字彙,在本書中完全未使 用到;而不包含在此三種字表的字彙總量為 530 字,佔了全書的 9.33%,字的種 類為 39 字,佔了 7.46%。
表 3-3-4
RANGE 程式分析讀本字彙涵蓋量結果
Wordlist Tokens / % Types / % Families Wordlist one 4767/83.96 407/77.82 276 Wordlist two 381/ 6.71 77/14.72 58 Wordlist three 0/ 0.00 0/ 0.00 0 not in the lists 530/ 9.33 39/ 7.46 *
Total 5678 523 334
*:RANGE 程式無法計算不包含在此三種字表的字族數量
二、SMOG 適讀性公式
本研究所使用的適讀性公式是由 McLaughlin(1969)所發展出來的「SMOG 公式」 ,可用來測量文章的難度,他也在於電腦問世之後(McLaughlin, 2008),
於其個人網站更新公式(此公式為句數超過 30 句專用)為:
3.1291+1.0430 多音節字數 ╳(30/句數)
此公式可用來測量文章的難易度,以下就此適讀性公式的發展步驟來說明本 研究之研究信度。
SMOG 公式採用文章中之多音節字數為重要變項,計算語義(semantic)難
73
度所發展出的適讀性公式。為使多音節總字數計算文章難度之結果更有意義,
McLaughlin 選取 1961 年所編輯的 McCall-Crabbs 閱讀理解標準測驗中 390 個段 落文章,每個段落文章皆附有閱讀理解測驗,McLaughlin 以讀者必須完全理解 文章的內容,作為閱讀難度的指標,此程式的預測標準差為 1.5 年級,換言之,
SMOG 公式測量文章的適讀性,其預測文章的閱讀等級誤差值為 1.5 年級
(McLaughlin, 1969)。
SMOG 公式以文章中的多音節總字數反應文本的難度指數,且適讀性分數 可轉換為所適合的閱讀年級。McLaughlin 針對 64 位大學生做測試,從美國流行 雜誌與圖書,選用 8 段 1000 字的文章,為了排除文章本身難度的次序影響,文 章以隨機排序的方式讓學生閱讀。且在測試之前,邀請讀寫專家針對每一段的文 章內容並確認文章的主旨,在學生讀完文章之後,每位學生被要求用口語回想文 章的完整內容,學生的口述內容會打成逐字稿,最後將逐字稿與每個段落文章的 主旨相互比較,所以每一段文章的難度從 0 到 10 排出其難度順序。表 3-6-4 為 64 位大學生閱讀效能(reading efficiency)與 8 段文章段落中多音節總字數之對 照,結果呈現出多音節總字數與閱讀效率呈現負相關,亦是文章的多音節總字數 越多,閱讀效率越低。
表 3-3-5
大學生閱讀效能與文章段落的多音節總字數之對照
文章標題 閱讀效能 多音節總字數 SMOG 分數
Music Education: Aesthetic or Anesthetic?” Music Educator Journal
1.03 244 18
What Organ Transplants Mean to
Your Life 1.10 169 16
Impact: A Program and a Process
for Potential Dropouts 1.12 150 15 Regeneration of Organs 1.18 147 15 Superego Manifestations in the 1.20 145 15
74
表 3-3-5
大學生閱讀效能與文章段落的多音節總字數之對照
文章標題 閱讀效能 多音節總字數 SMOG 分數
Treatment of a Four-year-old boy
How to Choose a Music Teacher 1.33 112 13 Can You Be Sure Your Child
Wont’ Be a School Dropout 1.37 72 11 Say No to Your Children 1.51 39 9 資料來源:“SMOG grading: A new readability formula” by G. H. McLaughlin, 1969, Journal of Reading, 12(8), 644.
註:文章依序選自1968年各類期刊雜誌
從上述的效度測試及探究,McLaughlin 建置出 SMOG 公式測試文章的適讀 性,其適讀性分數所轉換為的適讀性年級呈現如表 3-3-6,若使用 SMOG 公式預 測文本的閱讀等級,參照 SMOG 公式測量文章的適讀性,其預測文章的閱讀等 級誤差值為 1.5 年級,所以本研究中基礎級讀本之適讀性分數應高於初級讀本之 適讀性分數,而平均文章適讀性分數差距為 1 至 1.5 年級。
表 3-3-6
SMOG 適讀性分數與相對應之教育程度
SMOG 適讀性分數 相符合之文本
0~6 電視肥皂劇
7 愛情小說(True Confessions)
8 女性雜誌(Ladies Home Journal)
9 讀者文摘(Reader’s Diagest)
10 新聞週報(Newsweeek)
11 美國運動畫報(Sports Illustrated)
12 時代雜誌(Time Magazine)
13~15 紐約時報(New York Times)
16 大西洋月刊(Atlantic Monthly)
17-18 哈佛經濟評論(Harvard Business Review)
資料來源:Words count: SMOG (2014/ October) Retrieved from http://www.wordscount.info/wc/jsp/clear/analyze_smog.jsp
75
為了瞭解 SMOG 公式的效度,研究者以 103 年國中教育會考的英語科中非 圖表、對話式的其中三篇閱讀測驗為研究樣本,使用 Gunning Fog、Flesch–Kincaid Grade 及 Flesch Reading Ease 公式當做研究工具計算文章的適讀性,所得結果如 表 3-3-7:
表 3-3-7
103 年國中教育會考英語科閱讀測驗適讀性指數 題組
適讀性公式
45-47 48-50 54-56
分數 級別 分數 級別 分數 級別
SMOG 6.14 6 6.74 6 6.66 6
Gunning Fog 5.36 5 6.02 6 5.22 5 Flesch–Kincaid Grade 4.31 6 4.74 6 4.13 6 Flesch Reading Ease 83.47 6 81.77 6 80.77 6
由第二章文獻探討可知,使用 SMOG 與 Gunning Fog 公式所計算出來的適 讀性指數為文章的級別程度(宋佩貞、鄭承昌,2009;SMOG Readability Calculation, 2008)。使用 Flesch–Kincaid Grade 公式傾向低估文本的難度約二個年 級程度(Readability Formulas, 2014),因此,將所計算出的指數加上 2,即為文 本的級別程度。而 Flesch Reading Ease 所計算的指數皆介於 80~90 分,所評估的 則級別程度為 6(宋佩貞、鄭承昌,2009)。由表 3-3-7 可知,使用 SMOG、
Flesch–Kincaid Grade 及 Flesch Reading Ease 公式所計算出來的級別程度一致。甚 至在 48-50 此題組,使用四個公式所計算出來的級別程度都一樣。由於 SMOG、
Flesch–Kincaid Grade 及 Flesch Reading Ease 公式有使用到多音節數做為測量的 要素,因此此三種公式所測出的適讀性分數較為一致。由此可知,使用 SMOG 公式計算文本適讀性,可得到與其他適讀公式所測量的結果相似,可推知 SMOG 公式對於計算文本適讀性有其信度。
本研究為適合國中生程度之英文的分級讀本之適讀性分布及其銜接情形,利
76
用電腦軟體可以計算出文章的適讀性,所得的數據即是適讀性指數,即文章的難 易度指數。本研究採用 SMOG 公式,此公式的取得來自網站,其網址為
http://www.wordscount.info/wc/jsp/clear/analyze_smog.jsp。研究者將讀本的內容輸 入上述網址,適讀性計算程式會自動算出讀本的「SMOG 指數」(如圖 3-3-3),
也會同時呈現讀本的其他要素(例如句數及多音節字數),便於分析讀本的難度。
圖 3-3-3 SMOG 適讀性公式計算讀本適讀性之範例
將讀本內容輸入,網站中即呈現相關的語文因素(總句數與多音節字數), 如圖 3-3-3 所示,總句數 570 句,多音節字數 210 字,由此兩項語文因素而計算 出 SMOG 分數為 6.6。
三、質性分析
研究者參考第二章文獻中英語教材的選用標準,歸類出本研究所要探討的主 題涵蓋類型與出版特性的類目表,如附錄九所示。研究者以 Bookworms、Penguin Young Readers、Magic Tree House 及好讀系列中各一本,共四本的讀本為例進行 試評,並請另外兩名專家教師一起檢測,以達到評分者的一致性。研究者將類目 表中等級分為優、可、差,等級優 3 分、等級可 2 分、等級差 1 分,計算出三位
77
評分者的分數之後,利用 SPSS 中的)肯德爾和諧係數,計算出評分者一致性,如 表 3-3-8。從表 3-3-8 可知,肯德爾和諧係數為.817,p 值<.05,代表三位評分者 由肯德爾和諧係數檢定達顯著水準,且評分者們一致性程度高。
表 3-3-8
主題涵蓋類型與出版特性之評分者一致性檢定統計量
個數 Kendall's W 檢定a 卡方 自由度 漸近顯著性
4 .817 6.533 2 .038