• 沒有找到結果。

第三章 研究設計與實施

第四節 研究工具

壹、分析單位說明

分析單位是內容分析時所採行的最小單位,在內容量化時依循的 標準,應配合研究目的而設定 , 可使研 究能具體執行並提供規準有 所遵循。使用分析單位的需要與 內容 , 則視分析對象的性質而定 , 最常使用的單位有字、主題、人 物、項 目、時間或空間單位等,教 材內容分析通常採用章、節、單 元、課 、段、詞、句、字、頁為分 析單位(歐用生,2003)。本研究係針對閱讀測驗之內容與題型進行 分析,因此分析單位以「篇」和「題」為主。

貳、分析類目說明

類目為內容歸類的標準 ,Berelson(1962)將類目分為兩大類;

一為「說什麼」:用來測量內容實質,包含主題、特徵、人物…等;

另一為「如何說」類目,用來測量內容呈現形式。本研究採取「說什 麼」類目的主題類目方式。而類目的來源又分為兩種,一種是依據理 論或 過去 研究 結果 發 展而 成, 一種 是 由 研究 者自 行發 展而 成 (王石 番,1996)。

本研究類目參考PIRLS對閱讀能力的分類,在檢視常用閱讀測驗的 內容之後,根據PIRLS的四種閱讀能力類目,包括「直接提取」、「直 接推論」、「詮釋、整合觀點和訊息」、「檢驗、評估內容、語言和文章 的元素」等四個主要類目,達成概念性區別,於其下再發展成幾個次 要的閱讀微技巧類目。為了分析與歸類依據方便,茲將主類目及次類 目呈現在表 3-4-1:

84

85

以下以前述所提之故事體文章「一個不可思議的夜晚」,將問題對 應各個不同次類目,類目分析方式舉例如下:

【1-1】找出與閱讀目標有關的訊息 Q:房間的門怎麼弄破的?

鱷魚的尾巴穿了過去 大花瓶摔了上去 紅鶴的尖嘴撞了上去 床撞了上去

【1-2】找出特定觀點

Q:故事的最後,小安對紅鶴有什麼感覺?

內咎 小心 感激 煩惱

【2-1】推論全文中個別訊息之間的關係

Q:按照事情在故事中發生的順序,排列下面的句子,第一項 已經幫你填好。

小安看見鱷魚。

鱷魚吃了兩隻紅 鶴。

小安試著向爸爸、媽媽 解釋為 什麼 門破了一 個洞。

小安走去浴室。

小安跑進房間, 把門關 緊。

【2-2】在一串的論點後,歸納出重點 Q:哪些語詞告訴你小安很害怕?

86

僵立在原地 不敢相信自己的眼睛 鬆了一口氣

聽到有點微弱的嘶嘶聲

【3-1】清楚分辨出文章整體訊息、事實、意見或主題 Q:雜誌怎樣幫了小安的忙?寫出兩個方法。

【3-2】詮釋文中人物可能的特質、行為或做法

Q:你從小安所做的事情中知道她是個怎麼樣的人?描述一下 她是個怎麼樣的人,並舉出她所做的兩件事情證明。

【4-1】評估文章所描述事件,實際發生的可能性

Q:作者沒有告訴我們小安的遭遇是不是一場夢。

找出一個證據來證 明這可 能 是 一場夢。

找出一個證據來證明這可能不是一場夢。

以下以前述所提及之說明體文章「南極洲簡介」,將問題對應各個 不同次類目,類目分析方式舉例如下:

87

【1-1】找出與閱讀目標有關的訊息

Q:南極洲是地球上 最寒冷 的地 方。它保 持哪些 紀錄?

最乾燥、最多雲 最潮濕、最強風 最強風、最乾燥 最多雲、最高

【1-4】指出故事的場景

Q:在地球儀上, 哪裡可 以找 到南極洲 ?

【2-2】在一串的論點後,歸納出重點 Q:從莎拉的信中你 能知道 哪兩 件關於南 極洲食 物的事 。

【2-4】歸納全文的主題

Q:為什麼文 章裡說「 把一杯 煮沸 的水,潑 向空中,在它落 到冰 地之前,就已經 結冰了 」?

告訴你南極洲的水 有多熱 說明他們在南極洲 喝什麼 告訴你科學家在南 極洲的 工作 說明南極洲有多寒 冷

【3-5】詮釋文中訊息在真實世界的適用性

Q:想想文章中關於 南極洲 的資 料。寫出 兩個原 因,說 明為什

88

麼大多數的人不 會 選擇四月 到九月去 南極洲?

【4-3】評斷文章中訊息的完整性或闡明澄清文中的訊息

Q:你想去南極洲 旅遊嗎?請你 利用「南 極洲簡 介」和「來 自南 極洲的信」的 內容, 說明你 想去或不 想去的 理由。

【4-4】找出作者論述的立場

Q:這篇文章利用了兩種不同方式介紹南極洲:

*南 極洲簡 介

*一封來自南極洲的信

你認為哪一種資料比較有趣,為什麼?

綜合以上分析原 則,閱讀 測驗中 的 各個題目,若為找 出文中 明確寫 出 的訊息,則歸類在「直接提取」主類目之下;若需連結段落內或段落間的 訊息,才能推斷出答案,則歸類在「直接推論」主類目之下:若讀者需要 利用自己的知識去理解與建構文章中的細節及更完整的意義,則歸類在

「詮釋、整合觀點和訊息」主類目之下;若讀者需批判性考量文章中的訊 息,則歸類在「檢驗、評估內容、語言和文章的元素」主類目之下,並依 其中閱讀微技巧的不同,再根據次類目詳細分析並紀錄編碼。

89

參、分析工具說明

ㄧ、「文體」的分析:

(ㄧ)、類目的訂定

文體的分析類目參考PIRLS評量所使用的文體,分為以下二類:

表3-4-2 文體分析類目

類目名稱 定義

1.故事體 文章以記敍、描寫為主要表達方式,包括:背景、主題、

情節、結局,形式有短篇故事、記敘文、民間故事、寓 言、神話、劇本…等。

2.說明文 以說明為主要表達方式,用來介紹或解釋事物的 狀態 、 性質、構造、功能、製作方法、發展過程和事理的成因、

關係的一種文體。

(二)、分析單位

以「篇」為分析單位,也就是以每一冊閱讀測驗中的每篇文章做 為主要分析單位。本研究在分析閱讀測驗時,範圍主要以測驗本文為 限,其他部份如圖片、延伸思考、詞語快易通、主旨停看聽等,不列 入分析範圍內。

二、「題型」的分析:

(ㄧ)、類目的訂定:根據PIRLS閱讀理解評量指標而來,詳如表 3-4-1

(二)、分析單位:以「題」為分析單位,指的是能表達完整意義 的題目。

90

肆、研究工具的信度與效度 一、信度

信 度 即 可 靠 性 (trustworthiness) , 係 指 測 驗 結 果 的 一 致 性 (consistency)或穩定性(stability)而言。內容分析的信度檢定,目 的在 檢測 研究 者分 析 的類 目及 單位 ,是 否能 將內 容歸 入相 同 的類目 中,並使所得結果一致(楊孝濚,1989)。一般而言,內容分析的信度 應在 0.8 或 0.9 以上,通常採用兩種計算方式:

(一)「評分者信度」:不同評分者是否能將內容歸入相同類目,其 所得結果的一致程度。

(二)「研究者信度」:在不同時間進行分析類目工作,將同一內容 歸至同一類目的程度。

本研究採評分者信度,信度檢定分析過程如下:

(一)評分者

為考驗研究之信度,商請二位協同研究者擔任評分員,加上研究者 本身共三位,進行信度之考驗。二位協同研究者一位為正式國小教師,

為師範學院語文教育學系畢業,擔任國小教師已有12年,現為語文教育 研究所之研究生。第二位亦為師範學院院語文教育學系畢業,現為語文 教育研究所之研究生,擔任國小教師已有8年。

(二)信度檢驗步驟 1.預試抽樣

依照隨機抽樣的方式,從所得母數中,以十分之一分層隨機取樣方 式,抽取信度檢定的樣本。以本研究為例,即是從各版本六冊共126篇的 母群體中,以分層隨機抽樣的方式,選出12篇閱讀測驗。被選出的樣本

91

92

(2)研究者信度

a.研究者相互同意度= 研究者與其他評分員間Pi值總和 n-1

b.研究者信度(Ri)

研究者信度  2  研究者相互同意 度 1  研究者相互同意度

本研究預試編碼分類結果如附錄一所示,將預試編碼結果帶入公式 計算,所得之相互同意度與信度分析結果整理如下:

(3)信度計算結果

研究者與二位評分員之間的相互同意值與信度計算如下:

a. 相互同意度:

評分員 A B

B 0.74 --- 研究者 0.74 0.78 b.平均相互同意度:0.75

c.評分者信度:0.90

d.研究者相互同意度:0.76 e.研究者信度:0.86

內容分析法信度無法達到百分之百的準確度,若能達到0.8以上甚 至0.9的程度,就可以達到內容分析很高的信度(楊孝濚,1989)。本研 究預試結果,評分者信度為0.90,研究者信度為0.86,所以本研究工 具可以採納。

93

二、效度

效度即正確性,指測驗或其他工具確能測出其所欲測量的特質 或功能之程度。一個測驗的效度愈高,即表示測驗的結果愈能顯現其 所欲測量對象的真正特徵。本研究採用評審團法檢驗效度,由兩位邀 請的信度評分員,針對研究設計、類目定義、適切性等提出看法建議。

另請教語文領域專家學者,採納其意見及看法加以修訂,以期建立「專 家效度」,期盼研究類目及分析原則,能更符合研究上的需要。

伍、資料分析與處理

本研究的資料處理,依資料類型可區別為兩大部分,包含文本內 容分析與題型次數分析

一、次數分析

針對各版本閱讀測驗內容,利用次數分析描述字數、文體、題型理解 層次的統計結果,統計三版本共六冊。

(一)統計各篇字數,再求取平均數;

(二)統計故事體與說明文出現的次數,再計算比例;

(三)分析解題所需應用的閱讀能力,進行類目歸納;

(四)針對題型理解層次類別,計算比例;

(五)針對題型呈現方式進行分析統計;

(六)和PIRLS資料對照比較。

二、內容分析

一份好的閱讀測 驗,在 評量過 程中 應促使學 生努力 尋求高 層次思 考的認知能力,而非只是增加測驗分數的技巧。好的閱讀測驗能讓學 生能有機會經由評量過程,培養問題解決的能力,獲得有意義的學習 ,

94

並給予學生多樣性的成就。

PIRLS 閱讀測 驗題目 的設計 ,選擇 了比 傳統節錄 式的短 文較長 、 較真實有趣的文章,以便提供充分的脈絡來幫助受測者建構意義。除 了傳統客觀式選擇題之外,也加入開放式的問答題增進思考的難度。

如此一來,不僅重視文章內容的了解,也強調超越文章內容的高層次 思考與推理,並且重視學習者在思考過程中所運用的背景知識及策略 方法。

如此一來,不僅重視文章內容的了解,也強調超越文章內容的高層次 思考與推理,並且重視學習者在思考過程中所運用的背景知識及策略 方法。