• 沒有找到結果。

試題內容之編製

第三章 研究方法

第五節 試題內容之編製

本節將描述「幼兒推論理解測驗」之試題內容各項編製原則,包含:語詞與語 法、試題架構、計分原則,並附上範例呈現編製歷程。以下分述說明本研究試題之 語詞與語法、試題架構、推論問題設計、計分原則與試題編製過程:

一、語詞與語法:

在語詞部分,使用貼近幼兒生活口語中常出之語詞進行編製,於預試前進行語 詞確認,確認每一語詞幼兒皆理解其意思。語詞之詞類,係根據謝錫金、陳桂涓、

鄺倩薇(2006)之研究報告作為理論依據,謝錫金等人指出,3-5 歲幼兒已能使用動 詞、助詞、代詞、名詞、副詞、量詞、形容詞、嘆詞,隨年齡增長的只是數量上的 差異。意即幼兒能理解這八項詞性。因此本測驗以上述八個詞類、幼兒生活口語常 出現語詞兩項編製試題語詞。

語法部分,謝錫金、陳桂涓、鄺倩薇(2006)指出,三歲以上幼兒接收到非慣 用語法(陳述句)之語句時,會自動將語句轉換成慣用語法(引自謝錫金,2006,

p.55)。對此論述,研究者認為,只要並非刻意提高語法難度,幼兒應能理解語法含 意(為了確保幼兒能聽懂,預試前進行語法確認)。語法構成係根據謝錫金、梁淑 群(2006)將句子依照句子之結構、句法複雜度,分為陳述句、祈使句、疑問句、

否定句、感嘆句(陳述句包含:無主句、主謂句、獨詞句、複合句、簡單修飾語句、

複雜修飾語句、無修飾語句、及物動詞句、不及物動詞句、帶連動詞句、一連串動 詞句、無動詞句等)(引自謝錫金,2006,p.53)。以下以例句演示:

「小明,要吃飯囉。」(陳述句)

「拿水杯給我好嗎?」(祈使句)

「你要不要一起玩?」(疑問句)

「我不跟你一起玩。」(否定句)

「哎呀!我被雨淋的好濕!」(感嘆句)

二、試題架構:

根據Florit、Roch 與 Levorato(2015)係採用生活事件編製成試題內容。本研究 以故事體的結構編製試題內容。故事體的架構係依據Mandler 與 Johnson(1977)、

Stein 與 Glenn(1979)等國外學者對故事結構要素之定義,故事結構要素需包含背 景、一個或多個情節、反應、結果。 並根據Florit等人指出測量幼兒推論理解須遵

循的三個原則:第一、要建立含有文本推論和背景知識推論的推論情境;第二、顯 性的訊息和隱性的訊息要在同一份文本中;第三、語言訊息要和推論問題要有幾個 句子的距離,並且語言訊息訊息,要放置於推論問題之前。

根據故事體的架構與Florit等人提出的三項原則,確立本測驗的試題架構。第一句 為呈現故事狀態、位置或角色特性之背景句。第二句為呈現故事突發事件之情節句,

並加入顯性訊息或隱性訊息。第三句為角色對突發事件作出反應之反應句,第四句 為結果句,並加入顯性訊息或隱性訊息。

本測驗的句子數量並無特別限制,係因為本測驗並不是幼兒聆聽完整段落的故事 後,才詢問推論問題。考量到幼兒的認知負荷,幼兒在聆聽每一句或兩句話後,施 測人員便以插入句的方式詢問推論問題,使本測驗試題不造成幼兒的認知負荷,影 響推論理解表現。

試題的平均句長,係以詞為單位計算平均句長(Mean Length Utterances, MLU)。

例如:「小明的爸爸正在打棒球」,為六句長之句子(小明/的/爸爸/正在/打/棒球)。

根據謝錫金、鄺倩薇、陳桂涓(2006)研究報告指出,3-5歲幼兒話語平均句長為5.72

~6.33,平均為6.00,標準差為1.04~1.35;根據其研究報告,本測驗之試題句長,

設定在正一個標準差內應屬合理,即本測驗之平均句長最高為7。

三、推論問題設計:

本測驗之推論問題,係根據推論類別進行編製。根據文獻探討,本測驗選用的推 論類別分為兩大類:背景知識推論與文本推論。在一個題組中,包含兩種不同類別 的推論問題(各佔一題)。

四、計分原則

本研究之計分原則在正式施測前,便完成計分原則編製。預試後便進行四個階 段的計分原則編製工作。第一階段,完成預試試題之 62 名幼兒的錄音口語原案資料 轉成逐字稿,以文書處理程式 Microsoft Excel 進行存檔;第二階段,與本研究指導 教授以及一名測驗開發人員,根據 Florit、Roch 與 Levorato(2015)兩項推論類別 的定義,訂出具有 2、1、0 量點的計分原則;第三階段,以計分原則檢視 62 名幼兒 在每一試題的作答,在 Microsoft Excel 中以不同顏色進行幼兒作答的分類,綠色為 完全符合 2 分定義的作答,紫色為符合 1 分定義的作答,紅色為符合 0 分定義的作 答;第四階段,將每一試題中,幼兒得 2、1、0 分的作答放至答案池中,不放入重

42

複的作答,所有作答皆放置答案池便完成試題答案的編製。以下以表 3-5-1 顯示本研 究計分原則之編製過程。

表 3-5-1

幼兒推論理解測驗計分原則編製表

本研究採取此種方式編製計分原則與測驗答案有幾項好處,第一,本測驗的計 分原則係根據 Florit、Roch 與 Levorato(2015)的理論依據,其研究選用的推論類 別已經成功測量幼兒在口語文本的推論表現,符合本研究的需求;第二,過去的測 驗多以研究者編製預設的試題答案,但本研究受試對象為幼兒,若使用成人的角度 編製預設答案,並不是幼兒的真實想法,因此本研究先收集幼兒的口語作答,再編 製成答案,使答案更貼近幼兒的想法;第三,以 Florit 等人對推論的定義檢視幼兒的 口語作答,能審視開發中的試題是否能問出具有不同程的作答;第四,推論理解並 非只有一種標準答案,而本研究係收集每一位幼兒預試口語作答,使用幼兒的作答 編製正式測驗之答案,使正式測驗試題中每一個 2、1、0 分包含多種答案,往後測 驗人員無需再依據推論的定義來分析幼兒的作答,僅需要圈選多種答案中的其中一 項,便能評分,有利於測驗工具的推廣。

階段 編製過程 範例(以預試試題 1-1 為例)

階段 1 將口語原案轉成逐字稿 問題:小明在哪裡玩呢?

089-D-1-2-01:公園。

089-D-1-1-02:學校。

089-D-1-2-03:他在在益智角玩。

089-D-1-1-05:在積木角。

階段 2 與專家共同訂定計分原則 2 分:整合兩個線索且作答符合文本脈絡。

整合線索「小明在玩」與「老師」。

1 分:整合一個線索且但作答符合文本脈絡。

使用線索「小明在玩積木和車子」。

0 分:未整合文本線索且作答不符合文本脈 絡。

階段 3 以顏色分類幼兒的作答 (綠色)089-D-1-1-02:學校

(綠色)089-D-1-2-03:他在在益智角玩

(紫色)089-D-1-2-10:房間

(紫色)089-D-1-1-11:在收拾的地方

(紅色)089-D-1-1-09:公園

階段 4 編製試題答案 2 分:學校(教室)、積木角、益智角。

1 分:有玩具(積木、車子)的地方、房間。

0 分:不知道、裡面、公園、圖書角。

五、試題編製過程

本測驗編製過程分為四階段。第一階段,探討國內外有關推論理解測量之文獻,

與幼兒發展理論,藉由文獻論理依據,編製試題故事;第二階段,發放專家問卷諮 詢台東市兩名資深幼兒園教師,對試題之語詞與句子進行討論,將試題修改成貼近 幼兒的語詞與句子(專家審查結果如附件一);第三階段,根據第二階段專家審查 結果,將試題中部分語詞與句子,對台東縣三間幼兒園 4-4.5 歲幼兒進行題項正確性 判斷(題項正確性判斷結果如附件二);第四階段,根據題項正確性判斷結果,修 正預試測驗題本;第五階段,進行預試測驗,並對幼兒之作答進行錄音,並以逐字 稿方式記錄幼兒口語原案資料;第六階段,研究者與兩名測驗專家進行討論,將幼 兒的口語原案資料進行分類,並依據 Florit、Roch 與 Levorato(2015)的推論定義,

編製測驗計分原則(計分原則編製結果如附件三);第七階段,依據計分原則對預 試內容進行計分,進行測驗項目分析;第八階段,依據預試項目分析結果之難易度 與鑑別度,修正或刪除試題;第九階段,依據預試項目分析結果,將預試試題分為 甲、乙兩式。幼兒推論理解測驗試題編製過程圖如下頁圖 3-5-1:

44

探討推論測量之文獻 以論理依據編製預試試題

進行專家效度審查 修正試題內容

進行題項正確性判斷

修正試題內容 完成預試題本

進行預試

收集幼兒口語原案資料 進行專家討論 編製試題計分原則

進行預試測驗之試題項目分析

修正試題

依據預試項目分析結果 編製甲、乙兩式 階段一

階段二

階段三

階段四

階段五

階段六

階段七

階段八

階段九

圖 3-5-1 幼兒推論理解測驗試題編製過程圖

綜述以上論理依據與試題編製過程,以下呈現根據以上論理與編製原則編製而 成之試題。試題範例如下表 3-5-2。

表 3-5-2

幼兒推論理解試題範例

文章結構 例句 答案與計分

背景句(第一句) 今天/是/小美/生日,

情節句(第二句) 小明/送/他/一顆/糖果。

問題句(第一題) 小美為什麼會有糖果呢?

(文本推論)

得分 2:小美生日,小明送他 的。

得分 1:小明送他的、小美生 日。

得分 0:不知道、小美買的。

反應句(第三句) 小美/把/禮物/放進/書包/裡,

結果句(第四句) 回家/去。

問題句(第二題) 小明和小美在哪裡說話呢?

(背景知識推論)

得分 2:學校、教室(校內)。

得分 1:放書包的地方。

得分 0:家裡。