第三章 研究方法
第二節 試題分類與測驗架構
壹、 試題分類
本研究在測驗的試題分類上,參考 CEFR 語言知識模式(Council of Europe, 2001; 多媒體英語學會譯本, 2007)和蔡雅薰(2009)的華語能力指標 溝通能力的三種領域能力進行分類;試題分類的結果是經由所有試題審查 委員的共識、並將試題分為以下三種類別:
Category I:試題只對應單一一種領域能力(語言、社會語言或語用能力)。
Category II:試題皆同時對應兩種領域能力(語言和社會語言、語言和語用 以或是社會語言和語用)。
Category III:試題同時對應三種領域能力(語言、社會語言和語用能力)。
有關於各類別的試題分類詳細說明如下:
一、 Category I
關於 Category I,試舉華語溝通能力測驗的第 41 道試題為例:
試題 41
謝欣穎的爸爸到學校參加家長座談會,蕭老師看到謝欣穎的爸爸說:
「______,歡迎你來參加。」請問以下那個答案最適合:
(A)謝經理 (B)老謝 (C)謝彥文 (D)謝爸爸
63
圖 3- 3 試題 41 作答介面
根據華語稱謂語的用法,從四個選項來看,在學校的家長座談會上,
蕭老師應該是以學生(謝欣穎)的爸爸「謝爸爸」(選項 D)來稱呼比較合適。
在對應 CEFR 的溝通能力指標上,這一道試題可以對應第 5 章第二節溝通 內在能力第二段社會語言的內在能力第一小節的禮貌常規--稱謂的使用及 選擇中的正式稱謂。根據上述對於第 41 道試題的分析來看,這道試題只 涵蓋一種領域能力的指標,也就是社會語言能力的指標;這道試題是個別任
務型試題,屬於Category I。華語溝通能力測驗的試題 41 的系統介面如上圖
3-3。
又例如華語溝通能力測驗的第 26 道試題:
試題 26
小明: 小強的溝通能力如何?
小張: 跟他聊天時非常愉快,他總是「侃侃而談」。
(A)胡言亂語 (B)對答如流 (C)陳腔濫調 (D)老生常談
64
圖 3- 4 試題 26 作答介面
如果受試者的具備足夠的詞彙能力,由這道試題可以從「侃侃而談」
的字面上直接了解他的意思和選項(B)的「對答如流」是相近的。因此正確 的答案為選項(B)。在對應 CEFR 的溝通能力指標上,這一道試題可以對應 第 5 章第二節溝通內在能力第一領域能力中的語言內在能力,第一小節的 字彙的內在能力 a) 固定的表達、使用多個單字來表達中的成語用法。根 據上述對於第 26 道試題的分析來看,這道試題只涵蓋一種領域能力的指 標,也就在測驗試題的編製上,這道試題只對應測量受試者的語言能力一 種領域能力;這道試題也是個別任務型試題,屬於Category I。華語溝通能力 測驗的試題 26 的系統介面如上圖 3-4。
二、 Category II
華語溝通的情境所涉及的任務和活動大相徑庭,大部份的試題很難設 計只對應一種領域能力的指標;也就是說測驗的試題可能同時對應語言、
社會語言或語用能力。關於 Category II 舉例說明如下:
試題 3
「久違,王先生。」”久違”的意思是?
(A)不好意思讓你等了這麼久 (B)我聽過你的名字
65
(C)好久沒見到你
(D)我們很久以前見過面
圖 3- 5 試題 3 作答介面
如上題試題 3 所示,受試者能由這道試題中「久違」的字面上直接了 解他的意思可能和選項(C)的「好久沒見到你」。在對應 CEFR 的溝通能力 指標上,這一道試題可以對應第 5 章第二節溝通內在能力第一領域能力中 的語言內在能力,第一小節的字彙的內在能力 a) 固定的表達、使用多個 單字來表達中的成語用法。同時也可以對應第 5 章第二節溝通內在能力第 二領域能力的社會語言內在能力,第一小節的社交關係的語言記號/打招呼 的使用及選擇。因此,根據上述對於第 3 道試題的分析來看,這道試題同 時對應語言、社會語言兩種領域能力的指標,顯示受試者需要具備這兩種 領域能力其中一種才能正確回答第 3 題,這道試題是一道整合任務型試題
,屬於 Category II。華語溝通能力測驗的試題 3 的系統介面如上圖 3-5。
三、 Category III
同時對應語言能力、社會語言能力和語用能力三種領域能力的指標,
屬於Category III 的整合任務型試題。關於 Category III如下例第八題: 試題 8
66
「如果你不按照他說的去做,他會讓你吃不完兜著走。」這句話的意 思是?
(A)如果你不聽他的,他會自己想辦法把事情完成 (B)就算你不聽他的,他也會想辦法讓你順從他 (C)就算你不聽他的,他也會有辦法自己把事情搞定 (D)如果你不聽他的,他會想辦法報復你讓你有麻煩
圖 3- 6 試題 8 作答介面
華語溝通能力測驗的第 8 題,依照題意和內容在對應 CEFR 的溝通能 力指標上,這一道試題可以對應第 5 章第二節溝通內在能力第一領域能力 的語言內在能力,第一小節的字彙的內在能力 a) 固定的表達、使用多個 單字來表達中的句子的表達。同時也可以對應第 5 章第二節溝通內在能力 第二領域能力的社會語言內在能力,第二小節的禮貌常規/「負面的」禮貌 /對於為了保持顏面的行為的表達禁止。另外,這道試題亦可對應第 5 章第 二節溝通內在能力第三領域能力的語用內在能力,第三小節的言談內在能 力--前後一貫的語言造句能力的原因和後果。因此,根據上述對於第 8 道
67
試題的分析來看,這道試題同時對應語言能力、社會語言能力和語用能力 三種領域能力的指標,顯示受試者需要具備這三種領域能力其中一種才能 正確回答第 8 題,這道試題是一道整合任務型試題,屬於 Category III。華 語溝通能力測驗的試題 8 的系統介面如上圖 3-6。
貳、 測驗架構
本研究對於所有 43 道試題的編製皆參考並對應 CEFR 語言知識模式 的能力指標,並且在試題中同時包含整合任務型與個別任務型的試題。其 中屬於 Category I 的試題共 21 題,分別包含在三個子類別中(語言、社會 語言、語用),每一個子類別都分別各編製 7 道試題;屬於 Category II 的試 題的試題共 15 題,包含三個子類別中(語言和社會語言、語言和語用以及 社會語言和語用),每一個子類別都分別各編製 5 道試題;屬於 Category III(
語言、社會語言和語用)的試題共編製 7 道試題,如圖 3-7 所示;例如在華 語溝通能力能力測驗的試題架構中,總共有 7 道同時對應三種領域能力的 整合任務型試題;他們分別為 8,9,11,15,22,23,和 25 題(請參見下 圖 3-8)。總體而言,本研究所編製的試題中,整合任務型試題共有 22 道試 題;個別任務型試題共有 21 道試。華語溝通能力測驗的試題,請參考附 錄一。
68 常會採用概似比法(likelihood ratio;LR)。LR 的統計量是將兩個模式的偏 差相減,屬於一種卡方檢驗的統計量(Anderson, 1973; Baker & Kim, 2004;