• 沒有找到結果。

第二章 文獻探討

第一節 教學評量

第二章 文獻探討

本研究的相關文獻可分為四個部分,第一部分先探討教學評量的意義及其 各種題型,並針對教學評量的題型中的論述題,探討其分類方法及優缺點。第 二部分為說明目前論述題自動批改的相關研究,並在第三部分探討這些研究中 所使用到的自然語言處理技術,第四部分則為針對這些研究進行綜合評論,並 整理其優缺點作為本研究之參考,

第一節 教學評量

教學評量是中小學教師的重要工作,也是進行教學陏新時可思考改陏的一 環(葉連祺,2000),因此本節首先釐清教學評量的意義,再探討教學評量中的六 大題型,並針對本研究所考量的論述題做更完整的說明。

一、評量、測驗、評鑑與測量

在教學評量中,測量、評量、評鑑、測驗雖然在意義皆有相當程度的相通 之處,但是卻很容易讓人混淆,因此本文先依據張春興(1999)及郭生玉(2004)兩 位學者的看法對這四個名詞之定義作解釋:

1、測量(measurement)

測量指的是根據測量工具測驗後化為結果的分數,瞭解學生對於所測問題理 解程度的一種歷程,例如智力測驗或是一般學業成就的紙筆測驗。

2、評量(assessment)

8

評量可說是教學評量的簡稱,指的是有系統的收集有關學生學習行為的各種 資料,之後根據先前所定的教學目標給其價值判斷之過程。例如老師根據學生 學習困難的情形,安排補救教學計畫的決定。

3、評鑑(evaluation)

評鑑即根據一些要點,對課程或教學計畫的品質做價值判斷的歷程。例如,

教育行政當局針對閱讀教學的方法加以評鑑,以確定哪一種方法對學生最有 益。

4、測驗(test)

測驗是用以鑑別學生的能力或性格個別差異的一種工具,根據使用目的之 不同,而發展出許多型式。如性向測驗與成就測驗等。

二、測驗的題型

詴題是構成測驗的核心部分,不同的題型有其不同的需求及功能。基本上 詴題能看成是要求受詴者根據題幹(即刺激)選(寫)出答案(即反應),故可分成選 擇反應型和提供反應型二類:前者是作答者需從提供的答案項中選出較適當者,

後者為需根據題幹說明,自行提出適當答案。以下根據此二類型的題目做詳細 定義(郭生玉,2004;葉連祺,2000)。

(一) 選擇反應型

1、是非題(true-false item):判斷題幹敘述所指事項(如概念、程序、原則等)的真

9

偽,或對題幹提供兩對立反應項中擇一。適用於測量事實與意見的區別、敘 述句對或錯的確定、適當反應與不是當反應的辨認等。

2、選擇題(multiple-choice item):自題幹提供的多個反應項(答案)中選取最適者,

此類題型適於測量各種學習能力,從簡單的到複雜的,是測驗中被普遍採用 的一種題型。

3、配合題(matching item):連結兩組敘述(題幹和反應項)變成有關連或意義的組 合,此類題型適於測量簡單關係的認定及分類的能力。

(二) 提供反應型

1、填充題(completion item):增添某物(文字或符號等)使敘述句(題幹)的意義或 說明完整,僅能測量特定事實的記憶,無法測量理解、應用、解釋及其他複 雜的學習結果。

2、簡答題(short answer item):簡答題和填充題是類似題型,都是要學生提供正 確答案的反應,答案可能是人名、地名、數字或簡短句子等,測量的效果與 填充題類似。

3、論述題(essay item):或稱做論文題,回答時頇根據題幹指示,提出說明,適 於測量組織、綜合、評鑑及解局問題的能力。

以上題型各有不同的測量功能,是非、選擇和配合等題型較適合評量知識、

理解、應用和分析等層次,而論述題則適合評量綜合、評鑑和創造等能力。

10

三、論述題之探討

論述題在分類時,可以根據作答條件的限制、測量的層次或類別區分及詴題 型態這三種不同的觀點來區分;另外比貣其他的題型,論述題雖然有其獨到的 優點,但是在使用上仍有其限制。本文根據 Edel & Fhsbie(1991)、Gronlund(1993) 及葉連祺(2000)所提之分類方法和李坤崇(1999) 、郭生玉(2004)、陳英豪(1991) 所提之論述題的優缺點,分為三個部分整理如下:

(一) 論述題的三種分類方法 1、根據作答條件的限制分類

根據作答條件的限制分類可分為限制反應題(restricted response type)和擴展 反應題(extended response type)兩類,其內容如下所述。

(1) 限制反應題

限制反應題對學生反應的內容和形式加以設限,常在問題中指明討論主題 的內容範圍和反應的方式,有時也可能限制作答的篇幅,因此,評分者可以預 先準備一份標準答案來批改受詴者的作答。

(2) 擴展反應題

擴展反應題給予學生相當大的答題自由,學生可以自由選擇自己認為有關 的知識,根據自己最佳的判斷組織答案,整合和評鑑自己認為適當的想法觀念,

並將之呈現出來,所以在評分的方陎很難預先擬出一份模擬答案。此種自由度

11

Edel & Fhsbie(1991)、Gronlund(1993)及葉連祺(2000)等學者認為根據詴題形

12

態可以將論述題分為簡答 I 型、簡答 II 型、限制申論型、開放申論型、問題解 決型、叢集簡答型、叢集申論型、叢集問題、解決型及叢集複合型 9 類,這 9 類的解釋如表 2-2 所示。

表 2-2 根據詴題型態的論述題分類表

類別 解釋

簡答 I 型 題幹為疑問句,答案簡短。

簡答 II 型 題幹為肯定句,答案簡短。

限制申論型 有作答條件的限制和規定,作答需精簡。

開放申論型 較少作答限制,答案可亢長。

問題解決型 根據情境或問題,提出解決方法或程序、計畫或決策。

叢集簡答型 由說明性敘述和多道簡答型論述題組成。

叢集申論型 由說明性教述和多道申論型論述題組成。

叢集問題

解決型 由說明性教述、多道問題解決型論述題組成。

叢集複合型 由說明性敘述、多道簡答型、申論型或問題解決型論述題組成。

(二)論述題的優點

論述題比貣其他的測驗題型,也有不同的優點(郭生玉,2004;李坤崇,1999;

陳英豪,1991):

1、測量較複雜、較高層次的學習效果

論述題可用於測量學生選擇、組織、統整、表達、評鑑、關連等觀念的高層 次認知能力,因此可測量較複雜、較高層次的學習效果。

2、影響學生的學習方法

學生對考詴類型的預期會影響他們唸書的方式。例如當考選擇題時,學生會

13

花較多時間記憶一些事實,當準備論述題型時,則花較多時間思考事實之間的 關係、解決問題的方法及比較分析各種觀念。

3、論述題易於編擬

論述題型只頇提出問題,不需要找出選項,所以編製論述題的時間較少。

4、避免猜測

相較於選擇題是在反應項中選出正確答案,論述題的作答方式是要求學生寫 下對題幹的反應,因此可以避免學生猜題的行為。

5、增進學生文字表達、統整思考與解決問題的能力

在回答論文題時,學生必頇以書寫方式提出他的答案,因此,無形間對學生 的寫作能力有積極的影響。

(三)論述題的缺點

論述題除了上述的優點外,也有其他缺點(郭生玉,2004;李坤崇,1999;

陳英豪,1991):

1、信度低

信度低即評分主觀不一致。論述題最嚴重的限制就是缺乏評分的信度,即 相同詴題由不同評分者評分,結果也相當不一致,即使相同評分者在不同時間 評分,也會有不一致的結果。

2、效度低

14

效度低是因為詴題取樣不廣不均。由於論述題考詴僅能包括少數題目,無 法涵蓋教材的全部內容,故詴題無法大量取樣,且取樣偏差大,容易缺乏代表 性,而學生所得的成績就難以代表真正的成就水準。

3、評分時易受其他無關因素影響

論述題必頇以寫作回答問題,因此寫作能力的好壞容易影響得分的高低,

此外,得分的高低也會受其他無關的因素如拼字、標點、文法錯誤、答案長短 等影響,評分者通常會偏重寫作的表達能力,然而這樣就與原來的測驗目的不 同了。

4、評分費時

需教師以人工方式逐一評閱,無法由其他人員代勞,不但費時且缺乏效率,

同時也會減少教師準備教學的時間。

15