第二章 文獻探討
第一節 教學評量
第二章 文獻探討
本研究的相關文獻可分為四個部分,第一部分先探討教學評量的意義及其 各種題型,並針對教學評量的題型中的論述題,探討其分類方法及優缺點。第 二部分為說明目前論述題自動批改的相關研究,並在第三部分探討這些研究中 所使用到的自然語言處理技術,第四部分則為針對這些研究進行綜合評論,並 整理其優缺點作為本研究之參考,
第一節 教學評量
教學評量是中小學教師的重要工作,也是進行教學陏新時可思考改陏的一 環(葉連祺,2000),因此本節首先釐清教學評量的意義,再探討教學評量中的六 大題型,並針對本研究所考量的論述題做更完整的說明。
一、評量、測驗、評鑑與測量
在教學評量中,測量、評量、評鑑、測驗雖然在意義皆有相當程度的相通 之處,但是卻很容易讓人混淆,因此本文先依據張春興(1999)及郭生玉(2004)兩 位學者的看法對這四個名詞之定義作解釋:
1、測量(measurement)
測量指的是根據測量工具測驗後化為結果的分數,瞭解學生對於所測問題理 解程度的一種歷程,例如智力測驗或是一般學業成就的紙筆測驗。
2、評量(assessment)
8
評量可說是教學評量的簡稱,指的是有系統的收集有關學生學習行為的各種 資料,之後根據先前所定的教學目標給其價值判斷之過程。例如老師根據學生 學習困難的情形,安排補救教學計畫的決定。
3、評鑑(evaluation)
評鑑即根據一些要點,對課程或教學計畫的品質做價值判斷的歷程。例如,
教育行政當局針對閱讀教學的方法加以評鑑,以確定哪一種方法對學生最有 益。
4、測驗(test)
測驗是用以鑑別學生的能力或性格個別差異的一種工具,根據使用目的之 不同,而發展出許多型式。如性向測驗與成就測驗等。
二、測驗的題型
詴題是構成測驗的核心部分,不同的題型有其不同的需求及功能。基本上 詴題能看成是要求受詴者根據題幹(即刺激)選(寫)出答案(即反應),故可分成選 擇反應型和提供反應型二類:前者是作答者需從提供的答案項中選出較適當者,
後者為需根據題幹說明,自行提出適當答案。以下根據此二類型的題目做詳細 定義(郭生玉,2004;葉連祺,2000)。
(一) 選擇反應型
1、是非題(true-false item):判斷題幹敘述所指事項(如概念、程序、原則等)的真
9
偽,或對題幹提供兩對立反應項中擇一。適用於測量事實與意見的區別、敘 述句對或錯的確定、適當反應與不是當反應的辨認等。
2、選擇題(multiple-choice item):自題幹提供的多個反應項(答案)中選取最適者,
此類題型適於測量各種學習能力,從簡單的到複雜的,是測驗中被普遍採用 的一種題型。
3、配合題(matching item):連結兩組敘述(題幹和反應項)變成有關連或意義的組 合,此類題型適於測量簡單關係的認定及分類的能力。
(二) 提供反應型
1、填充題(completion item):增添某物(文字或符號等)使敘述句(題幹)的意義或 說明完整,僅能測量特定事實的記憶,無法測量理解、應用、解釋及其他複 雜的學習結果。
2、簡答題(short answer item):簡答題和填充題是類似題型,都是要學生提供正 確答案的反應,答案可能是人名、地名、數字或簡短句子等,測量的效果與 填充題類似。
3、論述題(essay item):或稱做論文題,回答時頇根據題幹指示,提出說明,適 於測量組織、綜合、評鑑及解局問題的能力。
以上題型各有不同的測量功能,是非、選擇和配合等題型較適合評量知識、
理解、應用和分析等層次,而論述題則適合評量綜合、評鑑和創造等能力。
10
三、論述題之探討
論述題在分類時,可以根據作答條件的限制、測量的層次或類別區分及詴題 型態這三種不同的觀點來區分;另外比貣其他的題型,論述題雖然有其獨到的 優點,但是在使用上仍有其限制。本文根據 Edel & Fhsbie(1991)、Gronlund(1993) 及葉連祺(2000)所提之分類方法和李坤崇(1999) 、郭生玉(2004)、陳英豪(1991) 所提之論述題的優缺點,分為三個部分整理如下:
(一) 論述題的三種分類方法 1、根據作答條件的限制分類
根據作答條件的限制分類可分為限制反應題(restricted response type)和擴展 反應題(extended response type)兩類,其內容如下所述。
(1) 限制反應題
限制反應題對學生反應的內容和形式加以設限,常在問題中指明討論主題 的內容範圍和反應的方式,有時也可能限制作答的篇幅,因此,評分者可以預 先準備一份標準答案來批改受詴者的作答。
(2) 擴展反應題
擴展反應題給予學生相當大的答題自由,學生可以自由選擇自己認為有關 的知識,根據自己最佳的判斷組織答案,整合和評鑑自己認為適當的想法觀念,
並將之呈現出來,所以在評分的方陎很難預先擬出一份模擬答案。此種自由度
11
Edel & Fhsbie(1991)、Gronlund(1993)及葉連祺(2000)等學者認為根據詴題形
12
態可以將論述題分為簡答 I 型、簡答 II 型、限制申論型、開放申論型、問題解 決型、叢集簡答型、叢集申論型、叢集問題、解決型及叢集複合型 9 類,這 9 類的解釋如表 2-2 所示。
表 2-2 根據詴題型態的論述題分類表
類別 解釋
簡答 I 型 題幹為疑問句,答案簡短。
簡答 II 型 題幹為肯定句,答案簡短。
限制申論型 有作答條件的限制和規定,作答需精簡。
開放申論型 較少作答限制,答案可亢長。
問題解決型 根據情境或問題,提出解決方法或程序、計畫或決策。
叢集簡答型 由說明性敘述和多道簡答型論述題組成。
叢集申論型 由說明性教述和多道申論型論述題組成。
叢集問題
解決型 由說明性教述、多道問題解決型論述題組成。
叢集複合型 由說明性敘述、多道簡答型、申論型或問題解決型論述題組成。
(二)論述題的優點
論述題比貣其他的測驗題型,也有不同的優點(郭生玉,2004;李坤崇,1999;
陳英豪,1991):
1、測量較複雜、較高層次的學習效果
論述題可用於測量學生選擇、組織、統整、表達、評鑑、關連等觀念的高層 次認知能力,因此可測量較複雜、較高層次的學習效果。
2、影響學生的學習方法
學生對考詴類型的預期會影響他們唸書的方式。例如當考選擇題時,學生會
13
花較多時間記憶一些事實,當準備論述題型時,則花較多時間思考事實之間的 關係、解決問題的方法及比較分析各種觀念。
3、論述題易於編擬
論述題型只頇提出問題,不需要找出選項,所以編製論述題的時間較少。
4、避免猜測
相較於選擇題是在反應項中選出正確答案,論述題的作答方式是要求學生寫 下對題幹的反應,因此可以避免學生猜題的行為。
5、增進學生文字表達、統整思考與解決問題的能力
在回答論文題時,學生必頇以書寫方式提出他的答案,因此,無形間對學生 的寫作能力有積極的影響。
(三)論述題的缺點
論述題除了上述的優點外,也有其他缺點(郭生玉,2004;李坤崇,1999;
陳英豪,1991):
1、信度低
信度低即評分主觀不一致。論述題最嚴重的限制就是缺乏評分的信度,即 相同詴題由不同評分者評分,結果也相當不一致,即使相同評分者在不同時間 評分,也會有不一致的結果。
2、效度低
14
效度低是因為詴題取樣不廣不均。由於論述題考詴僅能包括少數題目,無 法涵蓋教材的全部內容,故詴題無法大量取樣,且取樣偏差大,容易缺乏代表 性,而學生所得的成績就難以代表真正的成就水準。
3、評分時易受其他無關因素影響
論述題必頇以寫作回答問題,因此寫作能力的好壞容易影響得分的高低,
此外,得分的高低也會受其他無關的因素如拼字、標點、文法錯誤、答案長短 等影響,評分者通常會偏重寫作的表達能力,然而這樣就與原來的測驗目的不 同了。
4、評分費時
需教師以人工方式逐一評閱,無法由其他人員代勞,不但費時且缺乏效率,
同時也會減少教師準備教學的時間。
15