• 沒有找到結果。

本研究的三十一篇作文,經由臺中市某國小校內四位資深的國語文領域專業 教師(A 師、B 師、C 師、D 師)共同討論所修定作文評量規準(如表 3-1),每 位評審分成「立意取材」、「組織結構」、「遣詞造句」及「錯別字、格式與標點符 號」共四個評分準則分項評分,將每篇作文的得分填於評分表(附錄五)內,得 到評分結果,如表 4-1 所示。

由表 4-1 的評分結果得知:在「立意取材」此評分項目上,有四篇作文(第 5、13、15、19 號)得到最高分數 6 分,而「結構組織」及「遣詞造句」二項評 分項目則無作文得到 6 分,其評量分數為 3 分及 4 分居多。顯示評分者對於參賽 學生在寫作的「立意取材」方面,願意給予寫作能力不錯的參賽學生較大的鼓勵 及肯定,在「結構組織」及「遣詞造句」方面,對參賽學生的要求較高,亦反應 出參賽學生在這兩個寫作要素方面大部份屬於中等程度。

在「錯別字、格式與標點符號」此評分項目上,參賽學生的表現平均,其評 量分數為 3 分及 2 分居多。唯有三篇作文得到 7 分,因其在「立意取材」評分項 目為 0 分所致。另外由評分結果可看出,雖然評分規準分成四項,但每項的得分 有其相關性,意即:語文程度佳的學生,在四項寫作表現皆有不錯的評量結果;

反之,語文程度差的學生,四項寫作表現的平均得分都不理想。

表 4-1 臺中市某國小一○一學年度國語文競賽作文比賽評分結果 立意取材 結構組織 遣詞造句 錯別字、格式與

標點符號 作文

編號 A B C D A B C D A B C D A B C D 1 2 3 2 2 1 2 2 2 2 3 1 2 3 3 3 4 2 3 3 1 3 3 3 2 3 3 3 3 4 3 2 3 3 3 3 1 3 1 4 3 4 2 3 3 4 2 5 4 3 4 4 3 4 2 2 3 3 2 2 3 2 3 3 3 3 3 4 5 6 5 4 3 5 5 4 3 4 4 3 3 2 1 2 2 6 1 1 1 1 1 1 2 1 1 1 1 2 5 4 3 4 7 5 4 3 2 4 3 4 4 5 4 5 3 3 2 3 2 8 0 2 0 2 0 3 0 3 0 2 0 2 7 4 7 5 9 3 3 2 3 4 3 2 3 4 3 3 4 3 3 2 1 10 2 3 2 2 4 3 2 3 3 2 2 4 2 3 2 3 11 3 3 2 1 4 4 3 2 4 4 3 3 3 3 2 3 12 2 4 1 1 4 4 2 2 3 2 2 3 4 3 3 3 13 6 5 6 4 5 3 5 4 5 4 5 3 2 2 2 2 14 1 2 1 1 3 3 2 2 3 3 2 4 3 3 2 1 15 6 6 5 3 5 5 3 3 5 4 5 4 2 2 1 2 16 4 5 4 3 4 5 4 3 4 3 4 4 3 2 3 2 17 3 3 3 2 3 4 4 4 5 5 3 5 3 4 3 2 18 1 2 3 2 4 4 4 3 4 3 3 2 3 3 2 2 19 6 6 5 3 5 5 5 4 4 5 5 3 3 2 2 3 20 5 4 6 3 5 4 5 4 4 4 5 3 3 2 3 3 21 3 3 3 1 4 3 4 3 3 3 3 3 3 4 3 3 22 2 2 0 1 1 1 0 1 2 2 0 2 4 4 7 4 23 1 3 1 1 1 2 2 1 2 3 1 2 5 5 4 5 24 5 5 5 4 5 4 5 4 4 5 5 3 3 2 3 4 25 2 3 1 1 3 4 2 2 3 3 2 2 2 3 3 2 26 4 3 4 2 4 4 5 3 3 4 4 4 3 3 2 1 27 1 2 3 1 1 2 2 1 3 3 2 3 4 4 3 4 28 1 2 1 2 3 3 3 2 2 3 2 2 3 3 3 2 29 1 3 1 2 3 3 2 2 2 3 2 3 3 4 3 2 30 1 2 0 1 3 2 0 2 2 3 0 2 4 4 7 3 31 1 2 1 1 1 3 2 2 1 3 2 2 4 4 4 3 資料來源:本研究整理

一、評分者信度分析

由於本研究有四位評分者針對三十一篇作文進行各別評分,為三位以上評分 者評多件作品,其評分具等級性。故在評分者間信度(Inter-rater reliability)分析,

採用以 SPSS/PC 統計套裝軟體計算 Kendall 和諧係數(The Kendall’s coefficient of concordance;W)檢驗評分一致性的情形。

(一)Kendall 和諧係數公式(楊宗義,1990):

1.同一評分者無相同等級評分時:

對於評分結果無相同等級的評分者Ti= 0,因此只須對評分結果有相同 等級的評分者計算Ti

(二)按照相關的高低,常用評判標準如下:

W=0.9~1.0非常高相關 W=0.7~0.9高相關 W=0.5~0.7中等相關 W=0.3~0.5低相關 W=0.0~0.3微相關

(三)分析結果

由下表的統計數據得知,四位評分者在四項評分準則得到的Kendall和諧係 數(W)均達在.700以上,皆達到高相關,顯示本研究具有良好的評分一致性,

也顯示出各評分者所評之分數具有良好的信度。在四個評分準則中以錯別字、格 式與標點符號這項評分準則所得相關結果較低,原因在於幾篇的作文因有評審認 定離題,故此項準則給予七分;但有評審不認為離題,故此項準則仍按標準給分,

所以此項準則的評分一致性在四項準則中較差。

表 4-2 評分者在各評分準則 Kendall 和諧係數檢驗評分一致性結果 評分準則 立意取材 結構組織 遣詞造句 錯別字、格式

與標點符號 Kendall's W

檢定(a) .781 .768 .723 .700 卡方 93.670 92.172 86.720 84.038 自由度 30 30 30 30 漸近顯著性 .000 .000 .000 .000 資料來源:本研究整理

二、專家效度分析

本研究所訂定的作文評分規準,主要根據民國九十九年八月所修訂的「國民 中學學生基本學力測驗寫作測驗評分規準」(附錄三)的內容,並參考教育部於 民國一○○年四月修訂的「國民中小學九年一貫課程綱要」國語文學習領域國小 階段寫作能力指標(教育部,2011),經由四位資深的國小語文領域教師共同討 論匯集意見,其相關背景如表4-3所示,最後經兩位臺中教育大學的教授審核,其 相關背景如表4-4所示,故本評量具有良好的專家效度。

表 4-3 參與修訂作文評分規準及進行作文評審的人員資料 評量人員 相 關 背 景

A 師 教學年資 21 年,教務處主任,校內國語文競賽評審

B 師 教學年資 14 年,資深國語文領域教師,校內作文評稿委員 C 師 教學年資 12 年,資深國語文領域教師,校內作文指導教師 D 師 教學年資 15 年,資深國語文領域教師,校內作文比賽評審委員 資料來源:本研究整理

表 4-4 參與審核作文評分規準的人員資料

審核人員 相 關 背 景 Dr.許 現職國立臺中教育大學教授

Dr.陳 現職國立臺中教育大學副教授 資料來源:本研究整理

三、一性致分析

作文評分規準建立後,因各個評分準則的重要性不同,因此四位評審員先參 考國內各作文比賽辦法及專家學者相關的研究,再透過問卷(附錄四)設計與調 查,並統整問卷調查的結果,訂定各評分準則的相對重要度關係,如表4-5。

表4-5 評分準則成對比較矩陣

相關文件