• 沒有找到結果。

多點計分S-P表分析法之應用 -以國小四年級自然科評量為例-

N/A
N/A
Protected

Academic year: 2021

Share "多點計分S-P表分析法之應用 -以國小四年級自然科評量為例-"

Copied!
73
0
0

加載中.... (立即查看全文)

全文

(1)國立臺中教育大學教育資訊與測驗統計研究所 碩士論文. 指導教授:許天維 博士. 多點計分 S-P 表分析法之應用 -以國小四年級自然科評量為例Polychotomous Scoring S-P Chart Application – An Example of Fourth Grade Science Studies in an Elementary School. 研究生:葉怡華 撰 中華民國. 一 ○ 四. 年. 六. 月.

(2) 謝辭 回首研究所的兩年歲月裡,我的生命充滿喜悅的成長,資統所豐富我的人 生。在學習歷程中,非常感謝同學們互相扶持及老師們用心教導,使整個過程更 加順利。 能完成這篇論文,首先,要感謝我的指導教授許天維博士,在他不厭其煩的 指導下,我的論文才能更加充實有內涵。其次,要感謝胡豐榮教授與王柏婷教授 在百忙之中抽空替我口試,並給予我專業的建議,使我的論文更為完善。接著, 我要感謝同門好夥伴們在課業上與我分享學習心得,在懈怠時給予我激勵與督 促。 再來,我要感謝豐村國小的夥伴們,因為你們在工作上對我的鼎力相助與體 諒,並經常替我打氣,我才能在學習的這條路上持續且堅持著。此外,還要感謝 畢業的學長適時給予我軟體應用上的提點及研究經驗的傳承。 最後,特別感謝我最親愛的家人們,爸爸、媽媽、弟弟、弟媳,擁有你們的 全力支持與不斷鼓勵,使我可以專心地投入學業,無後顧之憂的完成論文,我要 將這份榮耀獻給我生命中最重要的你們,謝謝! 僅將完成學位的喜悅獻給所有幫助過我的人,以及在我身旁關心我的人。. 葉怡華 謹致 中華民國一○四年六月.

(3)

(4)

(5) 摘要 在教學的過程中,測驗是一項相當重要的教學活動,一般教師及學生都習慣 以測驗分數作為學習成就的依據,而忽略了測驗結果所回饋的訊息。本研究目的 在於將 S-P 表測驗分析理論應用於國小自然科實務教學上和提供教師如何應用 S-P 表分析資料作為教學、命題、和學生學習等參考依據。 在反應教學及測驗工具問題方面,傳統 S-P 表分析結果可以協助教師判斷 答對率太低的試題是否需要調整或是在教學上需要修正或補強教學;在學習輔導 方面,可以依據 S-P 表分析理論中學生注意係數是否偏高指出學生的學習特性和 探討可行的學習輔導方式,所以尋找一套客觀、有效的方法來分析學生的學習狀 況,對老師的教學調整與學生弱點的補強都是必要的。 而本研究中採用 S-P 表分析理論並將題目配分加入權重,將其應用至多點 計分測驗,來尋求一套更客觀的方法,可以更有效的反映學生在課程中的學習狀 況,協助教師了解學生的學習困難之處,並可作為教學調整與對學生補強教學策 略的一個參考。. 關鍵詞:S-P 表分析法、多點計分、注意係數、差異係數。. I.

(6) Abstract In the teaching process, test is a very important teaching activity. However, teachers and students in general are used to determine the students’ academic achievement on the basis of test scores and ignore the feedback from test results. This study aimed to apply the Student-Problem Chart Analysis (S-P) theory to elementary science practical teaching and help teachers to use S-P data as a source to improve how to make tests and advise students. In respect of problems on teaching reaction and assessment tool, the traditional S-P results help teachers to determine whether the questions with low correct rate ought to be adjusted , the teaching method ought to be regulated , or re-instrust the students as remedial instruction. In learning counseling, teachers can tell students’ learning characteristics according to Caution index for Students (CS) in S-P theory. Teachers should notice if the index in CS is too high and explore possible ways for tutoring students. Accordingly, it is essential to find an objective and effective way to analyze students’ learning conditions. At the same time, for teachers to modify teaching methods and strengthen students’ weaknesses is also necessary. The study applied the S-P theory to Polochotomous Scoring test with weighted scoring method, which is a more objective way to reflect the students’ learning condition in class effectively. Thus, it helps teachers understand the students’ learning difficulties, and become a reference for teachers to offer instruction adjustment and the tactics for remedial teaching toward students. Keywords: Student-Problem Chart Analysis (S-P), Polochotomous Scoring, Caution index ,the coefficient of disparity.. II.

(7) 目錄 摘要……………………………………………………………………………………I Abstract……………………………………………………………………………II 目錄…………………………………………………………………………………III 表目錄…………………………………………………………………………………V 圖目錄………………………………………………………………………………VI 第一章 緒論…………………………………………………………………………1 第一節 研究動機………………………………………………………………1 第二節 研究目的………………………………………………………………2 第三節 研究問題………………………………………………………………3 第四節 研究限制………………………………………………………………3 第五節 名詞釋義………………………………………………………………4 第二章 文獻探討……………………………………………………………………7 第一節 教學評量………………………………………………………………7 第二節 補強教學………………………………………………………………8 第三節 S-P 表診斷分析………………………………………………………9 第四節 命題技巧與規範……………………………………………………14 第三章 研究設計…………………………………………………………………21 第一節 研究步驟……………………………………………………………21 第二節 研究方法……………………………………………………………23 第三節 研究對象……………………………………………………………25 第四節 研究工具……………………………………………………………25 第五節 編製試題與預試……………………………………………………26 第四章 研究結果與討論…………………………………………………………27 第一節 預試結果分析………………………………………………………27 第二節 施測結果分析………………………………………………………32 第三節 多點計分 S-P 表分析………………………………………………37 第四節 試題的注意係數(CP)分布分析……………………………………38 第五節 學生的注意係數(CP)分布分析……………………………………43 第六節 試題差異係數、難度指數以及鑑別度分析………………………49. III.

(8) 第五章 結論與建議………………………………………………………………51 第一節 研究結論……………………………………………………………51 第二節 未來發展方向………………………………………………………52. 參考文獻……………………………………………………………………………53 中文部分………………………………………………………………………53 英文部分………………………………………………………………………57 日文部分………………………………………………………………………60 附錄. 國民小學四年級自然科學習成就評量試卷………………………………61. IV.

(9) 表目錄 表4-1 表4-2 表4-3 表4-4 表4-5 表4-6 表4-7 表4-8 表4-9 表4-10 表4-11 表4-12 表4-13 表4-14 表4-15 表4-16 表4-17 表4-18. 預試試題難度統計表…………………………………………………28 挑選題目修正前雙向細目表…………………………………………29 挑選題目修正後雙向細目表…………………………………………30 信度參數參考指標……………………………………………………31 試題信度分析…………………………………………………………31 答對題數人數分布表…………………………………………………32 分數分布表……………………………………………………………33 施測成績敘述統計表…………………………………………………34 施測班級學生成績表…………………………………………………35 施測成績與月考成績相關性檢定表…………………………………36 施測成績與智力測驗相關性檢定表…………………………………36 試題診斷分析表………………………………………………………38 學生診斷分析表………………………………………………………43 學生診斷分析建議表…………………………………………………45 學生智力測驗組距表…………………………………………………46 學生月考成績組距表…………………………………………………46 學生施測成績組距表…………………………………………………46 試題通過率、難度、鑑別度統計表……………………………………50. V.

(10) 圖目錄 圖2-1 圖2-2 圖3-1 圖3-2 圖4-1 圖4-2 圖4-3 圖4-4 圖4-5. 學生診斷分析圖………………………………………………………….....10 試題診斷分析圖………………………………………………………….....13 研究步驟圖……………………………………………………………….....22 研究流程圖……………………………………………………………….....24 答對題數人數分布圖……………………………….………………………33 分數分布圖……………………………………………………………….....34 S-P 曲線圖……………………………………………………………….....37 試題診斷分析圖………………………………………………………….....39 學生診斷分析圖………………………………………………………….....44. VI.

(11) 第一章. 緒論. 測驗與評量有著許多的功能,例如評估能力、雇用員工、診斷學生盲點,考 試分發及發現未來潛力。隨著測驗結合科技而日新月異,突破了很多傳統的限 制,因此能夠更有效的發揮功能。從很多文獻中指出,目前常用的測驗模式,一 般均採用兩點計分模式,兩點計分的模式是將所有選項之誘答力視為相同,此種 侷限造成不同難易程度之試題所呈現的成績,不盡然能忠實反映學生本身的程度 與學習情況。 本研究目的旨在加入題目權重的概念擴展佐藤隆博(Takahiro Sato)的S-P 表分析法,將其應用至多點給分測驗,以期能滿足各類型試題之不同權重(多點 計分) ,真實涵蓋大部分的測驗項目,藉由使用S-P表來分析臺中市某國小四年級 在自然科領域的學習狀況,以提供教學者在進行補強教學時可參考的資料,並了 解該年級學童的學習狀況及學習類型,以利教師針對個別學生進行補強教學,並 可以藉由S-P表分析法的資料,看出題目的難易度是否適中。本章共分五節,分 別為研究動機、研究目的、研究問題、研究限制以及名詞釋義五個部分,詳述如 下。. 第一節 研究動機 綜觀國內外的相關文獻,大多數的研究都是以傳統的紙筆測驗或診斷教學為 主,事後進行個別學生訪談來瞭解受試者的概念結構。這些研究的方法需要花大 量的時間與人力,才能了解少數學生的知識結構,比較偏重於質性研究。透過傳 統 S-P 表分析,可以利用每道試題的作答反應組型的注意係數來分析學生類型與 試題品質,以及整份測驗的差異係數和同質性係數。這些數據成為協助教師診斷. 1.

(12) 學生表現、試題品質,即時教學成果的有效工具,並可作為教師改進教學的依據、 改良命題方式與輔導學生的參考。但是測驗的計分方式可分為二點計分與多點計 分。二點計分指受試者的作答反應,結果只有對或錯二種情況,成為正確(1) 與錯誤(0)之二元資料。只憑最後答案的對錯,決定受試者能力的方式,並未 考慮到試題難易與受試者答題的歷程及作答反應的關係,可能會有答對題數相 同,但作答反應組型不同,其表示的意義可能不同(Harnisch & Linn, 1981) 。只 有正確(1)與錯誤(0)的資料無法呈現出試題的難易程度分別,因此將傳統的 S-P 表加入了多點計分概念,使用較難的題目給與較高的配分,來判斷學生的程 度差異是本研究主要的目的。. 第二節 研究目的 本研究的目的,在於透過多點計分 S-P 表分析法對四年級學童進行施測 分析,從測驗中獲得相關係數,以進行試題分析、判別學習類型及學習困難, 最後提供教師在試題編製、教學方式及補強教學的參考資料。 因此,本研究目的茲列如下: 一、探討九年一貫課程綱要中國小階段自然科能力指標。 (一)分析國小四年級階段自然科相關概念,並編製相關測驗。 (二)透過 Bloom 教育目標分類修訂版進行試題編製。 (三)進行預試得到數據來統計題目難度後,再重新給予題目分數權重, 提供多點計分的客觀計分方式。 二、透過多點計分測驗數據以 S-P 表進行分析,然後繪製出 S-P 曲線圖。 三、應用多點計分 S-P 表分析法進行試題分析與判別學生的學習情形和學 習類型。 (一)透過施測得到的試題差異係數(D*) ,來評斷整體測驗效果。. 2.

(13) (二)透過施測得到的試題注意係數(CP) ,來瞭解試題編製情形。 (三)透過施測得到的學生注意係數(CS) ,來瞭解學生的學習類型。. 第三節 研究問題. 基於上述研究動機與目的,本研究提出的研究問題條列如下: 一、將 S-P 表應用多點計分測驗的方法為何? 二、根據試題分析,試題信度、難度指數、及鑑別力為何? 三、應用多點計分 S-P 分析法,試卷編制與成績計算配分方式為何? 四、應用多點計分 S-P 分析法時,施測對象、實施流程及評估項目為何? 五、運用 S-P 分析法分析學生學習類型分布情形為何?. 第四節 研究限制 本研究在考量人力、時間和環境等相關限制因素之下,預期本研究的限制會 有以下幾點: 一、本研究的範圍只選定臺中市的某國小四年級一個班級學童為施測樣本。 因此,結論僅就班級的學童的情況進行分析,無法推論到其他班級或其 他縣市。 二、因為自然科內容甚廣、且部分能力指標太抽象,題目無法涵蓋所有能力 指標及內容,能力無法透過選擇題題型測出,所以在測驗內容取樣尚無 法做到盡善盡美。 三、本項研究適用於各個學科,但是受限於時間及人力之不足因素,加上試 題編製較為費時,故選擇國小四年級自然教材做為施測樣本。. 3.

(14) 第五節 名詞釋義 為使本研究所討論之範圍與內容明確清晰,茲將本研究中所涉及的重要名詞 界定如下:. 壹、S-P 表分析法 S-P 表分析法(Student-Problem chart analysis;S-P)又稱為學生問題表分析 法,是 1970 年代日本學者佐藤隆博(Takahiro Sato)透過學生在試題上的反應發 明的,S-P 表分析法主要是依據學生在試題上的作答反應,計算出兩個數據,試 題注意係數(caution index for items,簡稱 CP)及學生注意係數(caution index for students,簡稱 CS) ,這兩項數據是用來判斷試題優劣及學生類型的重要指標。S-P 表分析法,比較適合用於班級人數較少的資料來做分析,尤其適合用於形成性評 量的測驗分析,最後將學生在試題上的作答反應繪製出表格加以分類,目的是藉 由此表獲得每位學生與每個題目的資訊,作為提供教師審視題目與實施有效的教 學輔導參考(余民寧,2002)。. 貮、自然與生活科技學習領域 「自然與生活科技領域」的綱要內涵是教育部 2003 年 1 月修正公佈的, 其主要內涵包含「物質與能」 、 「生命世界」 、「地球環境」 、 「生態保育」 、 「資訊科 技」等的學習,注重科學及科學研究知能,培養尊重生命、愛護環境的情操及善 用科技及運用資訊等能力,並能實踐於日常生活中。. 參、單一正確答案題型選擇題 一、選擇題的基本架構 選擇題主要架構總共包括兩大部分,第一個是題幹(stem) ,由直接問句(direct question)或不完全敘述句(imcoplete statement)構成;第二個是選項(option),. 4.

(15) 大約三至五個,其中有一個正確或最佳的選項,其餘為誘答題目(distracter) (郭 生玉,2004) 二、單一正確答案題型選擇題 單一正確答案題型選擇題在選擇題題型中,是最簡單的一種。其意義為受試 者要從幾個選項中,選出一個正確的答案。 三、選擇題優點 根據學者(何世欽,2001;張維倩,2001;梁琬菁,2001;郭生玉,2001; 王文中,2005;王前龍等譯,2006)提出選擇題的優點,較重要的有下列幾項: (一)可以讓計分更客觀、容易、迅速且正確。 (二)選擇題的題意比是非題、簡答題或填充題清楚明確,不會造成混淆。。 (三)選擇題的誘答選目可以提供教學檢視。 (四)信度會比是非題高,受猜測因素的影響比較小。 (五)從選項中找出最合適的答案時,可以比是非題和簡答題更能激發學生評估 方案的能力。 (六)比是非題更難避免反應心向(response set) ,也就是學生在不知道答案時, 不會傾向於喜愛某一特定的選目。 (七)作答時間短,可獲得課程教材料的廣泛取樣。. 肆、多點計分 S-P 表分析法 多點計分 S-P 表分析法是依據 1970 年代日本學者佐藤博隆(Takahiro Sato) 提出之 S-P 表分析法和俞克斌、許天維(2012)採用曼哈頓距離量尺的概念提 出新的分析理論,來補足只依據答對得 1 分答錯得 0 分的情況。依據不同的題 型配與不同的配分,來檢視學生的學習情況以及教師試題的命題檢視與修正。. 5.

(16) 伍、雙向細目表 「雙向細目表」是編製成就測驗必須完成的一項工作;編製成就測驗的方式 首先要界定學習目標,其次列出教材大綱,再編製雙向細目表,最後根據雙向細 目表來編製題目。位於雙向細目表的左邊的直欄通常是列出教材內容,通常是以 單元內容做區分;位於雙向細目表上的橫欄通常是列出認知領域,認知領域分為 六個目標:記憶、理解、應用、分析、評鑑、創造。在縱橫交叉的地方,就形成 許多細格,在細格內寫上每種教材在各認知領域出題的分配比率或題數,在這些 細格內的比率或題數,主要根據於每項學習結果和每項教材領域在整個學習活動 中之比重。 我們編製雙向細目表的目的,在命題前在於發現學習目標與課程內容的關 係,並訂出各不同領域之相對比重,以確保測驗試題能測量到我們所預期之學習 目標,且兼顧教材的代表性樣本,避免整份試題只偏向某一教材領域或某一認知 層次。. 6.

(17) 第二章 文獻探討 本研究旨在討論國小四年級對於自然領域中,不同能力水準學生表現之分 析。設計出以評量試題為工具,提供教師在編製測驗時,判斷試題優劣的依據, 經由 S-P 表的分析結果,協助教師瞭解學生的學習情況。本章首先探討教學評 量的功能,然後闡述教學評量與補強教學的關係,接著敘述 S-P 表的分析理論; 最後闡明命題的原則,以期發展出更具鑑別度之優良試題。 因此在本章將就文獻方面探討如何將 S-P 表結合補強教學與診斷評量。希望 透過這些主題的探究,歸納出「多點計分 S-P 表分析之應用以國小自然科為例」 雛形的設計重點。. 第一節 教學評量 評量同時具備許多種不同的功能,例如可以提供教學決定、行政決定、及諮 商與輔導決定方面的用途(郭玉生,1990;陳英豪、吳裕益,1991;余民寧,1997; Gronlund,1993)。評量在教學上的用途可說是最被廣泛使用,主要的用途可從其 在教學評量、診斷學習、及幫助學習三方面來探討(余民寧,1997;郭生玉,1994): (一)有關教學評量的用途 1.教學評量可用來協助教師瞭解學生所具備之起點行為。 2.教學評量可用來診斷學生學習障礙及了解教師教學上的缺失。 3.教學評量可用來引發學生學習的動機。 4.教學評量可用來評定學生的學習成果及是否有達到教師預期的學習目標。 (二)有關診斷學習的用途 教育測驗在經過試題分析與測驗分析之後,可以提供作為診斷學生學習、改 進命題技巧、及實施補強教學之參考。 1.可用來診斷學生學習,了解學習類型,提供教師實施補強教學的參考。. 7.

(18) 2.透過試題分析的訊息,可改進命題的技巧,確保編製的試題是優良試題。 3.診斷學習所獲得的訊息可作為補強教學之依據,達到因材施教的目的。 (三)幫助學習的用途 教學評量除了可以幫助教師達成上述兩種用途外,還可以在許多方面幫助個 別學生的學習成長。茲分述如下: 1.良好的測驗可以激勵學生的學習動機,達成教學目標。 2.測驗可以用來增進學生的學習記憶和學習遷移,也可以導引學生的注意 力在這些較複雜、較進階的學習上。 3.教育測驗可以提供回饋訊息,讓學生洞悉自己在學習上的優缺點,並促 進學生的自我評量。選擇自已的最佳學習決策。 本研究亦希望借重測驗的結果來幫助教師判斷出學生個別的學習狀況,以便 進行適性的補強教學輔導策略。. 第二節 補強教學 壹、補強教學的重要性 補強教學具有事後幫助的功能,大多是對未達成教學目標者,或學習有困難 者幫助他再學習,讓教師可以針對學生不足的地方,提供更進一步的指導,而補 強教學的實施,可以幫助學生克服學習上的困難,達到有效的學習目標,並減少 學生學習無力感、挫敗感,增進學生的學習成就及繼續學習的信心,進一步增進 學童的自我概念,實現不放棄每一個學生的教育理想,本研究提供學生注意係 數,讓教學者可以根據學生類型來進行有效率的補強教學,採用有效的補強教學 輔導策略。. 貳、補強教學的模式. 8.

(19) 補強教學的模式,通常是採用「評量─教學─再評量」的階段歷程模式,所以 在進行補強教學前須先評量學生的學業成就,判斷學生低成就或低落的原因,接 著採取適當的額外教學,教學之後再進行評量,以了解學生的學業成就表現,如 果補強教學的結果成效不佳,仍須遵循前述步驟,重新評量,直到學生學習成就 可以達到教學目標為止。為了便於補強教學的實施,大部分都採用資源教室的方 式實施,安排學生在教室上課,接受老師的指導,隨著科技的進步,補強教學已 經不侷限於傳統資源教室,也可以採用電腦輔助教學的方式進行。 基本上,補 強教學與一般人認為的補習教育不同,補強教學以特定學生為對象,旨在增強其 學習能力不足為目的;補習班是以全民為對象,旨在提升國民生活知識和教育程 度為目的,所以補習班不能視為補強教學之機構。一般國內外實施補強教學的機 構,都是在學校實施為主。 國內教改訴求──「帶好每一位學生」與美國教改訴 求──「不讓每一位學生落後」(No Child Left Behind),都相當重視每位學生學習 的表現,而要提升每位學生的學業表現,補強教學應該是相當有效的方法。本研 究將利用 S-P 表的學生注意係數,來提供教師明確的補強教學策略。. 第三節 S-P 表診斷分析 在傳統的試題分析中,只分析每個試題的難度與鑑別度,而測驗分析也僅止 於分析整個測驗的信度跟效度,並未將學生的作答反應資料進行分析,測驗的試 題應該不僅止於探討是否屬於優良的試題而已,也需要提供教師如何利用施測後 的資料分析來了解學生的問題所在,本節由日本學者佐藤隆博(Takahiro Sato)於 1970 年所提出的「學生問題表」的分析方法(Sato, 1969)來探討,可以幫助教師了 解學生在學習上的個別差異,讓教師能針對不同類型的學生提出各種的補強教學 或輔導措施,以便提高學生之學習動機,增加學習的信心與興趣,讓教學的進行 可以更有效率。本節將針對此種分析方法的「學生注意係數」及「學生診斷分析」 之理論做說明。. 9.

(20) 一、注意係數 注意係數(caution index)是 S-P 表針對每一個學生與試題所分別使用的係數, 可分為學生注意係數(caution index for students,簡稱 CS)與問題注意係數(caution index for items,簡稱 CP)兩種。主要用來作為判斷學生或試題在反應組型中是否 有異常現象的指標,教師可利用這些指標來了解學生或試題的狀況與問題所在, 並利用電腦的程式幫助我們算出注意係數。當注意係數越大時,表示反應組型為 不尋常或有異常之情況較嚴重;反之,注意係數越小,則表示不尋常之現象較不 嚴重,在容許的誤差範圍之內。 二、學生的診斷分析. A. A’. 學習優良. 學. 學習能力優良. 穩定性高. 生. 但粗心大意,穩定性稍低. 得 分 100﹪ B 百 學習尚稱穩定, 分 比. B’ 偶爾粗心,準備不充分,. 需要再用功一點. 需要多加努力. C. C’. 學力不足,學習不夠充分,. 學習極不穩定,具有隨興的讀書. 需要更加努力. 習慣,對考試內容沒有充分準備. 75﹪. 50﹪. 0.50. 0. 1.00. 學生注意係數 圖 2-1. 學生診斷分析圖. 根據 S-P 表分析的結果,我們可將學生分類。使用學生的注意係數當橫軸,. 10.

(21) 並以學生的得分百分比當縱軸,然後根據每名學生的這兩項數據值,將每名學生 標示在如圖 2-1 所示的座標圖裡。這個座標圖就是學生診斷分析圖;我們將藉助 它來說明如何利用測驗分析的訊息,幫助判斷學生的學習狀況及學習類型。(余 民寧,2002) 如圖 2-1 所示的意思是:學生診斷分析圖將學生的學習狀況分成六種不同類 型,各如圖 2-1 中所示的六個區域(即:A、A’、B、B’、C 和 C’)及其內涵所 表示的涵義。這六個區域的涵義分別代表六種不同的學習類型,學生診斷分析圖 可以提供教師判斷個別學生的學習狀況,明瞭他們的學習狀況,以便作為個別輔 導或進行補強教學的參考依據,在余民寧(2002)一書中對他們的代表特性的說 明如下: (一)學習穩定型學生 若資料分析結果,學生的特徵落入圖中 A 區者,即表示該學生在學習狀況上 優良且穩定,這類學生多半是班上程度較好、學習成就較高、考試表現亦屬穩定、 正常的學生。針對此類學生的補強教學方式,教師只要予以持續的鼓勵或勉勵, 即可維持他們持續的穩定學習狀況。 (二)粗心大意型學生 若資料分析結果,學生的特徵落入 A’區者,即表示該學生雖然是班上程度優 良的學生,但是考試常粗心大意,甚或經常急於交卷,造成許多不經意的錯誤, 值得教師或研究者注意。由於粗心是他們的重要特徵,因此,很容易發現他們即 使在很簡單的試題上亦有可能粗心而答錯。針對此類學生的補強教學方式,教師 只要從旁提醒他們有如此的毛病並且叮嚀他們在作答後要仔細檢查答案才交 卷,以矯正其不細心的習慣,便可以促使他們的學習趨於穩定狀況。 (三)努力不足型學生 若資料分析結果,學生的特徵落入 B 區者,即表示該學生的學習狀況還算良 好、穩定,這類學生不像 A 區者表現那麼好,努力程度較不足,需要再多用功一 點。這類型學生多半是屬於班上中上程度的學生,由於他們的學習尚稱穩定,可. 11.

(22) 能只是因為努力用功不夠,而致考試成績不如 A 區學生理想。針對此類學生的補 強教學方式,教師只要提示他們方向,多給予鼓勵,便可激勵其學習成果日益進 展。 (四)缺乏充分學習型學生 若資料分析結果,學生的特徵落入 B’區者,即表示該學生的學習準備不夠充 分,偶爾也會粗心犯錯,學習漸不太穩定,努力也比較不夠,值得教師或研究者 的注意。這類型學生兼具偶爾粗心大意與努力用功不夠的兩項特徵,作答反應也 逐漸呈現不穩定的情況。針對此類學生的補強教學方式,教師需要提醒他們仔細 留意作答結果,仔細檢查後才交卷;同時鼓勵他們多加努力用功,多花一點時間 準備考試,這些學生未來也可以逐漸達到穩定的學習狀況。 (五)學力不足型學生 若資料分析結果,學生的特徵落入 C 區者,即表示該學生的基本能力不足, 學習不夠充分,努力用功程度亦不足,課業跟不上其他同學而造成學習成就偏 低。這類型學生的基本問題,在於他們過去沒有奠定良好的學習基礎,因此在後 續較深入學問的學習上會比較吃力,需要比其他學生加倍用功努力才能趕上。針 對此類學生的補強教學方式,是需要給這類學生更充分的時間去學習或準備,花 費更多時間去輔導其不足的基本能力,或多給這類學生一些補充教材的練習機 會,經過協助後這類學生的狀況才可能逐漸改善。 (六)學習異常型學生 若資料分析結果,學生的特徵落入 C’區者,則表示該學生的學習狀況極不穩 定,平時沒有養成良好的讀書習慣,對考試內容沒有準備,考試成績時好時壞, 作答的反應可能有作弊、猜題、或亂答之嫌,需要教師特別注意。針對此類學生 的補強教學方式,宜針對他們進行個別教學、然後進行個別心理與學業輔導診斷 後,決定是否需要重新教學、補強學生不足的基本學力、或接受更專業的輔導治 療。. 12.

(23) 三、試題注意係數 根據 S-P 表分析出來的結果,我們可以用來以作為診斷試題功能之用。其 作法如下:以試題的注意係數當橫軸,而以答對試題的學生人數百分比(即答對率) 當縱軸,根據每道試題的這兩項數據值,將每道試題標示在如圖 2-2 所示的座標 圖裡。這個座標圖,即是試題診斷分析圖;我們可以使用它來說明如何利用測驗 分析的訊息,幫助診斷試題的優劣。. 100%. A. A'. 試題優良可區別低成就 試題含異質成分須局部 者與他人的不同,試題難 修正,試題難度低且差. 試 題 度低且差異性小 答 50% 對 B 率. 異性大,應檢討命題. B'. 試題難度高,適合區. 試題拙劣且含相當異. 別出高成就者. 質成分,須加以修改. 0% 0.5. 試題注意係數 圖 2-2 試題診斷分析圖. 13. 1.0.

(24) 四、試題診斷分析 試題診斷分析圖可以將試題的分類成四種四,各如圖 2-2 中所示的四個區域 (即: A 、A'、B、和 B')及其所表示的涵義。如果我們根據 S-P 表的分析結果, 將每道試題畫在此一診斷圖上,教師及研究者即可據以判斷每道試題的編製品 質,並配合試題分析的結果,檢視每道試題是否為優良試題。這四種試題類型及 其屬性涵義,可以分別說明如下: (一)優良型試題 試題的數據是落入 A 區者,即表示該試題是屬於相當的適當,適合學生的測 驗程度。 (二)異質型試題 試題的數據是落入 A,區者,即表示試題含肯異質成分在內,值得教師與研 究者注意,但由於其答對率尚高,試題尚無太大嚴重問題存在,頂多只需要稍作 局部的修改即可。 (三)困難型試題 試題的數據是落入 B 區者,即表示該試題是屬於高難度的試題 。 (四)拙劣型試題 試題的數據是落入 B'區者,即表示該試題需要予以刪除不用或重新編擬。通 常,這類試題的答對率偏低,且注意係數亦過大,表示它含有相當多的異質成分 在內,或是試題題意含糊不清,也許是因為違反命題的編製原則,造成試題題意 含糊不清,教師及研究者應該特別予以修改。. 第四節 命題技巧與規範 編擬試題是測驗編製的主要核心,一份測驗是否具有良好的特徵,例如:信 度、效度、難易適中、高鑑別度等,試題編製品質的好壞占了絕大部分。編製試 題時,除了應遵守命題的一般原則外,也應該遵守特殊題型的命題原則內容,如. 14.

(25) 此才能編製出品質優良的試題,以下就命題技巧方面來個別討論(余民寧,2002):. 壹、測驗編製計劃 一個完整的測驗編製計劃可以涵蓋整個教學歷程,它不但可以提供授課教師 遵照教學目標進行教學的依據,也可以做為測驗試題的參考,來達到評量教學所 預期的成果。一份優良的成就測驗編製計劃應該包含下列這三大項目: 一、 先確立測驗的目的和目標 不同的測驗會有不同的特性和編製過程。一般而言,測驗可以分為四類: (一) 形成性測驗(formative test)。 用來瞭解在教師的教學過程中,學生的學習情形,是一種在師生間進行 即時性教學回饋的方式。 (二) 總結性測驗(summative test)。 用來評量教師教學完成時,學生的成就表現,以確定學生的學習是否臻 於精熟,或達到教師所預期的教學目標。 (三) 診斷性測驗(diagnostic test)。 用來診斷學生在學習過程中所遭遇的學習困難或產生的迷思概念,是補 強教學的主要依據。 (四) 預備性測驗(placement test)。 用來評量學生的起點行為,以便將學生安置在適當的教學計畫中。 二、設計雙向細目表 依據測驗的目的與教學的目標需求,用教學目標為當作縱軸,以教學內容或 單元為橫軸,畫出一個二向度的分類表,將平均分配好試題比重或題數在表中的 每個細目裡,並盡量使試題的取材能夠充分涵蓋所謂評量的教學目標和教材內容 的範圍,來做為編製整份成就測驗試題的依據,這樣一個二向度分類表就是雙向 細目表(two-way specification table)。一份完整的雙向細目表,需要事先明確條列. 15.

(26) 教學目標和教材內容,來建構一個具有兩個向度的列表。其中,認知教學目標在 1999 年由 Bloom 的學生 Lorin Anderson 和同僚出版了 Bloom 分類法的修訂 版,考慮到影響教學的更廣泛因素,經過修訂的分類法試圖修正原本的分類方 式,修訂後分類法中的「認知歷程」向度,與 Bloom 原分類法一樣有六種技能, 從最簡單到最複雜依序為:記憶、理解、應用、分析、評鑑、創造。 (一)記憶(remember):主要是長期記憶中儲存的相關資訊。 (二)理解(understand):從教育材料找出涵義的能力。 (三)應用(apply):在類似情境或新情境中,可以實際運用的能力。 (四)分析(analyze):將一個概念拆解成許多部分,並說明每部分與整體之 關係,學生透過辨別、組織和歸納進行分析。 (五)評鑑(evaluate):原先 Bloom 分類法是歸納在最高的一層,經過修訂 後成為第五層,包括檢查和批判兩種技能。 (六)創造(create) :原分類法中沒有,在新的分類中則是最高的一層,這項 技能組合已知的知識片段來產生新的事物,完成創造任務的技巧包括產 生、計畫和製作。 與 1956 年版本不同的地方是,新版本做了「what(有關什麼)」和「how(如 何解決)」的區分。「知道什麼」屬於知識向度,知識向度主要分為四大類:事實 知識、概念知識、程序知識和後設認知知識。事實知識包括獨立的片段資訊,如 辭彙的定義、有關特定細節的知識等。概念知識由資訊系統構成,如分類和類別 的資訊。程序知識包括運算法則、學科相關技能與規則、技術、方法,以及何時 運用的知識。後設認知知識是有關思考的知識,以及如何有效操控思考過程的資 訊。 三、選擇測驗的題型及題數 試題是構成測驗的主要元素之一,試題的好壞自然會影響整份測驗的品質, 而且不同的測驗類型各有其獨特的編製原則與技巧,因此事先決定所要編製成就. 16.

(27) 測驗的試題類型,才能順利編製所期望的優良試題。試題類型很多,常見的題型 主要分為兩大類:客觀測驗(objective test)與論文測驗(essay)。客觀測驗可細分為 選擇題型、補充題型、選擇題型包括是非題、配合題、選擇題等三種,補充題型 包括填充題、簡答題等兩種。論文測驗則包括申論題、限制反應題等兩類。計分 較為客觀的是選擇題,而且考試範圍可涵蓋較廣泛,並可以測驗到多元知識。所 以大部分的考試還是以選擇題為主要採用題型。而題數的多寡要考慮到很多因 素,例如測驗時間、試題難度或是學生能力等。 四、編擬測驗試題 編擬試題不但要講求命題技巧、試題難度,而且必須兼顧雙向細目表。根 據雙向細目表中每個單元的題數與配分來作為命題依據,而且試題的難易度不 可偏離測驗目的與教學目標,試題的編寫也不應該違反命題原則。 五、審查與修改測驗試題 針對題目的性質是否符合測量的內容進行評估,除了審查是否符合教學目 標、教學內容等,此外需檢查試題的格式、問題敘述的品質、其他可能影響因素 以及試題是否能夠適當反應試題所要測量的教學目標。一般而言,為了解試題的 是否合適,可以利用檢核表來審查試題公平性、試題格式以及是否符合命題原則 等,也可以藉由專家意見來審視題目的優劣。 六、編輯測驗試題 測驗試題的編排、語意的完整性與明確性,將影響學生作答的效率與評量 結果,命題者應審慎編輯測驗試題,來提高測驗的信度與效度。難度方面,大 多以難易適中的試題為主,但也要包含少許簡單和困難的試題,讓不同能力程 度的學生作答有所差異,來提升鑑別度。試題的排列方式可以選擇下列三種進 行編輯: (一)將簡單試題排列在整份試卷前面,較困難試題排列在後面。 (二)將同類型試題編排在一起,同一類型中再依照試題難易順序來排列。. 17.

(28) (三)依照認知目標的六個層次順序來排列試題或是依所需要測量的能力 指標來排列試題。. 貳、選擇題的命題技巧 選擇題是當今測驗題型中,被認為最基本、使用最廣、影響最深遠的一種, 選擇型試題(selection-type item) ,尤其是配合電腦的使用,使得閱卷、計分、試 題與測驗分析結果均相當快速與正確,並且容易蒐集分析資料來了解學生作答的 行為,因此,受到大眾的喜愛與採用。選擇題是在每個問題的後面列舉幾個答案, 由學生將所需要的答案選擇出其由兩部分構成:一為題幹(Stern),另一為選項 (Option)。題幹的敘述方法主要有兩種,一是採用直接問句,另一是採用不完全 的敘述句。以下先說明選擇題的命題原則(余民寧,2002): 一個有效的選擇題,不僅僅能夠呈現重要的問題來詢問學生,更能夠讓學生 清楚了解該問題的意思是什麼。因此它可以讓已達精熟學習的學生答對,可以使 尚未達到精熟學習的學生答錯,以發揮選擇題試題特有的「多選一」區辨功能。 一、選擇題的教重要的命題原則有下列幾點: (一) 試題設計應該要能夠測量到重要學習成果。 (二) 每道試題選項數目應保持一致。 (三) 題幹敘述應該清楚表達題意,避免過短或過長。 (四) 選項的敘述宜力求簡短,必要或相同的敘述字詞應放在題幹中。 (五) 盡量在題幹中以肯定句的敘述問題。 (六) 試題必須確定只能有一個清楚表達的正確答案。 (七) 錯誤選項應盡量避免使用「以上皆非」和「以上皆是」。 二、選擇題的命題原則有: 選擇題試題可以測量出各種不同程度的學習成果,如:記憶、理解、應用、 分析、評鑑、創造等認知能力,同時也可以適用於各種不同學科範疇的教材內容,. 18.

(29) 以作為測量認知能力的一種測驗。選擇題主要具備有下列幾項優點: (一)比起是非題或填充題,選擇題題意結構串較清楚明確。 (二)信度比是非題高,猜測因素減少許多。 (三)配合電腦閱卷,可以迅速、正確的計分。 (四)試題難度可藉由調整選項的同質性而來控制。 但是,選擇題亦有下列幾項使用上與編製上的限制: (一)選擇題命題較不容易,尤其是具備有誘答選項之設計。 (二)較難測驗到組織與表達的能力。 (三)命題技巧不良時,容易使題目只測量到知識的記憶等低層次能力。 (四)測量的能力限於文字操作。所以數學與自然科學等實際解決問題的能 力,較不適合於採用選擇題來命題。. 參、多點計分 傳統的認知測驗中主要以二點計分為主,二點計分試題順序理論( ordering theory) ,最早是由 Airasian & Bart(1973)提出,又稱為 OT 理論,竹谷誠(1980) 考慮兼顧相依程度之試題順序,提出二點計分試題關聯結構理論(item relational structure),簡稱 IRS 理論。二點計分是指受試者的作答反應只有對或錯二種情 況。常見的測驗題型包含單選題、是非題都是屬於二點計分的題型。 余民寧(2009)認為多點計分往往都是適用在心理測驗資料的分析,因心理測 驗大多是測量受試者的某種潛在特質 (如:人格、態度、性向等),其作答並沒有 所謂的「標準答案」 ,所以受試者沒有必要進行猜題,因此,在此種作答情形下, 三參數對數型模式中的 c 參數是不存在的,所以此類模型是根據一參數對數型 模式所發展而來,可作為分析李克特量表所屬的各種測量工具,可以改進社會科 學研究的測量精確度,對於社會、行為科學及教育研究的量化方法學而言,具有 著實的貢獻。. 19.

(30) 劉湘川(2007)提出多點計分有助於異質試題的分析比較,透過多點計分規 格化的轉換,具有二點計分考慮到作答者的反應程度,更可以呈現試題難易程度 的分析比較,解決了在二點計分底下無法呈現試題難易區別的問題。. 20.

(31) 第三章 研究設計 本研究主要透過多點計分 S-P 表分析法,分析研究者所任職臺中市某國民小學在 自然科目中四年級學生的學習情況,根據分析結果幫助教師判斷學生的學習類型,進而 瞭解學生的學習狀況與個別差異,協助並即時補強學生之學習落差,改善學生的學習態 度,對自我價值的肯定,並增進教師專業的發展。本章首先介紹此研究的方法,再者描 述研究對象,接著探討研究所使用的工具,最後加以介紹資料蒐集與處理方式,內容分 述如下:. 第一節 研究步驟 本研究是利用 S-P 表分析法的結果探討學生需要補強教學的概念並探討試題品質進 而得到客觀分數。為了達成此一目標,本研究之步驟如圖 3-1 所示. 21.

(32) 形成研究主題並確定研究動機與目的. . 分析不同能力水準四年 級學生在自然領域之表 現,作為教師編製試題、 進行補強教學的參考。. 文獻蒐集並整理分析研討. 教學評量. 補強教學. S-P 表診斷分析. . 命題技巧與規範. 多點計分 S-P 表分析法之應用 -以國小四年級自然科評量為例-. 確定研究方法. . 針對自然科能力指標及 雙向細目表挑選 50 題試 題預試,根據預試難度及 雙向細目表篩選出 30 題 編製成正式題進行施測。. . 透過差異係數及注意係 數做整體性的探討與分 析。. . 分析討論統計資料後進 行結論與建議。. 1. 研究架構建立。 2. 設計試題、預試與修改編製。 3. 實際施測、資料統計。. 資料統計分析與實證結果. 研究結論與建議. 圖 3-1 研究步驟圖. 22. 參閱相關 論文、期 刊與書 籍,將相 關文獻綜 合整埋建 構本研究 的理論基 礎。.

(33) 第二節 研究方法 本研究以自編試題與受測學生為主要研究工具與對象,透過多點計分 S-P 表 分析法,針對國小四年級自然科學習情況加以探討。根據研究動機與目的,本研 究之流程各階段內容如下圖 3-2。首先,蒐集國小四年級下學期自然科第一單元 時間的測量及第二單元水的移動之能力指標;接著,蒐集不同教師編製的試題, 依據雙向細目表篩選蒐集到的試題進行修改與編製,以期能達到優良的試題品 質。為了確認試題的信度與效度,挑選臺中市一所國民小學四個班級進行預試, 預試結束蒐集資料後再次修正整份試題,依據雙向細目表挑出題目並調整難度, 再依循難度進行配分,之後才進行正式施測。正式施測結束後,接著進行數據的 分析,包含學生及試題的注意係數,瞭解施測的結果,以利班級教師理解學生的 學習狀況,依據學生的注意係數,關注學生的後續補強教學部分。. 23.

(34) 蒐集自然科之能力指標. 編製雙向細目表. 收集試題. 審查試題. 預試. 試題修正編寫. 完成正式施測 (以多點計分 S-P 表分析) 學生診斷分析. 試題診斷分析. 圖 3-2 研究流程圖. 24.

(35) 第三節 研究對象. 本研究的樣本選取方式採取立意抽樣,是以臺中市地區某國小四年級學生為 研究範圍。最終施測抽取一個班級為對象,有效樣本為 25 名。. 第四節 研究工具 壹、雙向細目表 雙向細目表是測驗的架構藍圖,如表 3-1 所示,描述測驗中包含的教學內容 以及所應評量到的能力,可依據 Bloom2001 版(鄭圓鈴,2006),認知歷程向度, 從記憶、理解、應用、分析、評鑑與創造等六個層次,以教材內容為橫軸,並以 教學目標為縱軸來編擬試題。為使雙向細目表具有內容效度,特別邀請兩位臺中 教育大學編製測驗教授進行專家審查,再依據雙向細目表的建議題數,聘請三位 資深國小教師進行命題、修題的程序,最後再請測驗專家的教授進行審題,以達 專家內容效度。. 貳、分析軟體 一、分析軟體使用 Excel2010 巨集、SPSS 軟體第 18 版、Matlab,整體說明如下 所述: S-P 表分析法的最大價值在於適用於以班級為單位的少數人資料分析,適合 國小老師了解班級學習成效之用。先利用 SPSS 軟體第 18 版來鑑別試題的信度 後,接著利用 Matlab 計算出數值,再透過 Excel2010 巨集得到 S-P 表,進行繪製 與計算分析。. 25.

(36) 叁、研究資料處理與分析 依據 25 名有效樣本,以多點計分 S-P 表分析法,分析內容如下: 一、利用 SPSS 軟體來進行資料的分析統計 透過 SPSS 軟體來處理受試者的答題資料,分析整份測驗的信度。 二、利用 Matlab 來進行資料的分析統計 透過本套軟體來處理受試者的答題資料,分析整份測驗的差異係數、注 意係數,並判斷試題類型與學生學習類型。 三、利用 Excel2010 巨集軟體來進行資料的分析統計 透過本套軟體處理受試者的答題資料,將 Matlab 所得資料,繪製成 S-P 表。. 第五節 試題編製與施測. 壹、預試步驟 本預試之目的在求施測試題能更趨完善,以利正式施測時能提高數據的參考 價值。並藉此了解參與預試的學生在測試過程中所遭遇的問題,以便修正試題。 預試以臺中市某國小四年級 96 位學生為樣本,預試 50 題試題,預試時間約 30 分鐘。學生預試的結果如下: 96 生答題狀況良好,成績呈現常態分佈,最高分為 100 分,最低分為 48 分。 50 題選擇題中難度高的試題佔 3 題,難易適中的試題占 29 題,難度簡單的試題 占 17 題,1 題有疑義試題直接剔除,不會在正式施測中出現。. 貳、正式施測步驟、樣本與配分方式 施測班級為臺中市某國小四年級某班 25 位學生。正式施測之試題經過預試 後,總共挑出 30 題難易適中的題目來做為正式施測之用,題目類型皆為選擇題, 考試時間為 30 分鐘。難度高的題目配分為 4 分,難度較簡單的配分為 3 分。. 26.

(37) 第四章. 研究結果與討論. 本章目的在說明「多點計分 S-P 表分析法之應用以國小四年級自然科評量為 例」的施測結果與討論,以下依預試結果分析、正式施測結果分析、多點計分 S-P 表分析、試題的注意係數(CP)分析、學生的注意係數(CS)分析、試題差異係數難 度指數以及鑑別度分析等六大節。. 第一節 預試結果分析. 壹、預試結果分析 根據預試之結果可得表4-1浴室試題難度統計表。為了避免施測試題過度簡 易,通過率過高,無法了解學生的迷思概念情形,因此剔除50題預試試題中難度 在0.89以上的試題共十九題(第1、2、3、7、8、12、15、17、18、21、24、27、 32、33、34、46、47、49、50題)以及有疑義的第25題,並將剩下的三十題選擇題 編製成正式施測的試題。. 27.

(38) 表 4-1 預試試題難度統計表. 試題 答錯人數 答對百分比 難度 P 試題 答錯人數 答對百分比 難度 P 1. 3. 96.88%. 0.97. 26. 28. %. 0.71. 2. 4. 95.83%. 0.96. 27. 4. %. 0.96. 3. 9. 90.63%. 0.91. 28. 40. %. 0.58. 4. 12. 87.50%. 0.88. 29. 34. %. 0.65. 5. 52. 94.79%. 0.46. 30. 16. %. 0.83. 6. 12. 92.71%. 0.88. 31. 28. %. 0.71. 7. 5. 57.29%. 0.95. 32. 4. %. 0.96. 8. 7. 79.17%. 0.93. 33. 6. %. 0.94. 9. 41. 81.25%. 0.57. 34. 11. %. 0.89. 10. 20. 93.75%. 0.79. 35. 30. %. 0.69. 11. 18. 73.96%. 0.81. 36. 16. %. 0.83. 12. 6. 80.21%. 0.94. 37. 17. %. 0.82. 13. 25. 88.54%. 0.74. 38. 16. %. 0.83. 14. 19. 86.46%. 0.80. 39. 16. %. 0.83. 15. 11. 95.83%. 0.89. 40. 19. %. 0.80. 16. 13. 91.67%. 0.86. 41. 36. %. 0.63. 17. 4. 85.42%. 0.96. 42. 14. %. 0.85. 18. 8. 53.13%. 0.92. 43. 16. %. 0.83. 19. 14. 94.79%. 0.85. 44. 25. %. 0.74. 20. 45. 79.17%. 0.53. 45. 13. %. 0.86. 21. 5. 84.38%. 0.95. 46. 4. %. 0.96. 22. 20. 91.67%. 0.79. 47. 7. %. 0.93. 23. 15. 71.88%. 0.84. 48. 25. %. 0.74. 24. 8. 70.83%. 0.92. 49. 8. %. 0.92. 25. 27. 95.83%. 0.72. 50. 6. %. 0.94. 28.

(39) 貳、挑選試題與配分 根據預試後數據得到的試題難度與雙向細目表,從 50 題中挑出試題共三十 題,難度低的試題 20 題(第 1、3、5、6、7、8、9、10、12、13、18、21、22、 23、24、25、27、28、29、30 題),配分 3 分;難度高的試題 10 題(第 2、4、11、 14、15、16、17、19、20、26 題),配分 4 分。. 表 4-2 挑選題目修正前雙向細目表(括號內為配分) 教材 內容. 試題 形式. 題號. 高層次思考. 記憶. 理解. 應用. 選擇題. 7(2). 8(2). 9(2). 5(2). 29(2). 小計(分). 14. 16. 18. 10. 58. 選擇題. 4(2). 8(2). 4(2). 5(2). 21(2). 小計(分). 8. 16. 8. 10. 42. 合計. 選擇題. 9(2). 12(2). 3(2). 10(2). 50(2). 共 28 節課. 小計(分). 22. 32. 26. 20. 100. 第一單元. 【分析、評鑑、創作】. 合計. 時間的測量 共 14 節課 第二單元 水的移動 共 14 節課. 29.

(40) 表 4-3 挑選題目修正後雙向細目表(括號內為配分) 教材 內容 第一單元. 試題 題號 形式. 記憶. 理解. 應用. 選擇題(易). 2(3). 1(3). 2(3). 2(3). 第 21、25 題. 第 12 題. 第 13、30 題. 第 10、28 題. 1(4). 2(4). 第 16 題. 第 4、19 題. 7 5(3). 14. 時間的測量 共 14 節課. 選擇題(難). 3(4) 第 11、20、 26 題. 小計(分) 第二單元. 選擇題(易). 水的移動. 18 2(3) 第 5、22 題. 共 14 節課 選擇題(難). 小計(分). 第 1、3、6、 7、8 題. 2(3) 第 18、29 題. 1(4). 2(4). 1(4). 第 14 題. 第 2、15 題. 第 17 題. 23 6(3). 高層次思考 【分析、評鑑、創作】. 合計 7(3). 0. 6(4). 6 4(3). 45. 第 9、23、24、 13(3) 27 題 0. 4(4). 10 4(3). 12 6(3). 55 20(3). 合計. 選擇題(易). 10 4(3). 共 28 節課. 選擇題(難). 4(4). 3(4). 3(4). 0. 10(4). 小計(分). 22. 32. 26. 20. 100. 叁、挑選試題信度分析 對於測驗而言,信度是用來檢視測驗品質優劣的重要指標之一。此測驗在 信度方面採用內部一致性(internal consistency)的方法 利用 SPSS 軟體將試題作 答進行統計分析後,從試題題本的信度分析表4-5中可得知此測驗的 Cronbach’s α 值為0.760,按照表 4-4 之信度參數參考指標顯示,此信度屬於尚可接受的信度 係數(Carmines & Zeller,1979)。顯示此份測驗試題品質為優良,能夠達到測 驗的一致性。. 30.

(41) 表4-4 信度參數參考指標 信度係數值. 意義. 0.90≦α<0.99. 理想. 0.80≦α<0.89. 不錯. 0.70≦α<0.79. 尚可接受. 0.60≦α<0.69. 勉強可接受. α<0.6. 不可接受. 表4-5 試題信度分析 題數. 項目刪除時的信度值. 題數. 項目刪除時的信度值. 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15. 0.761 0.763 0.766 0.760 0.763 0.744 0.752 0.758 0.753 0.765 0.755 0.745 0.744 0.763 0.742. 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30. 0.744 0.746 0.774 0.745 0.755 0.769 0.749 0.763 0.728 0.743 0.736 0.751 0.736 0.768 0.767. 就上表4-5試題刪除後的信度可以發現,原始整份信度為Cronbach’s α 值為 0.760,在刪除試題1、試題2、試題3、試題5、試題10、試題14、試題18、試題21、 試題23、試題29以及試題30後,試題信度有略為的提升,以刪除試題18提升的幅. 31.

(42) 度最多,但提昇的幅度不大,因此不刪除試題以提升整份試題的信度,依然保留 以上試題施測。. 第二節 施測結果分析 據表4-6本研究發現大部分學生的表現都集中在答對22~30題之間,代表整 份自編試題中大都是以中、低難易度值的試題。因此整份試題若要針對中、高程 度的學生進行測驗的話,必須要增加試題的難度。. 表4-6 答對題數人數分布表 答對題數. 人數. 比例. 26~30. 8. 32%. 22~25. 8. 32%. 18~21. 5. 20%. 14~17. 2. 8%. 10~13. 2. 8%. 32.

(43) 8. 6. 人 數4. 2. 0 10. 15. 20. 25. 30. 答對題數. 圖 4-1 答對題數人數分布圖. 據表4-7本研究發現大部分學生的表現都集中在70分以上,不及格的學生有 5人,整份試題中若根據題目難易配分後,數據會有不同的呈現。. 表4-7 分數分布表 分數. 人數. 比例. 90~100. 7. 28%. 80~89. 4. 16%. 70~79. 5. 20%. 60~69. 4. 16%. 0~60. 5. 20%. 33.

(44) 7 6 5 學 生4 人 數 3. 2 1 0 30. 40. 50. 60. 70. 80. 90. 100. 分數. 圖 4-2 分數分布圖. 表 4-8 為此次施測的敘述統計分析,可從表中的標準差與全距看出,班上程 度差異較大,但是由平均分數看出此試題屬於中間偏易的試題,由表 4-10、 4-11 可以看出本次施測與學生月考成績有高度相關性,而智力測驗與此次施測成績無 相關性 表4-8 施測成績敘述統計表 施測人數. 25. 分數全距. 63. 分數最小值. 33. 分數最大值. 96. 平均數. 74.6. 標準差. 16.793. 變異數. 282. 偏態. -0.798. 峰度. 0.145. 34.

(45) 表4-9 施測班級學生成績表 座號. 月考成績. 智力測驗. 施測成績. 1. 96. 47. 92. 2. 84. 42. 62. 3. 90. 34. 71. 4. 57. 88. 42. 5. 96. 47. 96. 6. 92. 99. 93. 7. 97. 84. 90. 8. 78. 84. 65. 9. 51. 10. 33. 10. 92. 79. 92. 11. 93. 98. 92. 12. 88. 83. 79. 13. 82. 83. 69. 14. 95. 88. 80. 15. 99. 95. 72. 16. 98. 99. 86. 17. 94. 91. 93. 18. 88. 97. 66. 19. 86. 84. 55. 20. 96. 73. 83. 21. 100. 95. 83. 22. 72. 88. 56. 23. 90. 93. 79. 24. 73. 68. 59. 25. 87. 82. 77. 35.

(46) 表4-10 施測成績與月考成績相關性檢定表 施測成績. 月考成績. **. 施測成績. 月考成績. 1. Pearson 相關 顯著性 (雙尾) 個數. 25. .872(**) .000 25. Pearson 相關. .872(**). 1. 顯著性 (雙尾) 個數. .000 25. 25. 在顯著水準為0.01時 (雙尾),相關顯著。. 表4-11 施測成績與智力測驗相關性檢定表 施測成績. 智力測驗. 施測成績. 智力測驗. 1. Pearson 相關 顯著性 (雙尾) 個數. 25. .325 .113 25. Pearson 相關. .325. 1. 顯著性 (雙尾). .113. 個數. 25. 36. 25.

(47) 第三節 多點計分 S-P 表分析 壹、多點計分 S-P 表圖形 S-P 表圖形中的 S 曲線與 P 曲線,試題平均答對率平均在 75%以上,因 常態編班,可以知道學生學習的差異情形差異性不會太大,紅色虛線是 S 曲線, 藍色實線是 P 曲線,如下圖。. 圖 4-3 S-P 曲線圖 (紅粗虛線為 S 曲線、藍粗虛線為 P 曲線). 37.

(48) 第四節. 試題的注意係數(CP)分布分析. 根據試題的注意係數與各題答對人數百分比,將試題的屬性分類為四種類 型: A(優良試題) 、 A’(異質試題) 、 B(困難試題) 、 B’(拙劣試題) 。橫軸 以試題注意係數 0.5 為試題診斷的分界;縱軸以試題答對人數百分比 50%為分 界,下列圖表根據學生的作答反應加以分析。. 表 4-12 試題診斷分析表 題號. 試題注意係數. 答對學生數百分比. 判定類別. 題號. 試題注意係數. 答對學生數百分比. 判定類別. 1. 0.21. 0.80. A. 16. 0.47. 0.80. A. 2. 0.59*. 0.64. A'. 17. 0.72*. 0.68. A'. 3. 0.18. 0.80. A. 18. 0.39. 0.88. A. 4. 0.68*. 0.56. A'. 19. 0.29. 0.72. A'. 5. 0.90**. 0.92. A'. 20. 0.40. 0.92. A. 6. 1.03**. 0.92. A'. 21. 0.76**. 0.72. A'. 7. 0.31. 0.92. A. 22. 0.30. 0.84. A. 8. 0.43. 0.60. A. 23. 0.53*. 0.76. A'. 9. 0.55*. 0.80. A'. 24. 0.57*. 0.84. A'. 10. 0.00. 0.96. A. 25. 0.31. 0.64. B. 11. 0.66*. 0.44. B'. 26. 0.96**. 0.68. A'. 12. 0.42. 0.84. A. 27. 0.57*. 0.88. A'. 13. 0.32. 0.68. A. 28. 0.21. 0.64. A. 14. 0.22. 0.60. A. 29. 0.69*. 0.84. A'. 15. 0.10. 0.64. A. 30. 0.64*. 0.68. A'. 38.

(49) 圖 4-4 試題診斷分析圖. 39.

(50) 壹、試題分析( *代表正確選項). 試題編號 11 拙劣型試題 通過率: 0.44 難度: 0.3125 鑑別度: 0.1250 ( )11.下列哪一項不是中國古代人用來描述時間的單位? (1)一秒鐘. (2)一盏茶. (3)一甲子. (4)一頓飯 【時間的測量 記憶】. 選項. (1)*. (2). (3). (4). 選項率. 0.44. 0.16. 0.08. 0.32. 高分組. 0.12. 0.08. 0.04. 0.08. 低分組. 0.12. 0. 0.04. 0.2. 試題解析: 1. 因有多位學習穩定型的學生答錯,才導致試題異質。 2. 通過率與鑑別度都很低。. 分析結果: 由於題幹相當短,且選項都是很抽象的概念,導致學生混淆。. 建議: 修改此題題幹描述,改以生活化的實例敘述。. 40.

(51) 試題編號 6 異質型試題 通過率:0.9200 (. 難度: 1.0000. 鑑別度: 0.0000. )6.利用哪一種現象或原理可以檢查桌子平不平? (1)毛細現象 (2)蒸發現象 (3)虹吸現象. (4)連通管原理 【水的移動 理解】. 選項. (1). (2). (3). (4)*. 選項率. 0. 0. 0.08. 0.92. 高分組. 0. 0. 0. 0.92. 低分組. 0. 0. 0. 0. 試題解析: 1.選項 (1)、(2) 因不具誘答性,導致鑑別度太低。 2.通過率極高,難度非常簡易,鑑別度極低。. 分析結果: 若要保留建議修改選項為 (1)利用毛細現象觀察杯子邊緣的水量高度 (2)利用蒸發現象用蒸發水量的多寡來檢查 (3)利用虹吸現象用觀測水上升高度來檢查 (4)利用連通管原理觀察兩邊水量是否同高。. 建議: 雖為異質型試題,但連通管為首次出現之專有名詞,且此題結合水平知識的概 念,教師可由作答反應得知多數學生皆已習得連通管原理的知識,因此予以保留。. 41.

(52) 試題編號 21 異質型試題 通過率: 0.7200 (. 難度: 0.7500. 鑑別度:0.0000. )21.「手電筒、電子錶、身高器、指南針、線香、沙漏」以上物品中,具有計 時功能的有幾項?. (1) 2. (2) 3. (3) 4 (4) 5 【水的移動 高層次思考】. 選項. (1). (2)*. (3). (4). 選項率. 0.04. 0.76. 0.2. 0. 高分組. 0. 0.24. 0. 0. 低分組. 0. 0.24. 0.08. 0. 試題解析: 1.題幹中物品皆為生活中常見物品,且功能明確,所以不具誘答性導致鑑別度低。 2.通過率高,難度為容易,鑑別度極低。. 分析結果: 此題題幹的各項物品皆為生活常見用品,學生擁有充足的形體概念及生活上的運 用經驗,因此儘管物品數量繁多,干擾性不大。. 建議: 雖為異質型試題,但此題物品的呈現多元化,能結合生活經驗進行學習,雖鑑別 度低,仍可保留該試題。. 42.

(53) 第五節 學生的注意係數(CS)分布分析 在學生注意係數分析圖表中將學生分為六大類: (A)學習穩定型、 (A') 粗心大意型、 (B)努力不足型、 (B')缺乏充分學習型、 (C)學力不足型和(C') 學習異常型。 表 4-13 學生診斷分析表 座號. 答對率. 學生注意係數. 判定類別. 1. 93.33. 0.71*. A'. 2. 63.33. 0.56*. B'. 3. 73.33. 0.47. B. 4. 43.33. 0.44. C. 5. 96.67. 0.76**. A'. 6. 93.33. 0.16. A. 7. 90.00. 0.24. A. 8. 66.67. 0.87**. B'. 9. 33.33. 0.64*. C'. 10. 93.33. 0.24. A. 11. 93.33. 0.39. A. 12. 80.00. 0.53*. A'. 13. 70.00. 0.83**. B'. 14. 80.00. 0.61*. A'. 15. 73.33. 0.19. B. 16. 86.67. 0.34. A. 17. 93.33. 0.31. A. 18. 66.67. 0.70*. B'. 19. 56.67. 0.15. B. 20. 83.33. 0.09. A. 21. 83.33. 1.07**. A'. 22. 56.67. 0.30. B. 23. 80.00. 0.73*. A'. 24. 60.00. 0.84**. B'. 25. 76.67. 1.00**. A'. 43.

(54) 圖 4-5 學生診斷分析圖. 44.

(55) 表 4-14 學生診斷分析建議表 診斷類型. 學生座號. 人數. 診斷建議. A 學習穩定型: 學 6 號 7 號 10 號 11 習良好、穩定性 號 12 號 16 號 17 高、學習成就較 高。 號 20 號. 8人. 建議老師繼續鼓勵 學生,讓學生維持此 學習態度。. A' 粗心大意型: 穩 1 號 5 號 12 號 13 定性較低、能力 號 14 號 21 號 23 好,但考試卻易因 號 25 號 粗心大意、不細心 造成錯誤。. 8人. 建議在學生寫試卷 時,能提醒學生多加 注意,避免粗心造成 不必要的錯誤. B 努力不足型: 學 習尚稱穩定良 好, 需要再用功一 點. 3 號 15 號 19 號 22 號. 4人. 建議老師平時能多 給予鼓勵,如口頭鼓 勵積分制度等,增加 此類學生學習動力。. B '缺乏充分學習 型: 偶而粗心,準 備不 充分需要再努 力。. 2 號 8 號 13 號 18 號 24 號. 5人. 建議老師除平時多 以鼓勵方式督促學 生用心學習以外,在 學生作答時能多提 醒學生檢查試卷,以 免粗心。. 1人. 建議老師可以去了 解學生不懂的迷思 概念,加強課業輔. C 學力不足型: 基 4 號 本能力不足,學 習 不夠充分,學習 成 就偏低。 C' 學習異常型 : 學習極不穩定,具 有隨興的讀書習 慣,對考試的內容 沒有充分準備。. 導, 進行補強教學 9號. 1人. 45. 建議老師可以了解 學生家庭背景,加強 課業與身心輔導, 進行補強教學.

(56) 壹、學生分析. 表 4-15 學生智力測驗組距表 智力測 驗組距 人數. 90-99. 80-89. 70-79. 60-69. 50-59. 40-49. 30-39. 20-29. 8. 9. 2. 1. 0. 3. 1. 0. 10-19 10 以下 1. 0. 表 4-16 學生月考成績組距表 月考成績 組距 人數. 100 分. 90-99 分. 80-89 分. 70-79 分. 60-69 分. 60 分以下. 1. 13. 6. 3. 0. 2. 100 分. 90-99 分. 80-89 分. 70-79 分. 60-69 分. 60 分以下. 0. 7. 4. 5. 4. 5. 表 4-17 學生施測成績測驗組距表 施測成績 組距 人數. 46.

(57) 壹、C 學力不足型: 一、測驗表現: 四號學生在 2012/12/10 的托尼非語文智力測驗得到 88, 在四下第一次成績考查成績(月考與該次施測為相同範圍)為 57 分, 此次施測成績 42 分。 二、數據分析: 智力測驗與成就測驗之表現產生落差。 該生的智力測驗在團體中屬於中上型的表現,然而月考成績在團體中卻表現 出低下的現象,此次的施測成績也非常不理想。 三、平日觀察:該生的學習力深受其家庭背景因素之影響。 (一)家庭背景: 該生家庭支持系統十分薄弱,父母離異,母親在其他城鎮工作,照顧 者為就讀高中的姊姊、不識字的外婆、失明的外公、置身事外的舅媽。 該生在校行為的聯繫對象為姊姊,然而姐姐對該生的約束力有限,也 無法擔起教育之責,許多需要家長協助之事項總是拖延或未完成。 (二)學習態度: 該生平日學習態度不積極,上課不專心,三年級時回家不寫功課,經 常與同儕發生爭執,玩心重。目前參加課後托育班,二個月下來養成 寫功課的習慣,然而許多觀念皆尚不熟練,此現象持續影響學習表現。 四、補強教學策略: 針對家庭功能薄弱部分,與課托班老師密切聯繫,要求每日完成回家功 課,並准許該生可利用下課時間書寫功課,遇疑惑之處可請教老師或同儕,藉此 拉近同儕情誼,並及時給予該生指導。透過每日習寫功課,該生的學習狀態略微 提升,然而課堂上有時仍出現不專心的樣貌,學習態度的改善尚有進步空間。. 47.

(58) 貳、C' 學習異常型 : 一、測驗表現: 九號學生在 2012/12/10 的托尼非語文智力測驗得到 10, 在四下第一次成績考查成績(月考與該次施測為相同範圍)為 51 分, 此次施測成績 33 分。 二、數據分析: 該生的智力測驗在團體中屬於極低的表現,而月考成績在團體中也表現出低 下現象,此次施測成績極度不理想。 三、平日觀察:該生的學習力深受早期童年經驗及家庭背景因素之影響。 (一)童年經驗: 該生母親為外籍配偶,幼年常遭受母親暴力相向,處於恐懼害怕的環 境中,父母在該生幼稚園期間離異,監護權歸父親。父親無主動對該 生解釋母親離家原因,這種沉默的解釋,導致該生安全感匱乏。 (二)家庭背景: 父親無法有效對該生進行管教。父母離異後,該生長期寄宿於大姑 姑和小姑姑家中生活,直到三年級上學期才由父親帶回身邊教養。 父親雖關心該生,但無法堅持原則,易妥協。若該生不聽勸,父親 多以嚴厲責罵方式教育該生,導致該生行為及態度無法獲得導正。 (三)學習態度: 學習意願嚴重低落,課堂中經常發呆放空,字跡潦草且不喜書寫, 只有一對一的個別教學才能讓該生願意學習。是否被陪伴成為影響 該生學習意願的最大主因。 四、補強教學策略: 在家庭方面建議父親在該生出現不良行為時,必須堅持原則,並花時間. 48.

參考文獻

相關文件

Text A.. The activities that follow on p. 14-18 are designed to demonstrate how teachers can use “scaffolding strategies” to support student learning when using print media

• Information on learners’ performance in the learning task is collected throughout the learning and teaching process so as to help teachers design post-task activities

1.8 Teachers should take every opportunity to attend seminars and training courses on special education to get a better understanding of the students’ special needs and

If the students are very bright and if the teachers want to help prepare these students for the English medium in 81, teachers can find out from the 81 curriculum

(a) Classroom level focusing on students’ learning outcomes, in particular, information literacy (IL) and self-directed learning (SDL) as well as changes in teachers’

The Centre for Learning Sciences and Technologies (CLST), The Chinese University of Hong Kong (CUHK) launched the!. EduVenture ® learning system, which has been well received by

Teachers can design short practice tasks to help students focus on one learning target at a time Inferencing task – to help students infer meaning while reading. Skimming task –

• Learn strategies to answer different types of questions.. • Manage the use of time