國外已有大型測驗加入建構反應題型,將建構反應題題型結合電腦化測驗,可 完整記錄學生作答反應,如國家教育進展評量(National Assessment of Educational Progress, NAEP)、國際學生評量(The Programme for International Student Assessment, PISA)及國際數理趨勢研究(The Trends in International Mathematics and Science Study, TIMSS),以下簡介三個大型測驗及列舉其建構反應題題型及編碼說明,以 於研究中錯誤類型分析之用。
壹、國家教育進展評量(NAEP)
一、簡介
NAEP是美國行之有年,相當完善且具有代表性的基本學力評量,始自1969 年,
是世界上最卓越的大規模教育評量典範之ㄧ,無論在評量資料或心理計量技術上都 累積了相當豐富的成果和經驗,值得參考與借鏡(盧雪梅,2000)。在美國國會的 立法要求下,NAEP目前是由國家評量指導委員會(National Assessment Governing Board,簡稱NAGB)負責規劃與指導,並由聯邦政府教育部的國家教育統計中心
(National Center for Education Statistics,簡稱NCES)負責執行。評量目的在調查美
國 4、8 和12 年級學生的學習成就,評量他們在地理、閱讀、寫作、數學、科學、
美國歷史、藝術、公民和其他學科,應該知道什麼和能做什麼,並以及時的模式定 期向大眾報告,以協助大眾、決策者及教育專業人士瞭解學生的學習表現(黃琬玲,
2010)。
二、建構反應題題型
下面是NAEP2005的科學建構題題目。題目的意思是說,圖2-3-1為一種連接電池、
三個電線和一個燈泡的方式。請試試看如何使用這些東西來測試一個物品是否為導 體,說說看?
8. The picture shows a way you could hook up a battery, three wires, and a light bulb.
Explain how you could use these things to test an item to see if it is a conductor of electricity.
How could you tell?
圖 圖圖
圖2222----3333----1111 NAEP2005科學建構題題目(取自
http://nces.ed.gov/nationsreportcard/itmrlsx/portal.aspx?questionlist=2005-4S14:8)
三、 計分模式說明
NAEP科學建構題的計分模式見表2-3-1。NAEP依據受試者的回答,將其分類為 全對、部份給分與不正確。回答正確者視為全對,回答若不完整給部分分數,而答 案太過籠統或未說到重點時視為不正確。
表 2-3-1 NAEP 科學建構題的計科學建構題的計科學建構題的計科學建構題的計分模式分模式分模式(分模式((取自(取自取自取自
http://nces.ed.gov/nationsreportcard/itmrlsx/detail.aspx))) ) Score & Description
Student response indicates that each item should be placed in the gap in the circuit/tester and attached to both clips.
The bulb lights up if the item does conduct electricity.
Complete
If the bulb does not light up, the item does not conduct electricity.
Partial Student response indicates that the item should be attached to each clip or says the light bulb lights up if the item conducts electricity.
Unsatisfactory/
Incorrect
Student response places item on circuit in a place other than between the clips, or description is too general,
or student gives unrelated answer.
貳、國際學生評量(PISA)
一、簡介
PISA 是由經濟合作暨發展組織(Organisation for Economic Co-operation and Development, OECD)所委託的計畫,持續且定期的對 15 歲學生的數學、科學、
及閱讀,進行國際性比較研究。此項國際性評量調查每三年舉行一次,每次由數學、
科學、及閱讀三個領域中選定一個主要領域,賦予較多的重要性,另外兩個次領域 則較未深入評量。
PISA2000的主要領域為閱讀,2003為數學,2006為科學,2009又回到閱讀,台 灣於2006年開始,也參與了這項調查計劃。PISA評量的重點在了解個人參與社會活 動的能力,亦即,了解各國即將完成基礎教育的15歲學生,能不能將在學校所學到 的知識與技能應用於進入社會後可能面臨的各種情境及挑戰。PISA並不排除學校基 礎課程的知識與瞭解,但評量想瞭解更廣的概念與技能的獲得,以及這些知識的應 用(黃琬玲,2010)。
二、建構反應題題型
圖2-3-2是PISA2006的科學建構題題目,題目是問說:空氣中硫的氧化物和氮的 氧化物是從哪裡來的?
圖 圖 圖
圖2222----3333----2222 PISA2006科學建構題題目(取自
http://pisa.nutn.edu.tw/%E4%B8%8B%E8%BC%89%E8%B3%87%E6%96%99/06
%20%E6%A8%A3%E6%9C%AC%E8%A9%A6%E9%A1%8C%20(%E5%85%A8 )_Science_ch.pdf)
三、計分模式說明 0(%E5%85%A8)_Science_ch.pdf))))
分數 代碼 作答範例
表2-3-2 PISA科學建構題的計科學建構題的計科學建構題的計分模式與編碼說明科學建構題的計分模式與編碼說明分模式與編碼說明分模式與編碼說明((((續續續續))))
(International Association for the Evaluation of Educational Achievement, 簡稱 IEA)正式成立,並先後於1964年及1970至1971年分別舉辦了第一次國際數學研究
(First International Mathematics Study, 簡稱FIMS)及第一次國際科學研究(First International Science Study, 簡稱FISS)。
此外,在1980至1982年及1984年又舉辦了第二次國際數學研究(Second International Mathematics Study, 簡稱SIMS)及第二次國際科學研究(Second
International Science Study, 簡稱SISS)。至1994至1995年間,IEA為了延續前兩次的 數學與科學的評比研究,特別以綜合的形式舉辨了第三次國際數學與科學教育成就 研究(Third International Mathematics and Science Study, 簡稱TIMSS),並且以數學 及科學的課程為評比的主要依據。為了不希望要等每十年左右才進行一次國際評 比,再加上希望能快一點追蹤學生學業成就的改變,IEA於四年後(即1999年)再進 行了一次評比研究,並稱之為TIMSS-Repeat(簡稱TIMSS-R),而臺灣亦正式參與 了該次的研究計畫。爾後IEA希望能將該評比研究正規化成為每四年舉行一次,遂將 該研究的名稱更改為國際數學與科學教育成就趨勢調查研究(Trends in International
Mathematics and Science Study),簡稱仍維持為TIMSS(譚克平,2009)。
二、 建構反應題題型
TIMSS的科學建構題題目如圖2-3-3所示。題目的意思是說,圖2-3-3中電路的燈 泡不會亮,可能是燈泡壞了,請再給一個可能的原因。
圖 圖 圖
圖2-3-3 TIMSS2007科學建構題題目(取自
http://timss.bc.edu/timss2007/PDF/T07_G4_Released_Items_SCI.zip)
三、 計分模式說明
TIMSS的科學建構題的計分模式與編碼說明如表2-3-3。TIMSS將受試者的回 答,分類為正確的回答、不正確的回答與沒有回答。正確的回答包含指出電池沒有 作用(編碼10),和指出電路不完整(編碼11),不正確的回答包含指出電池方向錯 誤(編碼70),和其他不正確的回答(編碼79),最後是沒有回答(編碼99)。
表 2-3-3 TIMSS 科學建構題的計分模式與編碼說明科學建構題的計分模式與編碼說明科學建構題的計分模式與編碼說明科學建構題的計分模式與編碼說明((((取自取自取自取自
http://timss.bc.edu/timss2007/PDF/T07_G4_Released_Items_SCI.zip))))
以上介紹的三種大型測驗都加入建構題的題型,顯示建構題是一種趨勢,而本 研究也將仿照大型測驗的模式,開發建題的題型,並將其運用在自然科「簡單電路」
上,讓本研究之診斷測驗系統更完備。