第三章 研究方法
第三節 研究工具
本研究的研究對象是針對現行就讀於國小高年級的學生、高年級社會學習領 域教師。研究對象之選擇需考慮下列幾點：
一、 在學生方面，有鑑於受試學生在社會學習領域學習活動中，均以團體教學 為主，無法個別接受研究活動的實驗，故測驗之實施測以團體為受測對象，
以配合完整學習。
二、 在教師方面，每位教師在教學專業智能研究與認知方面存有個別差異，其 參與研究意願相對會影響研究的進行。
三、 在課程方面，受限於測驗時間為六年級上學期第二次定期評量後，測驗範 圍無法涵蓋第三階段的所有能力指標。為適應各種不同版本教材內容，所 以將課程內容進行詳細分析，以核心概念為主，編製適用於不同版本的基 本學力測驗題目，減少誤差。
綜上所述，本研究之研究工具為「九年一貫高年級社會學習領域基本學力訊 息理解選擇試題測驗」及「試題檢核表」。「九年一貫高年級社會學習領域基本 學力訊息理解選擇試題測驗」之重點在於測驗學生在社會領域的能力表現，而非 評量學生對教材的精熟程度。命題範圍以現行國小九年一貫課程的社會學習領域 主題軸內涵能力指標及課程綱要內所建議之階段單元主題為主，並酌量加入日常 生活相關之素材。而「試題檢核表」旨在探討本研究之內容效度。
壹、預試部份
一、編製預試試卷：
本研究依據教育部發行之國民中小學九年一貫綱要之社會學習領域第三階 段之主題軸內涵分段能力指標及單元主題為依據，來進行社會科教學評量之探 討。以能力指標做為預計要達到之學習結果，配合教育部所公佈之中小學成績評 量準則之規定，參照各版本教科書內容，並參酌客觀評量之編製原則，進行測驗 工具之編製。本研究國小高年級社會領域基本學力訊息理解選擇試題測驗共5大 題，每大題各有5小題，總共合計25小題，以了解國小六年級學習階段學童在社 會學習領域之基本學力達成情形，進而分析此測驗能否有效評鑑學童的社會領域 基本學力。茲將此25小題的題號與所測的學力指標的關係詳見表3-1-1。
表 3-3-1 基本學力的學力指標表 題號 分 段 能 力 指 標
基 本 學 力 內 容
1 3-3-1 依自己的觀點，對一組事物建立起分類和階層關係。
1-4.能透過討論，將不同類別的事物建立成階層關係。
2 2-3-3 了解今昔中國、亞洲和世界的主要文化特色。
3-1.能舉例說明傳統中國文化的主要特色。
3
1-3-4 利用地圖、數據、坐標和其它資訊，來描述和解釋地表事象及其 空間組織。
4-2.能利用地圖說出臺灣的經緯度範圍。
4 2-3-3 了解今昔中國、亞洲和世界的主要文化特色。
3-1.能舉例說明傳統中國文化的主要特色。
5 1-3-5 說明人口空間分布的差異及人口遷移的原因和結果。
5-3.能說出人口聚集的地區具有的特徵。
表 3-3-1 基本學力的學力指標表（續 1）
表 3-3-1 基本學力的學力指標表（續 2）
題號 分 段 能 力 指 標 基 本 學 力 內 容
22 1-3-7 說明城鄉之間或區域與區域之間有交互影響和交互倚賴的關係。
7-4.能說出台灣都市和鄉村互動的情形。
23 3-3-5 舉例指出在一段變遷當中，有某項特徵或數值是大體相同的。
5-3.能說明在變遷的過程中，有哪些生活方式不變或大體相同的。
24 1-3-5 說明人口空間分布的差異及人口遷移的原因和結果。
5-2.能比較不同年代的人口分布說出台灣人口分佈的趨勢。
25 5-3-3 了解各種角色的特徵、變遷及角色間的互動關係。
3-2.能舉例說明台灣社會變遷對女性角色變化的影響。
雙向細目表（Two-way specification table）是測驗編製的藍圖和命題的依據。
建立雙向細目表可以幫助命題過程釐清能力層次和學習內容的關係，以確保測驗 能反映教材的內容，並能夠真正評量到預期之學習結果。本研究之訊息理解選擇 試題的基本學力測驗雙向細目表，是仿林世華（2004）依2001年修定布魯姆認知 領域教育目標（Anderson & Krathwohl,2001 ），區分成知識向度（knowledge dimension）和認知歷程向度（congitive process dimension）的兩個主軸，分別說 明各項評量目標。表3-3-2是本研究建置的訊息理解選擇試題題號在雙向細目表 出現的情形。
表 3-3-2 國小高年級社會領域基本學力訊息處理選擇試題雙向細目表 認知歷程向度（Cognitive Process Dimension）
知識向度
記憶 了解 應用 分析 小計 事實知識 4、9 8、10、
15、19 11、20 5 9 概念知識 17、22 2、21 3、18 6、14 8
程序知識 － 7、13 － 23 3
後設認知知識 － 16、25 12、24 1 5
小 計 4 10 6 5 25
本研究編製之測驗，包含六個單元主題內容，選擇之依據是以不同版本之教 材分析後共同呈現的內容作為出題的範圍。社會領域有九大主題軸，本研究選取 其中五個主題軸出題，原因有二：其一是因測驗的時間點關係，部分高年級階段 之主題軸仍未進行教學，因此無法將此一範圍編入測驗中。其二是社會領域是以
「空間-時間-生活」的課程發展順序安排學習的單元，因此本研究編製的測驗較
偏重於空間、時間和日常生活密切相關的主題軸，且部分主題軸的能力指標比較 抽象，在紙筆測驗上出題有困難。從表3-3-3中可發現，本研究與所選取六個單 元主題相關的題數接近，而在主題軸上的分配則偏重於人與空間、人與時間、演 化與不變、生產、分配與消費四個主題軸。
表 3-3-3 國小高年級社會領域基本學力測驗主題軸試題分配表 單元主題
主題軸
前文化臺灣的史 開發史臺灣的 然環境臺灣的自 與產業臺灣經濟 濟活動社會的經 會變遷臺灣的社 題 數 人與空間 3,5 - 11,12,
13 20 - 22,24 8
人與時間 2,4 9 6 - - 4
演化與不變 1 - 15 - - 14,18 23, 5 意義與價值 - - - 0 自我、人際
與群己 - - - 21,25 2 權力、規則
與人權 - - - 0
生產、分配
與消費 - 7,8,10 - - 16,17
19 6
科學技術
與社會 - - - 0
全球關聯 - - - 0 測驗題數 5 4 4 2 3 7 25 註：雙向細目表內之數字為預試試題之題號
訊息理解選擇題型的「題文」到底需多少個字方為合理，若以國民小學六年 級為例，可以考查各版本每個單元小節，儘量與書本字數相符即可。紀俊豪等
（2004）指出訊息理解選擇題型的「題文」需300~700字方為合理。本研究之訊 息理解選擇試題之本文字數如表3-3-4。
表3-3-4 訊息理解選擇題型之題文字數統計表
大題 1 2 3 4 5 平均 字數 585 420 590 515 477 517.4 二、試題檢核表
編製的試題應經過試題檢核的歷程，才能確保必要的品質。本研究中所使用 的試題檢核表係參考范世強（2004）及紀俊豪等（2004）編製之題本考核問卷，
編製草案。爾後，參酌三位擔任社會領域教師之意見加以修正，作為社會學習領 域基本學力測驗訊息選擇試題試題檢核工具（如表3-3-5）。結果以百分比的方 式敘述，並進行百分比同質性考驗，來作為本研究內容效度之一。
表 3-3-5 九年一貫社會學習領域基本學力測驗訊息選擇試題試題檢核表 一、內容檢核表
內容檢核項目 是 否
1.試題內容與社會科課程的評量目標是否一致？
2.試題的敘寫是否合乎社會科課程的能力指標？
3.試題的內容是否合乎社會科課程的代表性？
4.試題的術語或名詞是否以受試者的社會科學習領域為主？
5.選用的短文、圖表、或地圖等試題內容資料，是否符合的評量目標？
6.試題內容用詞是否簡短明確？
7.試題內容是否避免零散片段知識？
8.試題是否與學生的生活經驗相結合？
9.試題中是否避免出現歧視性別或種族的字眼？
10.試題中的訊息是否避免某些群體（種族、性別等）所熟悉？
11.試題是否提供答題所需的完整訊息？
12.試題的敘寫是否合乎邏輯發生程序？
二、題幹檢核表
題幹檢核項目 是 否
1.題幹是否語句完整？
2.題幹中之關鍵詞或否定詞是否醒目處理？
3.附圖或表是否置於題幹之後、選項之前？
4.在各選項中共同文字是否置於題幹中？
5.題幹是否避免使用雙重否定？
6.題幹是否完整敘述欲評量的主要概念？
7.題幹是否避免含有暗示答案的線索？
三、選項檢核表
選項檢核項目 是 否
1.選擇正確選項是否基於受試者具備該題欲評量目標上之能力？
2.答錯正確選項是否基於受試者不具備該題評量目標上之能力？
表 3-3-5 九年一貫社會學習領域基本學力測驗訊息選擇試題試題檢核表（續）
選項檢核項目 是 否
3.選項的用詞是否與題幹一致？
4.選項是否符合題幹問法的邏輯？
5.選項的表達方式是否與題文、題幹保持一致？
6.選項間的內容是否避免重疊的現象？
7.選項內容是否按邏輯項序排列？
8.錯誤選項是否具有誘答力？
9.選項字數是否大致一樣多？
10.試題的正確選項數目分布是否均勻？
11.正確答案應是受到公認且不具爭議性？
即使個別試題均達到水準亦不一定確保整份測驗的品質，因此應對整個題本
（Testlet）加以審查，本研究修正紀俊豪等（2004）所編製之「題本檢核表」作 為題本審核的標準，如表3-3-6。
表 3-3-6 題本檢核表
題 本 檢 核 項 目 是 否
1.試題的設計是否依據教材內容及其教學目標的雙向細目表來制定？
2.試題是否平均涵蓋各學習內容的概念？
3.試題是否注重概念原理的理解與應用？
4.題型或提問方式是否避免連續多題相同？
5.試題是否避免同時含有太多概念？
6.標準答案是否平均分配？
7.題幹與選項是否安排在同一頁次？
8.相同教學單元之多個試題是否按內容綱要適當配置？
9.試題的數目與選用資料之長度是否成恰當比例？
10.試題是否未曾在課本、參考書或補習班講義中出現過？
11.試題是否未曾在任何的考試中出現過（例如學校的考試）?