第三章 研究方法與步驟
第一節 研究方法
本研究將以文獻分析法，界定審美知能的明確定義和向度，探討「台 北縣九十二學年度國民中學美術班招生甄試」中「審美知能科」試題的藝 術教育學理基礎，以及做為各項分析的依據。其次針對「台北縣九十二學 年度國民中學美術班招生甄試」之中「審美知能科」所提供的正式、完整 的大型測驗資料，進行測驗統計分析。試題分析針對個別試題與整體測驗 題本分別進行質的分析與量的分析。質的分析方面將對個別題目逐題檢 核，並利用「試題雙向細目表」、「專家效度評量表」對於整體測驗題本 進行評鑑；量的分析方面，以試題的「難易度（difficulty）」、「鑑別度
（discrimination）」、「選項分析（option analysis）」等評鑑個別試題的優 劣；以內容效度、內部一致性信度、總分分析做為整體測驗題本的評鑑指 標。經過質與量的分析之後，對於個別試題以及整體測驗題本加以評鑑。
最後將深入訪談本份試題的命題專家，探究其出題過程與理念，並訪談曾 實施本次甄試的台北縣國中美術班教師和受試學生，以瞭解他們對於本次 測驗的觀感和意見反應。訪談對象共包括兩位出題專家、從十所參與本次 審美知能考試的學校各尋找一位美術教師進行訪談，其中五位男教師，五 位女教師、從十所參與本次審美知能考試的學校各尋找一位學生進行訪 談，其中五位男學生，五位女學生，共訪談二十二人。最後將根據訪談結 果與試題分析資料綜合評析，對於本次審美知能科試題提出研究結論以及 改進之建議，以做為日後審美知能測驗出題的參考。
第二節 研究對象
「台北縣九十二學年度國民中學美術班招生審美知能科甄試」施測對 象為台北縣九十一學年度各公私立國民小學應屆畢業生，及合於教育部頒
「資賦優異學生降低入學年齡縮短修業年限及升學辦法」提早入學國中就 讀資格者，或九十一學年度各公私立國民中學一年級學生欲插班就讀二年 級者，無學區限制男女兼有。招生學校與甄試地點，共包括台北縣設有美 術班之十所公私立完全中學或國民中學。招生甄試時間是民國九十二年六 月七日一天。回收測驗試卷共752 份，可供分析之有效測驗試卷共 749 份。
審美知能科試題是由台北縣政府教育局委請專家命題，由二十道選擇 題構成，分為兩部分，第一部份為複選題，共四題；第二部分為單選題，
共十六題。計分方式複選題為每題5 分，每個選項需全部答對才給分；單 選題為每題5 分，總分共 100 分。作答方式為受試者直接於題本上回答，
評分方式為人工閱卷。
第三節 研究工具
本研究在質的方面使用「試題雙向細目表」、「專家內容效度評量表」
等工具來檢測試題的內容品質與效度；以「出題專家、國中美術教師、受 測學生訪談大綱」來瞭解並分析命題流程、試題的藝術教育理念、國中美 術教師與學生對試題的反應與意見等。量的分析方面則以回收之測驗資料 為計算基礎，來分析試題及測驗的相關指標，包括難易度、鑑別度、選項 有效性分析，以及測驗的信度、總分分析等。本節將針對上述各研究工具 的特性與應用做簡單介紹。
一、試題雙向細目表
根據教材或特質之內容與預期目標所建立的雙向細目表（two-way specification table），可做為判斷測驗內容效度的工具。將預期目標列於上 端，將教材或特質之內容列於左端，依據內容的重要性決定其試題比重。
在認知領域預期目標的分類上，可參考 Bloom（1956）所發展的認知領域 六大階層：知識、理解、應用、分析、綜合、評鑑。愈上層認知複雜度愈 高，但並非每個層次都必須涵蓋，而可依測驗內容、對象與目的彈性調整。
雙向細目表可幫助命題者試題分析者釐清教材或特質之內容與預期目標 的關係，確保測驗能真正反應所欲測量的內容向度。（請見表 4-11，99 頁）
二、專家內容效度評量表
專家內容效度評量表也是評鑑內容效度的主要工具之一，本評量表編 製的目的，乃是藉由各專家、學者意見之彙集，以建立測驗題本內容之專
專家效度的專家基本資料如表2-7 所示。
表2-7 審美知能科試題專家內容效度之專家名單
學/經歷或專長 現職
美術教育理論、美術鑑賞教育、課程、評 量、東方美術等
大學美術系、美術研究 所教授
美 術 測 驗 專 家
藝術理論、西方藝術、美術史等 大學美術系、美術研究 所副教授
美術教育、藝術評量理論，目前也是美術 教育研究所學生
國小教師
視覺文化理論、大眾文化，目前也是美術 教育研究所學生
國小教師
美術教育、審美鑑賞理論，目前也是美術 教育研究所學生
國小教師
美術教育理論、審美發展理論，目前也是 美術教育研究所學生
國中教師
美術教育理論，曾有國中美術實際教學經 驗，目前從事美感教育之相關研究
美術研究所碩研生
大眾文化、美術設計等，目前從事藝術教 學態度之相關研究
美術研究所碩研生 美
術 教 育 專 家
後現代藝術教育，目前從事漫畫影像與藝 術教育之相關研究
美術研究所碩研生
三、出題專家、國中美術教師、受測學生訪談大綱
訪談是蒐集資料的一種基本策略，以開放反應性的問題（open-response questions）做深度訪談，以取得參與性的意義（participant meanings）（王文 科，1994）。這種訪談的性質通常是兩個人（有時包含更多人）之間有目 的的對話（conversation with a purpose），由研究者引導蒐集被訪者的語言 資料，藉以瞭解被訪者是如何解釋他們的想法和世界（黃瑞琴，1994）。
本研究將採用半結構式的訪談方法（semi-structured interview）（Merriam, 1988），研究者依照研究目的擬定訪談大綱，並依照被訪者的反應來彈性 決定問題的層次與順序，隨時修正提問方式。
本研究將以半結構訪談法為基礎，擬定出題專家、國中美術教師、受 測學生訪談大綱。訪談大綱是用來瞭解命題流程、試題的藝術教育理念、
國中美術教師與學生對試題的反應與意見等資訊的主要工具。本研究所使 用之訪談大綱，係研究者根據研究之目的與問題，擬定訪談計畫編製而 成，如表 2-8 所示：
表 2-8 出題專家、國中美術教師、受測學生訪談內容大綱 研究目的
一、探討本次審美知能科試題的命題方式與藝術教育理念。
二、對本次審美知能科試題進行個別試題的難易度、鑑別度、選項分析、形式內 容分析；以及整份測驗題本的效度、信度與總分分析等。
三、瞭解國中美術教師對此份試題的反應與意見，以及受測學生對此份試題的反 應。
編碼 訪談目的
1 1-1 1-2 1-3
一、透過命題專家的訪談，瞭解並蒐集以下資訊：
(一)本次審美知能試題的出題流程與命題方式，以便研究者針對出題過程 進行分析與探討；
(二)命題專家出題時考量的藝術教育理念，以瞭解命題時依據的審美知能 學理；
(三)其他開放性意見，以做為研究之輔助參考資料。
2 2-1 2-2 2-3 2-4
二、透過閱卷美術教師的訪談，瞭解並蒐集以下資訊：
(一)美術教師對試題代表性的看法，以做為試題內容評鑑的指標之一；
(二)美術教師對試題的難易度的看法，以做為瞭解教師觀感的指標之一；
(三)美術教師對於試題形式的看法，以做為評量題型設計的指標之一；
(四)其他開放性意見，以做為研究之輔助參考資料。
3 3-1 3-2 3-3
三、透過受測學生的訪談，瞭解並蒐集以下資訊：
(一)使用者對複選題的反應，以做為探討題型設計的指標之一；
(二)使用者準備審美知能考試的方式，以做為探討題目適當性的指標之 一；
(三)使用者對試題難易度的看法，以做為瞭解學生觀感的指標之一；
訪談問題與訪談目的對應表
訪談對象 訪談問題 對應訪談
目的
對應研究 目的 您當初是如何加入本次的命題工作？ 1-1 研究目的一 審美知能科試題命題時，整個命題的流
程大致如何？
1-1 研究目的一 您在決定題數、題型時的主要考量？ 1-1 研究目的一 您認為鑑別學生的審美知能時，應該包
含哪些內容與向度？
1-2 研究目的一 研究目的二 您如何決定試題的內容，使其具有審美
知能各向度的代表性？
1-2 研究目的一 研究目的二 出題專家
您認為審美知能測驗在美術資優教育，
與整體藝術教育中的意義？（可續問有 關本次測驗的其他看法）
1-2 1-3
研究目的一
您認為測驗學生的審美知能時，應該測 驗哪些方面的審美能力？
2-1 研究目的二 研究目的三 承上題，您認為本份試題是否能測驗出
這些能力？
2-1 研究目的二 研究目的三 整體而言，您認為本份試題的難易程度
如何？
2-2 研究目的二 研究目的三 您對於部分試題採用複選題的形式，以
及 20 題的題數有何看法？
2-3 研究目的一 研究目的三 國中美術
教師
您對於審美知能測驗的其他建議？ 2-4 研究目的三 你小學時的考試，有沒有考過複選題？ 3-1 研究目的一 你當時考審美知能的時候，知不知道複
選題是要選一個以上的答案？
3-1 研究目的一 你小學是怎麼準備審美知能的考試？ 3-2 研究目的三 受測學生
你覺得這樣的考試對你是難還是簡單？ 3-3 研究目的三
第四節 研究程序
依據研究目的及研究方法，本研究之架構及流程可整理如圖3-1 所示。
九十二學年度台北縣國民中學美 術班聯合招生審美知能科試題
質的分析 量的分析
擬定研究方向
相 關 文 獻探 討 確定研究目的
評估研究內容 選擇研究方法
擬定研究計畫並進行研究
量的分析
質的分析 出題專家 美術教師 受測學生 意見訪談
個別試題分析 測驗題本分析
效度 總分
分析
結果與討論
提出結論與建議 信度
綜合分析
訪談資料整理分析 內容與形
式分析
難易度鑑別度 選項分析
本研究首先擬定研究目的，並針對審美知能學理、美術資優教育與 測驗相關論述做文獻上的探討，以確立研究內容和方法；並根據研究方法 選定試題分析方式、選取研究與訪談對象，以及擬定訪談重點與訪談大 綱；之後再分別進行個別試題分析、測驗題本分析與訪談計畫。藉由試題 分析和訪談所獲得的資料，進行文件處理、分析與歸納，並同時徵詢指導 教授與專家學者的意見和建議，以便再次對資料分析加以檢視。最後根據 文獻中的論點與資料分析結果，適切地進行結果詮釋，並撰寫研究報告，
總結研究結果提出建議。
第五節 資料處理與分析
本研究資料為「台北縣九十二學年度國民中學美術班招生甄試」中「審 美知能科」考生之測驗資料，以及命題者、參與美術班甄試之教師和學生 等三方面的訪談資料。將分別進行量的分析與質的分析。
一、量的分析
本研究採用電腦應用統計軟體 SAS（Statistical Analysis System）8.0 版進行初步之測驗資料統計分析，包括試題難易度、鑑別度、選項分析，
以及測驗信度、總分分佈狀況等統計分析工作。
二、質的分析
（一）試題品質分析
品質分析包括試題形式與內容分析，以及內容效度分析。本研究將根 據測驗的原理原則、「專家內容效度評量表」之結果、以及「出題專家與 美術教師訪談」中有關試題內容之回饋等三方面，分別以整體評論和逐題 說明的方式，來討論並評鑑審美知能試題的形式與內容。內容效度分析則 將根據試題對應之國民小學美勞課程標準、以及「試題雙向細目表」和「專 家內容效度評量表」的呈現結果三方面，綜合研究者之分析來進行討論。
（二）訪談資料分析
本研究將在訪談後盡快的評述，以呈現可能的論點和解釋。在訪談過
料將採取內容分析法（content analysis）。內容分析是對資料內部的主要組 型進行確認、編號與分類的工作（吳芝儀、李奉儒譯，1995），將資料歸 類與排列順序，是一種以歸納方式確認「意義歸組」（chunks of meanings）
的動作（Marshall, 1981）。歸類記載訪談個案間的相似處與差異處，以進 行質的比較與比對。本研究根據命題者的訪談，瞭解命題者出題時的根據 和思考模式，以及命題的過程，以探討本次命題的理念和原則。透過台北 縣國中美術教師和受試學生的訪談，瞭解學生和教師對於本次試題的觀 點、感受與建議，以和本研究之試題分析結果互相對照，提出綜合之分析 與建議。
