第四章 研究結果
第五節 信度分析
第五節 第五節
第五節信度分析 信度分析 信度分析 信度分析
信度（reliability）是測驗分數具有精確性或可靠性的程度，一般多以內部一 致性來加以表示該測驗信度的高低。本研究以 SPSS 軟體來分析信度，在社會 科試卷的信度方面，擬採 Cronbach’s α 數值來進行測驗的內部一致性分析，α 係 數是由 Cronbach 所發展的，當測驗的評分方式不只二分計分時，例如 likert 五 點量表，不能採用庫李信度，而須採用α 係數。Cronbach’s α 相關係數越高，
表示該題與其他題目的內部一致性越高，即表此一試卷的信度越高。本系統於 社會科試卷的測驗題數為 72 題，得信度為 0.692。
第六節 第六節
第六節 第六節 效 效 效 效度分析 度分析 度分析 度分析
效度（validity）是指測驗分數的正確性，亦即一個測驗分數能夠測量到它 所想要的特質的程度。本研究使用效標關聯效度做為測驗的效度依據，透過比 較學生的預試成績以及學生實際參加學科能力測驗的成績，得到相關係數 0.688；除了預試成績之外，並利用試題反應理論進行分析，估計出每位學生的 能力值，藉以比較學生的能力值與學科能力測驗級分之間的相關，得相關係數 0.704，藉以驗證題庫試題的效度，如表 4.5 所示。
表 4.5 學科能力測驗級分 vs.預試成績及學科能力測驗級分 vs.能力值相關程度 科目 學科能力測驗級分 vs.預試成績 學科能力測驗級分 vs.能力值
社會 0.688*** 0.704***
*** p<0.001
第五章 第五章 第五章
第五章 結論與建議 結論與建議 結論與建議 結論與建議
本研究透過測驗等化技術得以完成量尺化高中社會學科能力測驗的試題 庫，並建置成可應用於電腦化測驗的題庫系統。利用估計所有試題等化後之試 題參數值及其模式適合度，由研究之結果評估其成效，先進行測驗的內部一致 性分析，使用 Cronbach’s α 係數得到信度 0.692；另驗證題庫試題的效度，使用 效標關聯效度做分析，以學生預試的成績以及實際參加學科能力測驗後的成績 比較，得到相關係數 0.688；再求得每位學生的能力值數據，藉以比較學生能力 值與學科能力測驗級分之間的相關性，得到相關係數 0.704，上述具有高度相 關。據以上歸納可得，本研究結果於學科能力測驗社會科目中獲得的信效度皆 高，故可證明本系統在實際施測上將有不錯的預測成效，可做為預測高中生參 與學科能力測驗社會科考試前的良好預測工具。
在歷屆試題資料分析上，由於社會考科為歷史科、地理科和公民與社會科 三個學科的組合，整理時間略顯不足，建議若能在之後考量進每個時期的環境 趨勢進行配題分析，對於系統出題方面上或能更加準確。
由於學科能力測驗將於民國 102 年全面施測，目前所建置的試題庫勢必不 足以因應屆時課綱急遽變化產生學習能力指標上的差異，在針對 99 課綱的考題 應對來說是學生以及教師最大的困難，建議本研究建置完成的系統，若能根據 日後學科能力測驗施行每年更新命題架構藉以修審試題，並進行刪題、補題的 動作，將更有助於本系統預測學生學科能力測驗成績之功效。
參考文獻 參考文獻 參考文獻 參考文獻
中文部分 中文部分 中文部分 中文部分
大學多元入學升學網（2012）。入學方案架構圖。臺北市：教育部。取自：
http://nsdua.moe.edu.tw/index.php?option=com_content&task=view&id=13&Ite mid=49
中等教育司（2004）。普通高級中學課程暫行綱要。臺北市：教育部。取自
http://www.edu.tw/high-school/content.aspx?site_content_sn=8411
中 等 教 育 司 （ 2009a ）。 普 通 高 級 中 學 地 理 科 課 程 綱 要 補 充 說 明 。 取 自
http://www.edu.tw/high-school/content.aspx?site_content_sn=23880
中等教育司（2009b）。普通高級中學公民與社會科課程綱要補充說明。取自
http://www.edu.tw/high-school/content.aspx?site_content_sn=23880
中等教育司（2011a）。普通高級中學課程綱要總綱。臺北市：教育部。取自
http://www.edu.tw/high-school/content.aspx?site_content_sn=8403
中等教育司（2011b）。普通高級中學歷史課程綱要。取自
http://www.edu.tw /high-school/content.aspx?site_content_sn=8403
行政院研究發展考核委員會（2012）。我國大學多元入學制度之評估研究。臺北 市：行政院研究發展考核委員會。
余民寧（1993a），「試題反應理論的介紹（十一）：題庫的建立」，研習資訊研習資訊研習資訊研習資訊 10(4)，
9-13。
余民寧（1993b）。試題反應理論的介紹(九)-測驗分數的等化(上)。研習資訊研習資訊研習資訊 10(2)，研習資訊 6-11。
吳裕益（1991）。IRT 等化法在題庫建立之應用。初等教育學報初等教育學報初等教育學報初等教育學報，，，4，， ，，，319-365。國 立臺南師範學院初等教育學系，臺南市。
財團法人大學入學考試中心（2002）。我國大學入學制度改革建議書。臺北市：
大學入學考試中心。
財團法人大學入學考試中心（2008）。學科能力測驗暨指定科目考試各考科考試 說明公告 學測-社會。取自
http://www.ceec.edu.tw/95 課綱考試說明/95 課綱 (98 年施測)考試說明.htm
財團法人大學入學考試中心（2011）。學科能力測驗暨指定科目考試各考科考試 說明公告學測-社會。取自
http://www.ceec.edu.tw/99 課綱考試說明/1000930/99 課綱考試說明.htm
財團法人大學入學考試中心（2012）。學科能力測驗—簡介。取自
http://www.
ceec.edu.tw/abilityexam/AbilityExamProfile.htm
國民中學學生基本學力測驗推動工作委員會（2010）。「九十九年國民中學學生基 本學力測驗專輯」電腦化測驗的演進及發展。飛揚月刊飛揚月刊飛揚月刊飛揚月刊，，，，第第第 61 期第 期期期。2010 年 1 月，取自：http://www.bctest.ntnu.edu.tw/99annuals/flying61_5.html
教育部（2009）。「普通高級中學課程綱要」補充說明。教育部全球資訊網。中等 教育司/高中課程標準及課程綱要/普通高級中學課程綱要補充說明。取自
http://www.edu.tw/high-school/content.aspx?site_content_sn=23880
教育部 （2010）。「升學制度審議委員會總結報告。臺北市：教育部。取自
http://www.edu.tw/files/site_content/EDU01/教育部「升學制度審議委員會」總 結報告-詳版(定版)-990817(再修).pdf
郭伯臣、曾建銘、吳慧珉（2011）。大型標準化測驗建置流程應用於大型標準化測驗建置流程應用於大型標準化測驗建置流程應用於大型標準化測驗建置流程應用於 TASA 之研之研之研之研 究究
究究。新北市：國家教育研究院。
張芳全(2007)。一綱多本的問題與對策。教師天地教師天地教師天地教師天地，，，特刊，特刊特刊特刊，，，，61-73。
英文部分 英文部分 英文部分 英文部分
Hambleton, R.K., & Swaminathan, H. (1985) . Item Response Theory: Principles and Application. Boston, MA：Kivwer-Nijhoff.
Kolen, M.J. & Brennan, R.L. (1995). Test Equating: Methods and Practices. New York: Springer-Verlag.
Kolen, M.J., & Brennan, R.L. (2004). Test equating, scaling and linking: Methods and practices. 2nd Ed.
Lord, F.M. (1980). Applications of item response theory to practional testing problems. Hillsdale, NJ: Lawrence Erlbawn Associates.
von Davier, A.A., Holland, P.W., & Thayer, D.T. (2004). The kernel method of test equating. New York: Springer.
Wainer, H., Dorans, N.J., Flaugher, R., Green, B.F., Mislevy, R.J., Steinberg, L., &
Thissen, D.（Eds.）(1990). Computerized adaptive testing: A primer. Hillsdale, NJ: Lawrence Erlbaum Associates.
Zimowski, M.F., Muraki, E., Mislevy, R.J., & Bock, R. (2003). BILOG-MG.
Chicago, IL:Scientific Software International.
附錄一
檢核項目 測驗目標
99 課綱 課綱 課綱 課綱
檢核項目 測驗目標
附錄二
編碼
編碼
編碼
編碼
編碼
編碼
編碼
編碼
編碼
編碼
編碼
編碼
編碼
編碼
編碼
編碼
編碼
編碼
編碼
編碼
編碼
編碼
編碼
編碼
編碼 編碼 編碼
編碼 敘述敘述 敘述敘述
11.3.2.0 經濟全球化 11.3.3.0 地球村與反思
11.4.0.0 永續發展的經濟課題 11.4.1.0 國民所得
11.4.2.0 國家競爭力 11.4.3.0 經濟發展的要素 11.4.4.0 永續的經濟發展 11.5.0.0 外部效果
11.5.1.0 外部效果造成的市場失靈 11.5.2.0 外部效果的原因
11.5.3.0 臺灣的環境與生態問題 11.5.4.0 政府的對策
11.6.0.0 公共財與租稅 11.6.1.0 公共財
11.6.2.0 政府支出 11.6.3.0 政府收入
11.6.4.0 政府效能與失靈
附錄 附錄 附錄
附錄三 三 三 三 學科能力測 學科能力測 學科能力測 學科能力測驗社會科參考試卷 驗社會科參考試卷 驗社會科參考試卷 驗社會科參考試卷 95 暫綱 暫綱 暫綱 暫綱
資料來源 資料來源 資料來源
資料來源：：：：財團法人大學入學考試中心（2008）。學科能力測驗參考試卷說明 試題內容-社會。取自 http://www.ceec.edu.tw/95課綱考試說明/參考試卷上網/學測/95 課綱(98 年施測)參考試卷_學 測.htm
99 暫綱 暫綱 暫綱 暫綱
資料來源資料來源
資料來源資料來源：：：：財團法人大學入學考試中心（2012）。大學入學考試中心 99 課綱學科能力測驗參考試卷說 明 試題內容-社會。取自http://www.ceec.edu.tw/99課綱考試說明/參考試卷上網/學測/99 課 綱(102 年施測)參考試卷_學測.htm