正式 AI 素養測驗施測

本研究使用研究者自編的 AI 素養測驗作為研究工具，在經過預試 之後，於兩所科技領域課程正常教學的新北市立高中進行正式施測。本 節將逐一說明 AI 素養測驗正式施測之內容以及其信度與效度。

一、AI 素養測驗之內容

本研究在預試之後，將正式測驗分成兩部分，第一部分為 AI 態度 量表（附錄三），除了受試者的基本資料外，另包含 AI 資訊來源 7 題、

AI 興趣 8 題、AI 貢獻 8 題、AI 決策 4 題，共計 27 道題目。

第二部分為 AI 知識與技能測驗（附錄四），包含 AI 知識 12 題、AI 技能11 題，共計 23 道題目，各構面和學習內容的出題對照整理如表 4-1，

盡可能在AI 知識和 AI 技能都跨足每個學習內容，惟經預試之後，AI AI 知識題目。

表 4-1

表4-2

本研究正式施測將AI態度量表總分前27%組與後27%組的差異 進行極端組比較，根據比較結果可以發現，此20道題目之CR值介於 在9.754至29.456間，均達統計顯著水準(p< .001)，代表此20道題目具 有足夠鑑別度（邱皓政，2012），能鑑別出高分組和低分組的AI態 度表現。同質性檢驗結果亦顯示，此20道題目與總分的相關皆介 於.532至.749之間，代表AI態度量表之題目均具有中、高度相關。

(二) 因素分析

正式施測之 AI 態度量表在經過項目分析之後，本研究將 20 道 試題進行探索性因素分析。

檢驗結果顯示，正式施測的 AI 態度量表之 KMO 值為.941，且 Bartlett 球形檢驗的近似卡方分配值為 8061.905，自由度為 190，已 達 α =.000 顯著水準。由此可知，本研究之 AI 態度量表的三個構面 間的共同因素存在。分析結果如表4-3 所示。

表4-3

如表4-4 所示。

表 4-4

AI 態度量表正式施測內部一致性分析摘要表（N=554）

量表構面 題數 題目編號 內部一致性係數

（Cronbach’s α）

AI 興趣 8 8、9、10、11、12、13、14、15 .939 AI 貢獻 8 16、17、18、19、20、21、22、

23 .930

AI 決策 4 24、25、26、27 .814

整 體 20 - .933

三、AI 素養測驗之 AI 知識與技能測驗信效度分析

本研究 AI 素養測驗之 AI 知識與技能測驗之正式試題，透過施測取 得 554 份有效樣本後，整理並分析可得 23 道試題的難度與鑑別度，結 果如表4-5 所示。

本研究 AI 素養測驗之 AI 知識與技能測驗之正式試題除了第 1、3、

17、21 題之鑑別度尚可之外，其餘題目皆為鑑別度達 0.30 以上之優良、

非常優良題目，平均難度 0.45，且無須刪除或修改之題目，代表本測驗 可以有效測出受試者在 AI 知識與技能之表現。

表4-5

列教材為主要學習內容，與教授、正式生活科技教師討論後，自編 AI 素養測驗，包含 AI 態度、AI 知識與技能兩部分之測驗內容，將 554 份 正式施測所取得之樣本進行信效度考驗後，所有題目與構面均通過考驗。

希望藉由本研究所發展之研究工具瞭解我國高中生在 AI 素養的表現現 況，再針對教師、課程或教育政策提出建議，做為未來 AI 教育的參考 依據。