評分者間信度與社會效度分析

本節將分析研究者與協同評量者評分者間一致性信度，其後由受試 者們及班導師填寫的學習滿意度及教學回饋問卷，透過資料的蒐集與分 析，以評估本研究是否具有可靠性和教學的內在效度。以下將分為「評 分者間一致性信度分析」及「社會效度分析」兩個部分作詳細說明。

壹、 評分者間一致性信度分析

為減少主要研究者的主觀誤差，委請一位協同者參與評量，並確保 本研究資料具可信度，會進行評分者間一致性信度考驗。本研究資料研 究者與協同評量者皆依據「食物製備技能評量表」進行「食物製備步驟 完成平均正確率」的評量，研究者負責全程的觀察與記錄工作，其後把 紀錄影片提供給協同評量者，兩位皆在互不干擾的情境下獨立完成評量。

研究者與協同評量者之結果，由公式計算出評分者間一致性信度係 數，如表4-8 所示。

表4-8 評分者間一致性信度係數 受試者

階段 甲 乙 丙 平均

基線期 90% 84% 90% 88%

介入期 91% 100% 83% 91%

保留期 91% 92% 97% 93%

平均 91% 92% 90%

由表4-8 顯示，得知受試者甲在各實驗階段信度在 90-91%之間，平 均信度為 91%；受試者乙在各實驗階段信度在 84-100%之間，平均信度 為92%；受試者丙各實驗階段信度在 83-97%之間，平均信度為 90%。三 位受試者在同一實驗階段平均信度為88-93%之間，符合 80%以上之考驗 標準（杜正治，2006），說明本研究具良好的評分者間一致性信度。

貳、 社會效度分析

從表 4-9 問卷結果得知，三位受試者對於使用虛擬實境來學習食物 製備都顯示正向態度，也同意在接受訓練課程之後食物製備技能有進步。

除此之外，更進一步詢問三位受試者針對本虛擬實境訓練課程中對於哪 種提示的幫助性較大，受試者甲選擇閃爍提示，受試者乙和丙選擇是字 幕描述。最後，三位對於未來學習虛擬實境學習其他技能皆有正向意願。

表4-10 班導師教學回饋問卷整理表

題⽬ 填答選項

1.您認為虛擬實境(VR)課程有助於學⽣提⾼⾷物製備步 驟完成的正確率。

同意

2.您認為虛擬實境(VR)課程有助於學⽣減少⾷物製備步 驟完成的時間。

⾮常不同意

3.您認為虛擬實境(VR)課程有助於學⽣提升⾷物製備技 能。

同意

4.您認為虛擬實境(VR)課程有助於學⽣獨⽴完成⾷物製 備的動作，減少對教師的依賴。

同意

5.未來您願意加⼊虛擬實境(VR)來輔助相關⾷物製備課 程教學。

同意

班導師對於虛擬實境課程是否有助於學生提高食物製備步驟完成的 正確率、提升相關技能、獨⽴完成並減少對教師的依賴和未來加⼊虛擬 實境來輔助課程意願的問題上，皆選擇同意。僅唯⼀在是否有助於學⽣

減少⾷物製備步驟完成的時間的問題，選擇⾮常不同意。最後，針對本 研究教學建議，班導師給予回饋內容是期待虛擬實境課程以某⼀⼑法為 主，例如切⽚、切丁、切塊、切條或滾⼑法等，⽐較明確的⼑⼯法，才較 容易⽐對學⽣前後的學習表現。