3.5 問卷設計
3.5.1 專家─評鑑問卷
本研究參考張于忻(2010)、馬憶菁(2014)、陳宏亮等(2006)及郭隆興等 (2013)之研究報告，以及國內數位學習教材認證指標及評定規準，以「教 材內容與架構、教材設計、輔助設計、媒體與介面設計」四個面向，對數
25
位教材進行品質檢視，評鑑內容如附件一。參考設計量化評鑑 45 個題目，
評量學生對於飲料調製丙級檢定數位教材之設計開發及評鑑。問卷設計採 用五點李克特尺度(Likert scale)作為之衡量工具，回答選項共分為『5=非常 同意』、『4=同意』、『3=普通』、『2=不同意』和『1=非常不同意』五項之數 值來標記，以『非常同意』為滿意程度之最高，『非常不同意』為滿意程度 之最低，藉此評量專家對於飲料調製丙級檢定數位教材之設計開發及評鑑。
張于忻(2010)探討華語文數位教材之模組設計中，將教材設計開發及 評鑑分為『教材內容 Content』、『導引與追蹤 Navigation&Tracking』、『教學 設計 Instructional design』、『教學媒體 Instructional media』及『創意 Creativity』
五個構面；馬憶菁(2014)探討英語不規則動詞遊戲教具設計與學習成效中，
將教材設計開發及評鑑視為『教具內容』、『學習引導』、『教具設計』及『遊 戲教具』四個構面；陳宏亮等(2006)在探討數位化衛生教育教材與製作研 探中，將教材設計開發及評鑑分為『教材內容』、『學習導引』、『教學設計』
及『教學媒體』四個構面；郭隆興等(2013)在海洋能數位學習教材評鑑分 析研究中，將教材品質分為『教材內容』、『學習導引』、『教學設計』、『教 學媒體』及『創意』五個構面。
綜合上述研究，本研究將專家對於飲料調製丙級檢定數位教材之設計 開發及評鑑分為『教材內容 Content』、『導引與追蹤 Navigation & Tracking』、
『教學設計 Instructional design』、『教學媒體 Instructional media』及『創意 Creativity』五個構面，做為數位教材之設計開發及評鑑問題項目來進行評 量；專家問卷設計如表 15 專家對於飲料調製丙級檢定數位教材之設計開 發及評鑑。請依個人實際感受圈選出對飲料調製丙級檢定數位教材之設計 開發及評鑑之看法。
表 14、專家對於飲料調製丙級檢定數位教材之設計開發及評鑑
性別： 服務學校：
服務科系： 測驗日期：
26
正確性(Accuracy)
1.檢定數位教材內容正確。 內容組織與完整(Organization & completeness) 4.檢定數位教材之架構明確完整。
27
導引(Navigation) 7.檢定數位教材之引導功能行之有效。 操作指引與求助功能(Orientation & help) 10.檢定數位教材之功能標示清楚一致。
28 學習追蹤(Learning tracking)
13.學習追蹤之標示明確一致。
教學目標(Instructional objectives) 17.檢定數位教材清楚且完整呈現教學目
29 教學方法(Instructional methods)
19.檢定數位教材之教學方法有效呈現教 練習與形成性評量(Practice & formative evaluation) 22.檢定數位教材提供合宜之練習幫助學
30 總結性評量(Summative evaluation)
25.總結性評量與教學目標相符並適當涵 促進學習之策略(Facilitation strategies)
28.檢定數位教材能成為輔助教材且與學
31 一致性(Congruence)
31.檢定數位教材之每個教學目的都有提
媒體設計與運用(Media design & use) 34.檢定數位教材運用之媒體能提高學習
32 介面設計(Interface design)
36.檢定數位教材之介面設計具一致性。 媒體元素(Media elements)
39.檢定數位教材之媒體元素具適當之製
33
分類 題目 順反向 引用文獻
老師和學習者使用、可以廣泛推廣。
創 意
創意(Creativity) 43.檢定數位教材內容具創意。
a. 導引與追蹤(Navigation & tracking) b.導引與追蹤
a. 教學設計(Instructional design) b.教學設計
a. 教學媒體(Instructional media) b.教學媒體
34
表 15、專家對於調製丙級檢定數位教材之設計開發及評鑑之訪談題目
訪談對象： 服務單位：
訪談時間： 訪談地點：
題目
1.檢定數位教材之教學內容正確？
2.認為目前所設計的檢定考試數位教材有何優缺點？
3.認為目前所設計的檢定考試數位教材能幫助學習者理解教學內容？
4.認為目前所設計的檢定考試數位教材能夠做為上課輔助的教材？
5.您建議此檢定考試數位教材中，應具備什麼要素？
6.認為目前所設計的檢定考試數位教材中，有哪些需要做改進？
3.5.3 學生─評鑑問卷
本研究參考李家萱(2014)和黃依駿(2014)之研究報告，參考設計量化評 鑑共 29 個題目以及質性回饋 5 個題目，評量學生對於飲料調製丙級檢定 數位教材之設計開發及評鑑。問卷設計採用五點李克特尺度(Likert scale)作 為之衡量工具，回答選項共分為『5=非常同意』、『4=同意』、『3=普通』、
『2=不同意』和『1=非常不同意』五項之數值來標記，以『非常同意』為 滿意程度之最高，『非常不同意』為滿意程度之最低，藉此評量學生對於飲 料調製丙級檢定數位教材之設計開發及評鑑。
李家萱(2014)於高中生物實驗數位教材設計開發及評鑑中，將設計開 發及評鑑分為量化評鑑與質性回饋兩部分，其中將量化評鑑視為『學習興 趣』、『實驗內容理解』及『自主學習意願及數位教材評價』三個構面；黃 依駿(2014)探討模組化華與數位教材的設計與建置中，將設計開發及評鑑 視為『滿意度調查』、『學習成效調查』及『教材品質調查』三個構面。
綜合上述研究，本研究將學生對於飲料調製丙級檢定數位教材之設計 開發及評鑑分量化評鑑與質性回饋兩部分，其中量化評鑑分為『學習興趣』、
『內容理解』、『自主學習及評價』及『學習成效』四個構面，做為數位教 材之設計開發及評鑑問題項目來進行評量；學生問卷設計如表 17 飲料調 製丙級檢定數位教材之設計開發及評鑑。請依個人實際感受圈選出對飲料 調製丙級檢定數位教材之設計開發及評鑑之看法。
35
36
37
38
2. 後期訪談─評鑑
本研究為了瞭解此檢定數位教材是否有達到教學上之學習效益，在測 試完成後針對授課教師進行教學後訪談，以實際狀況提出建議，再修正設 計檢定數位教材。
3.6.2 問卷調查法
本研究採用之問卷調查法，分為「專家評鑑問卷」及「學生評鑑問卷」
兩部份，進行資料蒐集。將蒐集回來之問卷經過評估分析內容，建構設計 出教材以及分析學習者之學習效益，本研究整理出各學者對於問卷調查法 之定義，如下：
3. 專家評鑑問卷
表 18、問卷調查法(專家)之定義
作者 年份 說明
馬憶菁 2014 為了解教材內容、學習引導、教具設計及遊戲教具，四大 向度是否融入遊戲中。
李家萱 2014 以教材成效品質設計問題，了解是否發揮教學目的。
李昆憲 2012 為了解從教師專家角度思考，設計之數位多媒體互動教材。
本研究參考張于忻(2010)、馬憶菁(2014)、陳宏亮等(2006)及郭隆興等 (2013)之研究報告，以及修改自教育部所訂定之「數位學習教材認證指標 及評定規準」，參考設計量化評鑑 45 個題目及質性回饋 6 個題目，評量專 家對於飲料調製丙級檢定數位教材之設計開發及評鑑。
問卷題目共 45 題，採用五點李克特尺度(Likert scale)作為之衡量工具，
回答選項共分為『5=非常同意』、『4=同意』、『3=普通』、『2=不同意』和『1=
非常不同意』五項之數值來標記，以『非常同意』為滿意程度之最高，『非 常不同意』為滿意程度之最低，藉此評量專家對於飲料調製丙級檢定數位 教材設計開發及評鑑之看法。
39
1. 學生評鑑問卷
表 19、問卷調查法(學生)之定義
作者 年份 說明
馬憶菁 2014 目的在於了解將遊戲因子融入教材後，學習者對於教材 之看法與喜好程度。
李家萱 2014 了解學生在閱讀設為教材後對於教材的理解與感受。
盧姝如等 2012 了解學習者之學習動機指標。
本研究參考李家萱(2014)和黃依駿(2014)之研究報告，參考設計量化評 鑑共 29 個題目以及質性回饋 5 個題目，其中質性回饋部分，設計為完全 開放式之回饋單，給測驗者填寫建議與改善空間，評量學生對於飲料調製 丙級檢定數位教材之設計開發及評鑑。
問卷題目共 29 題，採用五點李克特尺度(Likert scale)作為之衡量工具，
回答選項共分為『5=非常同意』、『4=同意』、『3=普通』、『2=不同意』和『1=
非常不同意』五項之數值來標記，以『非常同意』為滿意程度之最高，『非 常不同意』為滿意程度之最低，藉此評量學生對於飲料調製丙級檢定數位 教材設計開發及評鑑之看法。
3.6.3 觀察法
針對學習者，在進行測試教材是否可行之過程中觀察並分析學習狀況 (盧姝如等，2012)。在觀察前，事先蒐集相關研究報告，並省思過去實際進 行觀察之心得後歸納整理，觀察過程中能藉由影音器材來輔助蒐集資料，
觀察範圍包括所有與教材發展相關(楊智穎，1998)。本研究採用實地觀察 法，測驗期間之操作過程全程錄影紀錄及觀察記錄操作成效，藉此了解測 驗者於過程中的反應，而後檢討教學影片之缺失並加以強化修改。
3.7 專家名單
編碼 性別 服務學校 服務科系 年資 1 女 三民家商 觀光科 8 2 女 恆春工商 觀光科 8 3 女 家齊高中 餐飲科 17 4 男 高餐大附中 觀光科 10
40
編碼 性別 服務學校 服務科系 年資 5 女 興華中學 觀光科 3 6 女 興華中學 觀光科 13 7 男 興華中學 觀光科 7 個月 8 女 興華中學 觀光科 5 9 女 興華中學 觀光科 3 年半 10 男 興華中學 觀光科 3 11 女 興華中學 觀光科 10
共 11 位
3.8 檢定術科評審表
在進行測驗過程當中，除了利用觀察法進行觀察之外，會配合實際之 檢定考試標準評分表(勞動力勞動部發展署全國技術士技能檢定─飲料調 製丙級技術士技能檢定術科測試評審表，2017)，針對測驗學生進行評分考 核，以達到檢定公平、客觀之標準，請參閱附件四。
41
42
修改內容，如下：
43
44
專家建議：對於技能檢定，認識機台 並非考試重點，只要將操作位置 標示清楚即可。
專家建議：介紹內容過於冗長，應以 簡單易懂較好。
45
專家建議：應以『擦洗擦鋪拿』為輔 助口訣。
專家提醒：工作檯抹布原本安置為至 於夾層中。
專家提醒：少拿吧叉匙，為扣分項。
46
專家建議：圖示當中，缺少『鮮奶收 集器』。
專家建議：研磨咖啡機下方可不必放 上抹布。
專家建議：填壓咖啡粉應靠於桌緣。
專家建議：萃取器應為單孔萃取器，
拿取錯誤，為重點扣分向。