附 錄
附錄一、專家訪談名單與德懷術(delphi)名單(按照筆畫 順序編列)
黃如妤 鴻海精密工業股份有限公司
賴志樫 台灣師範大學工業科技教育學系副教授
♦ 教授群:
于俊傑 台灣師範大學工業科技教育學系副教授 方崇雄 台灣師範大學工業科技教育學系教授 余鑑 台灣師範大學工業科技教育學系教授 侯世光 台灣師範大學工業科技教育學系教授 賴志樫 台灣師範大學工業科技教育學系副教授
♦ 業界群:
洪啟方 建碁股份有限公司 陳怡君 裕隆汽車
陳冠宇 順益汽車
黃柏翔 功學社教育用品股份有限公司 蔡學偉 育碁數位科技股份有限公司 鄭婉潔 裕隆汽車
專家訪談名單如下:
德懷術(delphi)名單如下:
附錄二、訪談問卷
【企業數位學習評鑑指標建構之研究】
※ 問卷內容
下列為研究者根據文獻所整理及歸納有關數位學習評鑑可以考量的項 目,共分輸入、過程、結果三大評鑑部分,目的是為了建構出數位學習成效 評鑑模式及標準,當組織在進行數位學習時,有一個評鑑的依據,管理者可 以依據以下內容,檢核該組織進行數位學習時是否有缺漏的地方,經由下表 所考量之項目,可以使數位學習評鑑較為完善。
請根據您的經驗來衡量在實行評鑑時,應該檢視的項目,下列選項是否 有所遺漏?或有不足部分,請您直接加以增刪及修整。
您希望參與德懷術問卷的聯絡與回函方式
□以信件郵寄方式
□以 E-mail 方式 親愛的 專家先進 您好:
非常感謝您擔任此次「企業數位學習評鑑指標建構之研究」的德 懷術研究小組委員,本研究目的旨在組織進行數位學習時,管理者可 以依據本研究檢核該組織進行數位學習時是否有缺漏、沒注意的地 方,並經由本研究的提醒,可以讓數位學習在進行時更加完善,達到 評鑑的目的。因此非常期盼您寶貴的意見,若造成您任何的不便,敬 請包涵及原諒。
本研究預計將實施三次 Delphi 問卷調查,此為德懷術問卷正式實 施前初稿,希經由訪談讓問卷更佳完善。若您對本問卷有任何疑問,
歡迎您來電或 E-mail 告知。
電話:0933-575181
E-mail:69371016@ntnu.edu.tw 敬祝 萬事如意
國立台灣師範大學工業科技教育學系 指導教授 余 鑑 博士 研究生 陳立蘋 敬上
一、 數位學習評鑑——背景資訊輸入部分
規劃數位學習所需的人才(如導入規劃師、課程規劃師、內容設計師、多媒體 設計師、線上講師、學習網站經營人才、HR 人員等)
□符合 □刪除 □建議修正為...
規劃數位學習的外部顧問
□符合 □刪除 □建議修正為...
規劃 方案 所需
人員 建立支援小組,可協助解決學習者問題 □符合 □刪除 □建議修正為...
收集企業數位學習政策
□符合 □刪除 □建議修正為...
確定高階主管支持數位學習
□符合 □刪除 □建議修正為...
評估組織現有網路設備部署狀況(電腦、網路連線頻寬、下載速度、軟體)
□符合 □刪除 □建議修正為...
確定教材內容下載的速度夠快
□符合 □刪除 □建議修正為...
確定學習者有足夠的電腦技能
□符合 □刪除 □建議修正為...
評估組織數位學習訓練的預算分配(資金)
□符合 □刪除 □建議修正為...
評估組織長期網路的租賃及設備維護費等預算(資金)
□符合 □刪除 □建議修正為...
經由組織分析(組織所期望的與真實狀況間的落差)找出訓練需求 □符合 □刪除 □建議修正為...
經由工作分析(員工技能與工作績效間之差距)找出訓練需求 □符合 □刪除 □建議修正為...
評估 組織 現況
經由個人分析(員工技能與未來工作要求的落差)找出訓練需求 □符合 □刪除 □建議修正為...
確定數位學習平台來源(組織自製或外包訂製)
□符合 □刪除 □建議修正為...
根據企業的需求,評量平台價格、功能 □符合 □刪除 □建議修正為...
評量跨平台的整合能力
□符合 □刪除 □建議修正為...
評量平台未來的延展性
□符合 □刪除 □建議修正為...
學習 平台
評量平台業者的售後服務
□符合 □刪除 □建議修正為...
z 建議:
二、 數位學習評鑑——訓練方案設計過程 確定訓練目標
□符合 □刪除 □建議修正為...
依財務規劃數位學習課程
□符合 □刪除 □建議修正為...
確定參與訓練的員工(一般員工或者主管階級)
□符合 □刪除 □建議修正為...
分析學習者特性(依據其興趣、目的、需求,來編制合適的教材)
□符合 □刪除 □建議修正為...
根據需求評估,訂定訓練計畫
□符合 □刪除 □建議修正為...
確定線上課程的產生方式(由講師或行政人員自製、外包客製化、或購買市 面上現有的課程)
□符合 □刪除 □建議修正為...
確定訓練時間起迄
□符合 □刪除 □建議修正為...
計畫
確定訓練地點(為限定地點,如公司或特定的電腦教室、或不限地點)
□符合 □刪除 □建議修正為...
規劃訓練的內容大綱及主題
□符合 □刪除 □建議修正為...
確定每個主題之學習活動
□符合 □刪除 □建議修正為...
組織整體教學設計的流程
□符合 □刪除 □建議修正為...
設計
規劃課程、教材、周邊設備、教學媒體的需求 □符合 □刪除 □建議修正為...
製作數位教材
□符合 □刪除 □建議修正為...
將數位教材上線測試與做必要的修正 □符合 □刪除 □建議修正為...
確定數位教材內容之管理與維護
□符合 □刪除 □建議修正為...
確定教材網頁無連結失效、資訊錯誤的情況出現 □符合 □刪除 □建議修正為...
發展
確定線上輔助足夠幫助學習者操作、使用課程 □符合 □刪除 □建議修正為...
z 建議:
三、 數位學習評鑑(以 Kirkpatrick 評鑑為基準)
評量學習者對課程內容的滿意度(課程內容有意義、容易理解,並可激 起其學習興趣)
□符合 □刪除 □建議修正為...
評量課程內容足夠反應訓練目標 □符合 □刪除 □建議修正為...
評量學習者對訓練人員滿意度
□符合 □刪除 □建議修正為...
評量學習者對平台介面的滿意度(線上講師講述能力、教學媒體方便 性、系統介面的美觀性等)
□符合 □刪除 □建議修正為...
評量學習者使用平台介面的滿意度(瀏覽、文章銜接、網頁連結的流暢 性等)□符合 □刪除 □建議修正為...
評量教學資源與教學導引足夠支持學習活動 □符合 □刪除 □建議修正為...
評量學習者對場地、設備的滿意度 □符合 □刪除 □建議修正為...
評量學習者對整體環境的滿意度是否可激發學習動機 □符合 □刪除 □建議修正為...
評量整體時間的安排的適切性(學習者學習教學內容而不會太匆促) □符合 □刪除 □建議修正為...
評量學習者對訓練成果的評量方式滿意度,是否可激起其學習興趣 □符合 □刪除 □建議修正為...
反應
評量線上學習有足夠的互動,讓學習者相互交流
□符合 □刪除 □建議修正為...
評量學習的效果(知識、技能、態度等)
□符合 □刪除 □建議修正為...
評量專業技術能力(實際應用於工作上的專業技能)
□符合 □刪除 □建議修正為...
評量一般管理能力(如領導統御、時間管理、壓力管理、衝突管理、績 效管理等)
□符合 □刪除 □建議修正為...
學習
評量人際關係與溝通能力(如團隊合作、語言表達、溝通協調等
□符合 □刪除 □建議修正為...
學習者能否應用所學於工作上
□符合 □刪除 □建議修正為...
收集學習者行為改變的資料,如調查或面訪相關可以觀察到學習者行為 的人(如主管、部屬、同事等)
□符合 □刪除 □建議修正為..
評量訓練能夠改善員工的工作方法、專業知識與技能有所提升、並能發 揮與應用
□符合 □刪除 □建議修正為..
評量經過訓練後,提升了員工的安全意識、降低意外發生的可能性
□符合 □刪除 □建議修正為..
評量員工的工作意願、效率、士氣、滿意度、信心提升
□符合 □刪除 □建議修正為..
評量員工的缺勤率、離職率減少
□符合 □刪除 □建議修正為..
評量訓練增加員工解決問題的能力
□符合 □刪除 □建議修正為..
評量訓練增加員工創新、發揮個人潛能的能力
□符合 □刪除 □建議修正為..
評量訓練增加員工溝通協調、工作教導的能力
□符合 □刪除 □建議修正為..
評量訓練增加員工團隊向心力、企業文化理念的瞭解
□符合 □刪除 □建議修正為..
行為
評量主管對員工整體表現的滿意度有所增加
□符合 □刪除 □建議修正為..
評估訓練對個人績效的影響
□符合 □刪除 □建議修正為...
評估訓練對團隊(部門)績效的影響
□符合 □刪除 □建議修正為...
成效
評估訓練對組織績效的影響(如顧客滿意度、成本之降低或計算成本效 益)
□符合 □刪除 □建議修正為...
確定進行 ROI 評鑑的必須性
□符合 □刪除 □建議修正為...
確定 ROI 評鑑的可行性
□符合 □刪除 □建議修正為...刪除 ROI
計算方案中的投資報酬率
□符合 □刪除 □建議修正為...
z 建議:
※ 基本資料
1. 姓名:_______________
2. 服務單位:________________
3. 職稱:
4. 聯絡方式(郵寄地址或電子信箱):
※ 本問卷到此為止,由於本問卷純屬學術性質,絕不做其他用途或公開使用,
因此請您放心作答,最後請您再次檢查是否有遺漏之處,非常感謝您在百忙 之中抽空填寫問卷。
附錄三、第一回合 數位學習評鑑指標建構之德懷術問卷
第一回合 數位學習評鑑指標建構之德懷術(Delphi)調查問卷--(編號_)
※問卷填答說明:
一、本問卷所採用的研究方法為德懷術(Delphi),德懷術是一種專家學者間多 次意見往返的溝通方式,其進行的方式如下:第一次問卷調查專家學者對各 項主題的意見,經由研究者將各專家意見匯整分析後,在第二、三次的問卷,
會將學者專家意見提供給每位專家,以作為後續修正的參考,最終期望達到 專家意見趨於穩定的層面。
二、本問卷分為三大構面,每個題項都有五個等級選項,分別 1-5 的數字代表重 要程度的高低,「1」代表必要性極低,「5」代表必要性極高,數字越大表示 重要程度越高。請根據您的經驗,在您認為最合適的「□」內打「X」,並確 定每個選項都已填寫。
三、若您有任何其他建議,請在後方備註欄填寫。
※ 問卷填答範例:
重要程度 低————→高 題
項
指標
1 2 3 4 5
備註
1. 數位學習評鑑指標 □ □ □ □ 修改 若有其他未列入指標,煩請填入下列空欄,謝謝!!
增加
親愛的 專家先進 您好:
首先非常感謝您擔任此次「企業數位學習評鑑指標建構之研究」的 德懷術研究小組委員,本研究目的旨在組織進行數位學習時,管理者可 以依據本研究檢核該組織進行數位學習時是否有缺漏、沒注意的地方,
並經由本研究的提醒,可以讓數位學習在進行時更加完善,達到評鑑的 目的。因此非常期盼您寶貴的意見,若造成您任何的不便,敬請包涵及 原諒。
本研究預計將實施三次 Delphi 問卷調查,此為德懷術第一次問卷 發放。若您對本問卷有任何疑問,歡迎您來電或 E-mail 告知。
電話:0933-575181
E-mail:69371016@ntnu.edu.tw 敬祝 萬事如意
國立台灣師範大學工業科技教育學系 指導教授 余 鑑 博士 研究生 陳立蘋 敬上
一、 數位學習評鑑——背景資訊輸入
重要程度 低————→高 題
項
指標
1 2 3 4 5
備註
1. 評估組織對數位學習的需求
2. 收集企業數位學習的相關資訊
3. 諮詢數位學習的外部顧問
4. 評估高階主管支持數位學習的程
度
5. 評估組織現有網路設備部署狀況
(電腦、網路連線頻寬、下載速 度、軟體)
組
織 現 況 調 查
6. 確定學習者有足夠的電腦技能
7. 評估數位學習平台自製或外包
8. 根據企業的需求,評估平台價格
9. 根據企業的需求,評估平台功能
10. 評估跨平台的整合能力(軟體支
援或相容能力)
11. 評估平台未來的延展性(擴充彈 性)
學
習 平 台
12. 評估平台業者的售後服務
13. 評估組織數位學習的預算分配
資
金 14. 評估組織長期網路的租賃及設備 維護等預算
方 案 人 員
15. 規劃數位學習所需的人才(如導 入規劃師、課程規劃師、內容設 計師、多媒體設計師、線上講師、
學習網站經營人才、HR 人員等)
16. 經由組織分析(組織所期望的與 真實情況的落差)找出訓練需求
17. 經由工作分析(員工技能與工作 績效間之差距)找出訓練需求
需
求 評 估
18. 經由個人分析(員工技能與未來 工作要求的落差)找出訓練需求
若有其他未列入指標,煩請填入下列空欄,謝謝!!
二、 數位學習評鑑——方案設計
重要程度 低————→高 題
項
指標
1 2 3 4 5
備註
19. 根據需求確定訓練目標,訂定訓 練計畫
20. 確定學習對象(員工或主管)
21. 分析學習者特性(依據其興趣、
目的、需求,來編制合適的教材)
22. 依預算規劃數位學習課程
23. 確定線上課程的產生方式(由講
師或行政人員自製、外包客製 化、或購買市面上現有的課程)
24. 規劃課程時間長短
計 畫
25. 確定訓練地點(為公司或特定的 電腦教室、或不限地點)
26. 組織整體教學設計的流程
27. 規劃訓練的內容大綱及主題
28. 確定每個主題之內容設計、學習
活動
29. 規劃課程型態(講師講述、power point 等)
30. 評量學習測驗的方式,是否可以 反應學習成效
31. 評量測驗內容的合宜性
設
計 發 展 教 材
32. 規劃教材、硬體邊設備、教學媒 體的需求
33. 評量課程錄製過程的品質(power point 呈現,內容的流暢性等)
34. 將數位教材上線測試與修正
35. 確定數位教材內容之管理與維護
(無網頁無連結失效、資訊錯誤 的情況出現)
教
材 品 質 管 理
36. 確定線上輔助或學習說明手冊足 夠幫助學習者操作、使用課程
若有其他未列入指標,煩請填入下列空欄,謝謝!!
三、 數位學習評鑑——成效評鑑
重要程度 低————→高 題
項
指標
1 2 3 4 5
備註
37. 評量課程內容足夠反應訓練目標
38. 評量學習者對課程內容的滿意度
(課程與工作的相關性、容易理 解)
39. 評量學習者對線上講師的滿意度
40. 評量數位學習是否有足夠的互動
41. 評量學習者對訓練的測驗方式,
是否可激起其學習意願
42. 評量學習者對平台介面的滿意度 (教學媒體方便性、系統介面的美 觀性等)
43. 評量學習者是否容易使用平台介 面(瀏覽、文章銜接、網頁連結 的流暢性等)
44. 評量線上輔助或學習手冊等教學 導引足夠支持學習活動
45. 評量學習者對場地設備的滿意度
46. 評量學習者對整體環境的滿意度
反
應
47. 評量時間的安排 (教學內容長度 適切而不會太匆促)
學 習
48. 評量學習的效果(知識、技能、
態度等各層面)
49. 收集學習者行為改變的資料,如 調查或面訪相關可以觀察到學習 者行為的人(如主管、部屬、同 事等)
50. 評量學習者能應用所學於工作
行
為
51. 評量收集資料的時間點(受訓後 三個月、半年或一年)
52. 評估訓練對個人績效的影響
53. 評估訓練對團隊(部門)績效的
影響
成
效
54. 評估訓練對組織績效的影響(如 顧客滿意度、計算成本效益)
55. 確認進行 ROI 評鑑的必要性
56. 確認 ROI 評鑑的可行性
57. 確認計算 ROI 的正確性
ROI
投 資 報 酬
58. 確認 ROI 評鑑的合理性
若有其他未列入指標,煩請填入下列空欄,謝謝!!
四、基本資料 1. 姓名:
2. 服務單位:
3. 職稱:
4. 聯絡電話:
5. 聯絡地址:
※ 本問卷到此為止,由於本問卷純屬學術性質,絕不做其他用途或公開使用,
因此請您放心作答,最後請您再次檢查是否有遺漏之處,並請將問卷寄回。
為了方便本研究進度之進行與掌控,請於收到本問卷後一週內以郵寄或 E-mail 的方式將本問卷寄回,非常感謝您在百忙之中抽空填寫問卷。
第二次問卷填答的地方,如果您再次填答的答案與平均數差距大於 1,『請在備註欄寫下您的意見』。
如範例中您第二次答案為 5,平均數為 3,相減等於 2,大於 1,
因此在備註欄您的意見為 修改順序 。
附錄四、第二回合 數位學習評鑑指標之德懷術(Delphi)調查問卷--(編號_)
※ 問卷填答說明:
第一次問 卷統計分 析
重要程度 低———→高 題
項
指標
眾 數
平 均
您 上 次 的 答 案
1 2 3 4 5
備註
1. 數位學習評鑑指標 4 4.2 修改順序
1. 『眾數欄』意指專家群意見最集中的答案。『平均數欄』意指重要的程度。
親愛的 專家先進 您好:
首先非常感謝您在第一次問卷中的協助與建議,使的問卷進行相當 順利。在本次問卷中,研究者綜合專家的意見加以統計整理,結果呈現 如下,請您參考並填答,非常感謝您再度協助填答。
本研究預計將實施三次 Delphi 問卷調查,此為德懷術第二次問卷發 放。若您對本問卷有任何疑問,歡迎您來電或 E-mail 告知。
電話:0933-575181
E-mail:69371016@ntnu.edu.tw
第二次 Delphi 問卷發放日期 五月十一日(四)
第二次 Delphi 問卷回收日期 五月十七日(三)
敬祝 萬事如意
國立台灣師範大學工業科技教育學系 指導教授 余 鑑 博士 研究生 陳立蘋 敬上
表示大家平均 的答案是 4.2 最多專家選擇的答案 4
2. 請參考第一次問卷統計數據分析,重新填答。
3. 若您的意見與平均數差距大於 1(表示您與大多數專家意見差異較大),請 於備註欄提供理由。
z 問卷開始
一、 數位學習評鑑——背景資訊輸入部分 第一次問卷
統計分析 重要程度
低———→高 題
項
指標
眾 數
平 均
您 上 次 的 答 案
1 2 3 4 5
備註
1. 評估組織對數位學習的需求 5 4.91 5
2. 收集企業數位學習的相關資
訊 5 4.00 5
3. 評估數位學習開課規模(開 課人數、時數的多寡)
新增
4. 諮詢數位學習的外部顧問 4 4.00 4
5. 評估高階主管支持數位學習
的程度 5 4.91 5
6. 評估組織現有網路設備部署 狀況(電腦、網路連線頻寬、
下載速度、軟體)
5 4.45 4
組 織 現 況 調 查
7. 確定學習者有足夠的電腦技 能,運用數位學習介面
已修改
8. 評估數位學習平台自製或外
包 4 4.18 4
9. 根據企業的需求,評估平台
價格 5 4.09 4
10. 根據企業的需求,評估平台
功能 5 4.73 5
11. 評估跨平台的整合能力(軟
體支援或相容能力) 4 3.91 5
12. 評估平台未來的延展性(擴
充彈性) 4 4.09 4
學 習 平 台
13. 評估平台業者的售後服務 4 4.27 4
14. 評估組織數位學習的預算分
配 4 4.36 4
15. 評估組織長期平台的租賃預 算
已修改
資
金
16. 評估組織長期數位學習的設 備維護費
已修改
17. 規劃數位學習所需的人才
(如導入規劃師、課程規劃 師、內容設計師、多媒體設 計師、線上講師、學習網站 經營人才、HR 人員等)
4 4.09 5
方 案 人 員
18. 評估內部講師制度(以利後 續課程設計)
新增
19. 經由組織分析(組織所期望
的與真實情況的落差)找出 數位學習需求
已修改
20. 經由工作分析(員工技能與 工作績效間之差距)找出數 位學習需求
已修改
需
求 評 估
21. 經由個人分析(員工技能與 未來工作要求的落差)找出 數位學習需求
已修改
若有其他未列入指標,煩請填入下列空欄,謝謝!!
二、 數位學習評鑑——訓練方案設計過程
第一次問卷 統計分析
重要程度 低———→高 題
項
指標
眾 數
平 均
您 上 次 的 答 案
1 2 3 4 5
備註
22. 根據需求確定訓練目標,訂 定數位學習計畫
已修改
23. 確定學習對象(員工或主管) 5 4.45 4
計
畫
24. 分析學習者特性(依據其興
趣、目的、需求,來編制合 4 4.36 4
適的教材)
25. 依預算規劃數位學習課程 5 4.45 4
26. 確定線上課程的產生方式
(由講師或行政人員自製、
外包客製化、或購買市面上 現有的課程)
4 4.18 4
27. 規劃課程時間長短 4 4.27 4
28. 確定數位學習地點(為公司
或特定的電腦教室、或不限 地點)
已修改
29. 組織整體教學設計的流程 4 4.18 4
30. 規劃訓練的內容大綱及主題 5 4.55 4
31. 確定每個主題之內容設計、
學習活動 4 4.18 4
32. 規劃教材呈現方式(單純講 師講述或輔以 power point 呈現)
已修改
33. 評量學習測驗的方式,是否
可以反應學習成效 5 4.82 4
34. 評量測驗內容的合宜性 4 4.36 4
設
計 發 展 教 材
35. 規劃教材所需硬體邊設備之 需求
已修改
36. 評量課程錄製過程的品質
(power point 呈現,內容的 流暢性等)
5 4.45 4
37. 將數位教材上線測試與修正 4 4.18 4
38. 確定數位教材內容之管理與
維護(無網頁無連結失效、
資訊錯誤的情況出現)
4 4.36 4
教 材 品 質 管 理
39. 確定線上輔助或學習說明手 冊足夠幫助學習者操作、使 用課程
4 4.27 4
若有其他未列入指標,煩請填入下列空欄,謝謝!!
三、 數位學習評鑑(以 Kirkpatrick 評鑑為基準)
第一次問卷 統計分析
重要程度 低———→高 題
項
指標
眾 數
平 均
您 上 次 的 答 案
1 2 3 4 5
備註
40. 評量課程內容足夠反應訓練 目標
5 4.73 4
41. 評量學習者對課程內容的滿 意 度 ( 課 程 與 工 作 的 相 關 性、容易理解)
4 4.36 4
42. 評量學習者對線上講師的滿 意度
4 3.91 4
43. 評量數位學習是否有足夠人 機互動
已修改
44. 評量學習者對訓練的測驗方
式,是否可激起其學習意願
5 4.09 3
45. 評量學習者對平台介面的滿 意度(教學媒體方便性、系統 介面的美觀性等)
4 4.36 4
46. 評量學習者是否容易使用平 台介面(瀏覽、文章銜接、
網頁連結的流暢性等)
5 4.45 4
47. 評量線上輔助或學習手冊等 教學導引足夠支持學習活動
4 4.18 4
48. 評量學習者對場地設備的滿 意度
4 3.55 3
49. 評量學習者對整體環境的滿 意度
4 3.64 3
反 應
50. 評量時間的安排 (教學內容 長度適切而不會太匆促)
5 4.18 4
學 習
51. 評量執行學習效果(知識、
技能、態度等各層面)的適 切性
已修改
行 為
52. 收 集 學 習 者 行 為 改 變 的 資 料,如調查或面訪相關可以
5 4.27 4
觀察到學習者行為的人(如 主管、部屬、同事等)
53. 評量學習者能應用所學於工 作
5 4.45 4
54. 評量收集資料的時間點(受 訓後三個月、半年或一年)
4 3.73 4
55. 評估訓練對個人績效的影響 5 4.55 5
56. 評估訓練對團隊(部門)績
效的影響
5 4.27 4
成 效
57. 評估訓練對組織績效的影響
(如顧客滿意度、計算成本 效益)
5 4.36 5
58. 確認進行 ROI 評鑑的必要性 5 4.00 4
59. 確認 ROI 評鑑的可行性 4 4.00 4
60. 確認計算 ROI 的正確性 4 4.00 4
ROI
投 資 報 酬
61. 確認 ROI 評鑑的合理性 4 4.09 4
若有其他未列入指標,煩請填入下列空欄,謝謝!!
四、基本資料 1. 姓名:
※ 本問卷到此為止,由於本問卷純屬學術性質,絕不做其他用途或公開使用,
因此請您放心作答,最後請您再次檢查是否有遺漏之處,並請將問卷寄回。
為了方便本研究進度之進行與掌控,請於收到本問卷後一週內以郵寄或 E-mail 的方式將本問卷寄回,非常感謝您在百忙之中抽空填寫問卷。
附錄五、第三回合 數位學習評鑑指標之德懷術(Delphi)調查問卷--(編號 )
※ 問卷填答說明一:
第二次問卷 統計分析 題
項 指標
眾 數 平均
您 上 次 的 答 案
調 整 分 數 欄 1. 數位學習評鑑指標一 4 4.2 5 該題項意見與上次一致,不需再調整
※ 問卷填答說明二:
第二次問卷 統計分析 題
項 指標
眾 數 平均
您 上 次 的 答 案
調 整 分 數 欄 1. 數位學習評鑑指標一 4 4.2 5 4 該題項意見與上次一致,不需再調整 親愛的 專家先進 您好:
感謝您擔任本研究問卷調查專家,並在第一次與第二次專家調查 中提供寶貴意見,在您熱心參與和指導下,這份研究調查即將順利完 成,劃下句點。
在第二次的專家調查中,部分專家意見已趨於一致,因此本問卷 的目的主要是做最後一次的確認,並回應爭議題,若您還需調整分數,
可以在調整分數欄修改,非常感謝您的幫忙與協助。若您對本問卷有 任何疑問,歡迎您來電或 E-mail 告知。
電話:0933-575181
E-mail:69371016@ntnu.edu.tw
第三次 Delphi 問卷發放日期 五月十九日(五)
第三次 Delphi 問卷回收日期 五月二十四日(三)
敬祝 萬事如意
國立台灣師範大學工業科技教育學系 指導教授 余 鑑 博士 研究生 陳立蘋 敬上
如果您的意見與上 次一樣不需再調 整,就在每個類別 下面,打『X』表示 不需再修改。
如果您想要再調整 您的分數,請不要 在最下方的意見一 致欄打『X』。
一、 數位學習評鑑——背景資訊輸入部分
第二次問卷 統計分析 題
項 指標
眾 數
平 均
您 上 次 的 答 案
調 整 分 數 欄 62. 評估組織對數位學習的需求 5 4.91
63. 收集企業數位學習的相關資訊 4 4.45 64. 評估數位學習開課規模(開課人數、時數的多寡) 4 4.09
65. 諮詢數位學習的外部顧問 4 4.00
66. 評估高階主管支持數位學習的程度 5 4.91
67. 評估組織現有網路設備部署狀況(電腦、網路連線頻
寬、下載速度、軟體) 5 4.55
組 織 現 況 調 查
68. 確定學習者有足夠的電腦技能,運用數位學習介面 4 4.27
69. 評估數位學習平台自製或外包 4 4.18
70. 根據企業的需求,評估平台價格 4 4.36
71. 根據企業的需求,評估平台功能 5 4.64
72. 評估跨平台的整合能力(軟體支援或相容能力) 4 4.00
73. 評估平台未來的延展性(擴充彈性) 4 4.09
學
習 平 台
74. 評估平台業者的售後服務 4 4.27
75. 評估組織數位學習的預算分配 4 4.36 76. 評估組織長期平台的租賃預算 4 4.00
資
金 77. 評估組織長期數位學習的設備維護費 4 4.27
78. 規劃數位學習所需的人才(如導入規劃師、課程規劃
師、內容設計師、多媒體設計師、線上講師、學習網站
經營人才、HR 人員等) 4 4.18
方
案 人
員 79. 評估內部講師制度(以利後續課程設計) 4 4.36 80. 經由組織分析(組織所期望的與真實情況的落差)找出
數位學習需求 4 4.45
81. 經由工作分析(員工技能與工作績效間之差距)找出數
位學習需求 4 4.36
需
求 評
估 82. 經由個人分析(員工技能與未來工作要求的落差)找出
數位學習需求 5 4.45
♦ 該背景資訊輸入部分意見與上次一致,不需再調整
二、 數位學習評鑑——訓練方案設計過程
第二次問卷 統計分析 題
項 指標
眾 數
平 均
您 上 次 的 答 案
調 整 分 數 欄 83. 根據需求確定訓練目標,訂定數位學習計畫 5 4.73
84. 確定學習對象(員工或主管) 4 4.36 85. 分析學習者特性(依據其興趣、目的、需求,來編制合
適的教材) 4 4.45
86. 依預算規劃數位學習課程 4 4.45
87. 確定線上課程的產生方式(由講師或行政人員自製、外
包客製化、或購買市面上現有的課程) 4 4.45
88. 規劃課程時間長短 4 4.27
計 畫
89. 確定數位學習地點(為公司或特定的電腦教室、或不限
地點) 4 3.91
90. 組織整體教學設計的流程 4 4.27
91. 規劃訓練的內容大綱及主題 5 4.73
92. 確定每個主題之內容設計、學習活動 4 4.09
93. 規劃教材呈現方式(單純講師講述或輔以 power point
呈現) 4 4.45
94. 評量學習測驗的方式,是否可以反應學習成效 5 4.73
95. 評量測驗內容的合宜性 4 4.27
設
計 發 展 教 材
96. 規劃教材所需硬體周邊設備之需求 4 4.18 97. 評量課程錄製過程的品質(power point 呈現,內容的
流暢性等) 5 4.64
98. 將數位教材上線測試與修正 4 4.45
99. 確定數位教材內容之管理與維護(無網頁無連結失效、
資訊錯誤的情況出現) 4 4.27
教
材 品 質 管
理 100. 確定線上輔助或學習說明手冊足夠幫助學習者操作、使
用課程 4 4.27
♦ 該背景資訊輸入部分意見與上次一致,不需再調整
三、 數位學習評鑑(以 Kirkpatrick 評鑑為基準)
第二次問卷 統計分析 題
項 指標
眾 數
平 均
您 上 次 的 答 案
調 整 分 數 欄 101. 評量課程內容足夠反應訓練目標 5 4.73
102. 評量學習者對課程內容的滿意度(課程與工作的相關
性、容易理解) 5 4.73
103. 評量學習者對線上講師的滿意度 4 4.09
104. 評量數位學習是否有足夠人機互動 4 4.18
105. 評量學習者對訓練的測驗方式,是否可激起其學習意願 5 4.55
106. 評量學習者對平台介面的滿意度(教學媒體方便性、系
統介面的美觀性等) 4 4.36
107. 評量學習者是否容易使用平台介面(瀏覽、文章銜接、
網頁連結的流暢性等) 5 4.55
108. 評量線上輔助或學習手冊等教學導引足夠支持學習活
動 4 4.27
109. 評量學習者對場地設備的滿意度 4 3.64
110. 評量學習者對整體環境的滿意度 4 3.73
反
應
111. 評量時間的安排 (教學內容長度適切而不會太匆促) 5 4.55
學
習
112. 評量執行學習效果(知識、技能、態度等各層面)的適
切性 5 4.64
113. 收集學習者行為改變的資料,如調查或面訪相關可以觀
察到學習者行為的人(如主管、部屬、同事等) 4 4.36
114. 評量學習者能應用所學於工作 4 4.36 行
為
115. 評量收集資料的時間點(受訓後三個月、半年或一年) 4 4.00
116. 評估訓練對個人績效的影響 5 4.36
117. 評估訓練對團隊(部門)績效的影響 4 4.27
成
效 118. 評估訓練對組織績效的影響(如顧客滿意度、計算成本
效益) 5 4.55
119. 確認進行 ROI(投資報酬率)評鑑的必要性 5 4.45
120. 確認 ROI(投資報酬率)評鑑的可行性 4 4.00
121. 確認計算 ROI(投資報酬率)的正確性 4 3.91
R
O
I 122. 確認 ROI(投資報酬率)評鑑的合理性 4 4.09
♦ 該背景資訊輸入部分意見與上次一致,不需再調整
註一:ROI(return on investment,投資報酬率):Barron 曾言訓練可以對組 織產生利潤,所以我們可以測量訓練的投資報酬率(ROI),藉由這個動作,我們
可以發現投資的每一分錢是如何對組織產生貢獻,並且可以修正未來訓練方案。
ROI 公式=(訓練效益─訓練成本)/訓練成本*100%
四、請重新填答下列題項
爭議題 第一回合問卷中,第一部份資金的題項為
♦ 評估組織長期網路的租賃及設備維護等預算
第二回合問卷中,第一部份資金的題項,專家建議改為兩個題項
♦ 評估組織長期平台的租賃預算
♦ 評估組織長期數位學習的設備維護費
請問您認為應該
維持一個題項,並且我的答案為 。(請填答 1~5 中合適的答案)
(第一回問卷中該題項平均數 4.5,眾數 4,上次您的答案為 ) 必須區分為兩個題項,我的答案不需再改變。
五、基本資料
1. 姓名:_______________
※ 本問卷到此為止,由於本問卷純屬學術性質,絕不做其他用途或公開使用,
因此請您放心作答,最後請您再次檢查是否有遺漏之處,並請將問卷寄回。
為了方便本研究進度之進行與掌控,請於收到本問卷後一週內以郵寄或 E-mail 的方式將本問卷寄回,非常感謝您在百忙之中抽空填寫問卷。
附錄六、第一回合 數位學習評鑑指標問卷統計結果 題項 1 2 3 4 5 6 7 8 9 10 11
背景 平均數 眾數 Q1 Q3 Q 標準差
1 5 5 5 5 5 4 5 5 5 5 5 4.91 5 5.00 5.00 0.00 0.30 2 5 3 5 4 4 4 3 5 5 2 4 4.00 5 3.50 5.00 0.75 1.00 3 4 3 4 4 4 5 3 4 4 5 4 4.00 4 4.00 4.00 0.00 0.63 4 5 4 5 5 5 5 5 5 5 5 5 4.91 5 5.00 5.00 0.00 0.30 5 4 4 5 3 5 4 5 5 4 5 5 4.45 5 4.00 5.00 0.50 0.69 6 4 4 3 3 4 3 5 4 4 2 4 3.64 4 3.00 4.00 0.50 0.81 7 4 2 4 4 5 4 4 5 4 5 5 4.18 4 4.00 5.00 0.50 0.87 8 4 1 3 4 4 5 4 5 5 5 5 4.09 5 4.00 5.00 0.50 1.22 9 5 4 5 5 5 5 4 5 5 4 5 4.73 5 4.50 5.00 0.25 0.47 10 5 3 4 3 4 5 4 3 4 4 4 3.91 4 3.50 4.00 0.25 0.70 11 4 3 4 4 5 5 4 4 3 5 4 4.09 4 4.00 4.50 0.25 0.70 12 4 2 5 5 5 5 4 4 4 5 4 4.27 4 4.00 5.00 0.50 0.90 13 4 4 5 3 4 4 4 5 5 5 5 4.36 4 4.00 5.00 0.50 0.67 14 4 修改 5 4 4 4 4 5 5 5 5 4.50 4 4.00 5.00 0.50 1.45 15 5 4 5 4 4 4 4 4 4 3 4 4.09 4 4.00 4.00 0.00 0.54 16 4 4 5 4 4 4 5 3 4 5 3 4.09 4 4.00 4.50 0.25 0.70 17 4 4 5 4 4 4 5 4 4 4 3 4.09 4 4.00 4.00 0.00 0.54 18 4 4 5 4 4 4 4 3 3 4 2 3.73 4 3.50 4.00 0.25 0.79 方案
19 4 5 5 5 5 4 5 5 4 5 5 4.73 5 4.50 5.00 0.25 0.47 20 4 5 5 4 4 3 5 5 5 5 4 4.45 5 4.00 5.00 0.50 0.69 21 4 5 5 5 4 4 5 4 4 4 4 4.36 4 4.00 5.00 0.50 0.50 22 4 4 5 5 3 4 5 5 5 4 5 4.45 5 4.00 5.00 0.50 0.69 23 4 4 5 3 4 4 5 3 4 5 5 4.18 4 4.00 5.00 0.50 0.75 24 4 5 5 3 4 4 5 4 4 4 5 4.27 4 4.00 5.00 0.50 0.65 25 4 5 5 2 4 4 3 4 4 5 4 4.00 4 4.00 4.50 0.25 0.89 26 4 4 5 5 4 5 4 4 4 4 3 4.18 4 4.00 4.50 0.25 0.60 27 4 5 5 5 4 5 4 4 4 5 5 4.55 5 4.00 5.00 0.50 0.52 28 4 5 5 2 4 5 5 4 4 4 4 4.18 4 4.00 5.00 0.50 0.87 29 3 4 5 2 4 5 5 4 4 3 5 4.00 4 3.50 5.00 0.75 1.00 30 4 5 5 5 5 5 5 5 4 5 5 4.82 5 5.00 5.00 0.00 0.40 31 4 4 5 4 4 5 5 4 4 5 4 4.36 4 4.00 5.00 0.50 0.50 32 4 4 5 3 4 5 5 4 4 4 4 4.18 4 4.00 4.50 0.25 0.60 33 4 5 5 5 3 5 5 4 4 5 4 4.45 5 4.00 5.00 0.50 0.69 34 4 5 5 3 4 4 4 4 4 5 4 4.18 4 4.00 4.50 0.25 0.60
35 4 5 5 3 4 4 5 4 4 5 5 4.36 4 4.00 5.00 0.50 0.67 36 4 5 5 5 4 4 4 4 4 5 3 4.27 4 4.00 5.00 0.50 0.65 成效
37 4 5 5 5 4 5 4 5 5 5 5 4.73 5 4.50 5.00 0.25 0.47 38 4 5 5 5 4 5 3 4 4 4 5 4.36 4 4.00 5.00 0.50 0.67 39 4 5 5 4 4 5 3 4 4 4 1 3.91 4 4.00 4.50 0.25 1.14 40 5 5 5 5 3 5 4 4 4 4 1 4.09 5 4.00 5.00 0.50 1.22 41 3 5 5 5 3 5 3 4 4 4 4 4.09 5 3.50 5.00 0.75 0.83 42 4 5 5 5 4 5 3 4 4 5 4 4.36 4 4.00 5.00 0.50 0.67 43 4 5 5 5 4 5 3 4 4 5 5 4.45 5 4.00 5.00 0.50 0.69 44 4 5 5 5 4 4 4 4 4 4 3 4.18 4 4.00 4.50 0.25 0.60 45 3 5 5 3 4 3 2 4 4 4 2 3.55 4 3.00 4.00 0.50 1.04 46 3 5 5 3 4 4 2 4 4 4 2 3.64 4 3.00 4.00 0.50 1.03 47 4 5 5 5 3 4 2 4 4 5 5 4.18 5 4.00 5.00 0.50 0.98 48 4 4 5 4 4 5 4 5 5 4 5 4.45 4 4.00 5.00 0.50 0.52 49 4 5 5 5 4 4 3 5 5 3 4 4.27 5 4.00 5.00 0.50 0.79 50 4 5 5 5 4 4 3 5 5 4 5 4.45 5 4.00 5.00 0.50 0.69 51 4 4 5 5 4 4 3 4 3 3 2 3.73 4 3.00 4.00 0.50 0.90 52 5 5 5 4 5 4 3 5 5 5 4 4.55 5 4.00 5.00 0.50 0.69 53 4 5 5 4 3 4 3 5 5 5 4 4.27 5 4.00 5.00 0.50 0.79 54 5 5 5 4 4 4 3 5 5 5 3 4.36 5 4.00 5.00 0.50 0.81 55 4 1 5 4 4 5 3 5 5 3 5 4.00 5 3.50 5.00 0.75 1.26 56 4 4 5 4 4 5 2 5 4 3 4 4.00 4 4.00 4.50 0.25 0.89 57 4 4 5 4 4 5 2 4 4 3 5 4.00 4 4.00 4.50 0.25 0.89 58 4 4 5 4 4 5 3 5 4 3 4 4.09 4 4.00 4.50 0.25 0.70