• 沒有找到結果。

第一節 專家訪談結果分析

N/A
N/A
Protected

Academic year: 2021

Share "第一節 專家訪談結果分析 "

Copied!
23
0
0

加載中.... (立即查看全文)

全文

(1)

第四章 資料分析與討論

本章共分成五節,分別為專家訪談結果分析、德懷術第一回合資 料分析與討論、德懷術第二回合資料分析與討論、德懷術第三回合資 料分析與討論、綜合結果討論,各節內容分述於以下各小節。

在德懷術三回問卷中,本研究採用平均數、標準差、四分位差來 分析問卷。平均值越大表示該題項重要性程度越高,四分位差表示專 家意見集中、具共識的程度,並檢視標準差是否專家意見趨於一致。

第一節 專家訪談結果分析

研究者在研究初期經由文獻探討,將數位學習評鑑分為三大區 塊:背景資訊輸入、方案設計、成效評鑑三部分。

在背景輸入的部分一開始主要依據人、事、時、地、物來加以分 類,但是經由訪談後發現,雖然組織在進行評鑑時,也會考慮到這幾 個指標,但是他們會根據數位學習施行的流程來評鑑,因此根據訪談 的結果,研究者便將背景資訊輸入指標排列的順序改為組織進行數位 學習評鑑施行的步驟,如此組織便能按步進行數位學習評鑑。

首先組織欲進行訓練,會先評估該訓練是否要進行數位學習,還 是使用傳統訓練,因此要先進行這部分的需求評估,針對當時的目

(2)

第二節 德懷術第一回合資料處理與分析

在第一回合問卷中,除了問卷題項外,專家群可以在備註欄陳 述對評鑑標準的修正意見。以下是第一回問卷回收後,統計分析結果。

表 4-1 第一回合 數位學習評鑑指標背景資訊輸入問卷統計分析表 數位學習評鑑——背景資訊輸入

題項 指標

Q1 Q3 Q 標準 1. 評估組織對數位學習的需求 4.91 5.00 5.00 0.00 0.30 2. 收集企業數位學習的相關資訊 4.00 3.50 5.00 0.75 1.00 3. 諮詢數位學習的外部顧問 4.00 4.00 4.00 0.00 0.63 4. 評估高階主管支持數位學習的程度 4.91 5.00 5.00 0.00 0.30 5. 評估組織現有網路設備部署狀況(電

腦、網路連線頻寬、下載速度、軟體) 4.45 4.00 5.00 0.50 0.69 組織

現況 調查

6. 確定學習者有足夠的電腦技能 3.64 3.00 4.00 0.50 0.81 7. 評估數位學習平台自製或外包 4.18 4.00 5.00 0.50 0.87 8. 根據企業的需求,評估平台價格 4.09 4.00 5.00 0.50 1.22 9. 根據企業的需求,評估平台功能 4.73 4.50 5.00 0.25 0.47 10. 評估跨平台的整合能力(軟體支援或相

容能力) 3.91 3.50 4.00 0.25 0.70 11. 評估平台未來的延展性(擴充彈性) 4.09 4.00 4.50 0.25 0.70 學習

平台

12. 評估平台業者的售後服務 4.27 4.00 5.00 0.50 0.90 13. 評估組織數位學習的預算分配 4.36 4.00 5.00 0.50 0.67 資金 14. 評估組織長期網路的租賃及設備維護等

預算 4.50 4.00 5.00 0.50 1.45

方案 人員

15. 規劃數位學習所需的人才(如導入規劃 師、課程規劃師、內容設計師、多媒體 設計師、線上講師、HR 人員等)

4.09 4.00 4.00 0.00 0.54

16. 經由組織分析(組織所期望的與真實情

況的落差)找出訓練需求 4.09 4.00 4.50 0.25 0.70 17. 經由工作分析(員工技能與工作績效間

之差距)找出訓練需求 4.09 4.00 4.00 0.00 0.54 需求

評估 18. 經由個人分析(員工技能與未來工作要

求的落差)找出訓練需求 3.73 3.50 4.00 0.25 0.79

註:「 」表示分數低於四,「_」表示標準差大於一。

(3)

在第一回合背景資訊輸入問卷統計分析如下:

一、 平均數與標準差:

我們可以看出專家對於「評估組織對數位學習的需求」「評估高 階主管支持數位學習的程度」「根據企業的需求,評估平台功能」「評 估組織長期網路的租賃及設備維護等預算」平均數皆在 4.5 以上,評 定為「非常重要」,其餘為「重要」

「根據企業的需求,評估平台價格」「評估組織長期網路的租賃 及設備維護等預算」這兩個指標的標準差大於一,表示專家意見較為 分歧。

二、 四分位數:

根據四分位數,除了「收集企業數位學習的相關資訊」為中度共 識外,其餘皆為高度共識。

三、 專家建議:

(一) 增加「評估數位學習開課規模(開課人數、時數的多寡)」,

因為規模越大越適合進行數位學習。

(二) 將「確定學習者有足夠的電腦技能」改為「確定學習者有足 夠的電腦技能運用數位學習界面」。

(三) 將「評估組織長期網路租賃及設備維護等預算」修改成兩個 題項,因為是兩個不同性質的指標。

(4)

表 4-2 第一回合 數位學習評鑑指標方案設計問卷統計分析表 數位學習評鑑——方案設計

指標

Q1 Q3 Q 19. 根據需求確定訓練目標,訂定訓練計

4.73 4.50 5.00 0.25 0.47

20. 確定學習對象(員工或主管) 4.45 4.00 5.00 0.50 0.69 21. 分析學習者特性(依據其興趣、目的、

需求,來編制合適的教材) 4.36 4.00 5.00 0.50 0.50 22. 依預算規劃數位學習課程 4.45 4.00 5.00 0.50 0.69 23. 確定線上課程的產生方式(由講師或

行政人員自製、外包客製化、或購買 市面上現有的課程)

4.18 4.00 5.00 0.50 0.75

24. 規劃課程時間長短 4.27 4.00 5.00 0.50 0.65

25. 確定訓練地點(為公司或特定的電腦

教室、或不限地點) 4.00 4.00 4.50 0.25 0.89 26. 組織整體教學設計的流程 4.18 4.00 4.50 0.25 0.60 27. 規劃訓練的內容大綱及主題 4.55 4.00 5.00 0.50 0.52 28. 確定每個主題之內容設計、學習活動 4.18 4.00 5.00 0.50 0.87 29. 規劃課程型態(講師講述、power point

等) 4.00 3.50 5.00 0.75 1.00

30. 評量學習測驗的方式,是否可以反應

學習成效 4.82 5.00 5.00 0.00 0.40 31. 評量測驗內容的合宜性 4.36 4.00 5.00 0.50 0.50

32. 規劃教材、硬體邊設備、教學媒體的

需求 4.18 4.00 4.50 0.25 0.60

33. 評 量 課 程 錄 製 過 程 的 品 質 ( power

point 呈現,內容的流暢性等) 4.45 4.00 5.00 0.50 0.69 34. 將數位教材上線測試與修正 4.18 4.00 4.50 0.25 0.60 35. 確定數位教材內容之管理與維護(無

網頁無連結失效、資訊錯誤的情況出 現)

4.36 4.00 5.00 0.50 0.67

36. 確定線上輔助或學習說明手冊足夠幫

助學習者操作、使用課程 4.27 4.00 5.00 0.50 0.65

註:「 」表示分數低於四,「_」表示標準差大於一。

(5)

在第一回合方案設計評鑑問卷統計分析如下:

一、 平均數與標準差:

我們可以看出所有答案皆大於四,其中「根據需求確定訓練目 標,訂定訓練計畫」「規劃訓練的內容大綱及主題」「評量學習測驗 的方式,是否可以反應學習成效」分數大於 4.5,表示該指標非常重 要,其餘評定為重要。

「規劃課程型態(講師講述、power point 等)」這兩個指標的 標準差大於等於一,表示專家意見較為分歧。

二、 四分位數:

除了「規劃課程型態(講師講述、power point 等)」為中度共 識外,其餘皆為高度共識。

三、 專家建議:

(一) 將「根據需求確定訓練目標,訂定訓練計畫」修改為「根據需 求確定訓練目標,訂定數位學習計畫」。

(二) 將「確定訓練地點」修改為「確定數位學習地點」

(三) 將「規劃課程型態(講師講述、power point 等)」修改為「規 劃教材呈現方式(單純講師講述或輔以 power point 呈現)」 (四) 將「規劃教材、硬體邊設備、教學媒體的需求」修改為「規劃

教材所需硬體周邊設備之需求」

(6)

表 4-3 第一回合 數位學習評鑑指標成效評鑑問卷統計分析表 數位學習評鑑——成效評鑑

指標

Q1 Q3 Q 37. 評量課程內容足夠反應訓練目標 4.73 4.50 5.00 0.25 0.47 38. 評量學習者對課程內容的滿意度(課

程與工作的相關性、容易理解) 4.36 4.00 5.00 0.50 0.67 39. 評量學習者對線上講師的滿意度 3.91 4.00 4.50 0.25 1.14 40. 評量數位學習是否有足夠的互動 4.09 4.00 5.00 0.50 1.22 41. 評量學習者對訓練的測驗方式,是否

可激起其學習意願 4.09 3.50 5.00 0.75 0.83 42. 評量學習者對平台介面的滿意度(教

學媒體方便性、系統介面的美觀性等) 4.36 4.00 5.00 0.50 0.67 43. 評 量 學 習 者 是 否 容 易 使 用 平 台 介 面

(瀏覽、文章銜接、網頁連結的流暢 性等)

4.45 4.00 5.00 0.50 0.69

44. 評量線上輔助或學習手冊等教學導引

足夠支持學習活動 4.18 4.00 4.50 0.25 0.60 45. 評量學習者對場地設備的滿意度 3.55 3.00 4.00 0.50 1.04 46. 評量學習者對整體環境的滿意度 3.64 3.00 4.00 0.50 1.03

47. 評量時間的安排 (教學內容長度適切

而不會太匆促) 4.18 4.00 5.00 0.50 0.98

48. 評量學習的效果(知識、技能、態度

等各層面) 4.45 4.00 5.00 0.50 0.52 49. 收集學習者行為改變的資料,如調查

或面訪相關可以觀察到學習者行為的 人(如主管、部屬、同事等)

4.27 4.00 5.00 0.50 0.79

50. 評量學習者能應用所學於工作 4.45 4.00 5.00 0.50 0.69

51. 評量收集資料的時間點(受訓後三個

月、半年或一年) 3.73 3.00 4.00 0.50 0.90 52. 評估訓練對個人績效的影響 4.55 4.00 5.00 0.50 0.69 53. 評估訓練對團隊(部門)績效的影響 4.27 4.00 5.00 0.50 0.79

54. 評估訓練對組織績效的影響(如顧客

滿意度、計算成本效益) 4.36 4.00 5.00 0.50 0.81

(7)

55. 確認進行 ROI 評鑑的必要性 4.00 3.50 5.00 0.75 1.26 56. 確認 ROI 評鑑的可行性 4.00 4.00 4.50 0.25 0.89 57. 確認計算 ROI 的正確性 4.00 4.00 4.50 0.25 0.89

ROI

58. 確認 ROI 評鑑的合理性

4.09 4.00 4.50 0.25 0.70

註:「 」表示分數低於四,「_」表示標準差大於一。

在第一回合成效評鑑問卷統計分析如下:

一、 平均數與標準差:

「評量課程內容足夠反應訓練目標」「評估訓練對個人績效的影 響」為非常重要外,其餘皆為重要。

「規劃課程型態(講師講述、power point 等)」這兩個指標的 標準差大於等於一,表示專家意見較為分歧。

二、 四分位數:

除了「評量學習者對訓練的測驗方式,是否可激起其學習意願」

與「確認進行 ROI 評鑑的必要性」為中度共識外,其餘皆為高度共識。

三、 專家建議:

(一) 將 ROI 寫上中文、英文全文,並加以解釋其內涵。

(二) 將「評量數位學習是否有足夠的互動」修改為「評量數位學習 是否有足夠的人機互動」。

(8)

第三節 德懷術第二回合資料處理與分析

在第二回問卷中,研究者綜合第一回專家的意見加以統計整 理,將平均數、眾數、專家第一回填達的答案呈現在第二回問卷中,

讓專家得以參考並重新填答。

表 4-4 第二回合 數位學習評鑑指標背景資訊輸入問卷統計分析表 數位學習評鑑——背景資訊輸入部分

指標

Q1 Q3 Q

1. 評估組織對數位學習的需求 4.91 5.00 5.00 0.00 0.30 2. 收集企業數位學習的相關資訊 4.45 4.00 5.00 0.50 0.52 3. 評估數位學習開課規模(開課人數、時數

的多寡) 4.09 4.00 4.00 0.00 0.54 4. 諮詢數位學習的外部顧問 4.00 4.00 4.00 0.00 0.00 5. 評估高階主管支持數位學習的程度 4.91 5.00 5.00 0.00 0.30 6. 評估組織現有網路設備部署狀況(電腦、

網路連線頻寬、下載速度、軟體) 4.55 4.00 5.00 0.50 0.52

調

7. 確定學習者有足夠的電腦技能運用數位

學習介面 4.27 4.00 5.00 0.50 0.65 8. 評估數位學習平台自製或外包 4.18 4.00 4.00 0.00 0.40 9. 根據企業的需求,評估平台價格 4.36 4.00 5.00 0.50 0.50 10. 根據企業的需求,評估平台功能 4.64 4.00 5.00 0.50 0.50 11. 評估跨平台的整合能力(軟體支援或相容

能力) 4.00 4.00 4.00 0.00 0.00

12. 評估平台未來的延展性(擴充彈性) 4.09 4.00 4.00 0.00 0.30

13. 評估平台業者的售後服務 4.27 4.00 4.50 0.25 0.47 14. 評估組織數位學習的預算分配 4.36 4.00 5.00 0.50 0.50 15. 評估組織長期平台的租賃預算 4.00 4.00 4.00 0.00 0.63

16. 評估組織長期數位學習的設備維護費 4.27 4.00 4.50 0.25 0.47 17. 規劃數位學習所需的人才(如導入規劃

師、課程規劃師、內容設計師、多媒體設 計師、線上講師、學習網站經營人才、HR 人員等)

4.18 4.00 4.00 0.00 0.40

18. 評估內部講師制度(以利後續課程設計) 4.36 4.00 5.00 0.50 0.50

(9)

19. 經由組織分析(組織所期望的與真實情

況的落差)找出數位學習需求 4.45 4.00 5.00 0.50 0.52 20. 經由工作分析(員工技能與工作績效間

之差距)找出數位學習需求 4.36 4.00 5.00 0.50 0.50 需求

評估

21. 經由個人分析(員工技能與未來工作要

求的落差)找出數位學習需求 4.45 4.00 5.00 0.50 0.69

註:「 」表示分數低於四,「_」表示標準差大於一。

在第二回合背景資訊輸入問卷統計分析如下:

一、 平均數與標準差:

「評估組織對數位學習的需求」「根據企業的需求,評估平台功 能」「評估組織現有網路設備部署狀況」「評估高階主管支持數位學 習的程度」這些指標的平均數皆高於 4.5,歸類於「非常重要」,其 餘指標為「重要」的程度。

在第二回背景資訊輸入問卷中,標準差皆小於一,表示專家意見 趨於一致。

二、 四分位數:

四分位數皆在 0.6 以下,表示專家群具有高度共識。

三、 專家建議:

(一) 對於「15.評估組織長期平台的租賃預算」與「16.評估組織 長期數位學習的設備維護費」有專家認為題意似乎過於接近,與 第一回合有專家認為該項不同的變項,必須加以區分,意見有所

(10)

表 4-5 第二回合 數位學習評鑑指標方案設計問卷統計分析表 數位學習評鑑——訓練方案設計過程

指標

Q1 Q3 Q

22. 根據需求確定訓練目標,訂定數位學習計畫 4.73 4.50 5.00 0.25 0.47 23. 確定學習對象(員工或主管) 4.36 4.00 5.00 0.50 0.50 24. 分析學習者特性(依據其興趣、目的、需求,

來編制合適的教材) 4.45 4.00 5.00 0.50 0.52 25. 依預算規劃數位學習課程 4.45 4.00 5.00 0.50 0.52 26. 確定線上課程的產生方式(由講師或行政人

員自製、外包客製化、或購買市面上現有的 課程)

4.45 4.00 5.00 0.50 0.52

27. 規劃課程時間長短 4.27 4.00 5.00 0.50 0.65

28. 確定數位學習地點(為公司或特定的電腦教

室、或不限地點) 3.91 4.00 4.00 0.00 0.54 29. 組織整體教學設計的流程 4.27 4.00 4.50 0.25 0.47 30. 規劃訓練的內容大綱及主題 4.73 4.50 5.00 0.25 0.47 31. 確定每個主題之內容設計、學習活動 4.09 4.00 4.50 0.25 0.83 32. 規劃教材呈現方式(單純講師講述或輔以

power point 呈現) 4.45 4.00 5.00 0.50 0.52 33. 評量學習測驗的方式,是否可以反應學習成

4.73 4.50 5.00 0.25 0.47

34. 評量測驗內容的合宜性 4.27 4.00 4.50 0.25 0.47

35. 規劃教材所需硬體邊設備之需求 4.18 4.00 4.00 0.00 0.40 36. 評量課程錄製過程的品質(power point 呈

現,內容的流暢性等) 4.64 4.00 5.00 0.50 0.50 37. 將數位教材上線測試與修正 4.45 4.00 5.00 0.50 0.52 38. 確定數位教材內容之管理與維護(無網頁無

連結失效、資訊錯誤的情況出現) 4.27 4.00 4.50 0.25 0.47

39. 確定線上輔助或學習說明手冊足夠幫助學

習者操作、使用課程 4.27 4.00 5.00 0.50 0.65

註:「 」表示分數低於四,「_」表示標準差大於一。

在第二回合方案設計問卷統計分析如下:

一、 平均數與標準差:

(11)

「根據需求確定訓練目標,訂定數位學習計畫」「評量學習測驗 的方式,是否可以反應學習成效」這些指標的平均數皆高於 4.5,歸 類於「非常重要」,其餘指標為「重要」的程度。

在第二回方案設計問卷中,標準差皆小於一,表示專家意見趨於 一致。

二、 四分位數:

四分位數皆在 0.6 以下,表示專家群具有高度共識。

三、 專家建議:

(一) 「35.規劃教材所需硬體邊設備之需求」修正為「規劃教材所 需硬體周邊設備之需求」

(12)

表 4-6 第二回合 數位學習評鑑指標成效評鑑問卷統計分析表 數位學習評鑑——成效評鑑

指標

Q1 Q3 Q 標準 40. 評量課程內容足夠反應訓練目標 4.73 4.50 5.00 0.25 0.47 41. 評量學習者對課程內容的滿意度(課程與

工作的相關性、容易理解) 4.73 4.50 5.00 0.25 0.47 42. 評量學習者對線上講師的滿意度 4.09 4.00 4.50 0.25 0.83 43. 評量數位學習是否有足夠人機互動 4.18 4.00 4.00 0.00 0.40 44. 評量學習者對訓練的測驗方式,是否可激

起其學習意願 4.55 4.00 5.00 0.50 0.69 45. 評量學習者對平台介面的滿意度(教學媒

體方便性、系統介面的美觀性等) 4.36 4.00 5.00 0.50 0.67 46. 評量學習者是否容易使用平台介面(瀏

覽、文章銜接、網頁連結的流暢性等) 4.55 4.00 5.00 0.50 0.52 47. 評量線上輔助或學習手冊等教學導引足夠

支持學習活動 4.27 4.00 5.00 0.50 0.65 48. 評量學習者對場地設備的滿意度 3.64 3.00 4.00 0.50 0.81 49. 評量學習者對整體環境的滿意度 3.73 3.50 4.00 0.25 0.79

50. 評量時間的安排 (教學內容長度適切而不

會太匆促) 4.55 4.00 5.00 0.50 0.52

51. 評量執行學習效果(知識、技能、態度等

各層面)的適切性 4.64 4.00 5.00 0.50 0.50 52. 收集學習者行為改變的資料,如調查或面

訪相關可以觀察到學習者行為的人(如主 管、部屬、同事等)

4.36 4.00 5.00 0.50 0.50

53. 評量學習者能應用所學於工作 4.36 4.00 5.00 0.50 0.50

54. 評量收集資料的時間點(受訓後三個月、

半年或一年) 4.00 4.00 4.50 0.25 0.89 55. 評估訓練對個人績效的影響 4.36 4.00 5.00 0.50 0.67 56. 評估訓練對團隊(部門)績效的影響 4.27 4.00 5.00 0.50 0.65

57. 評估訓練對組織績效的影響(如顧客滿意

度、計算成本效益) 4.55 4.00 5.00 0.50 0.52

(13)

58. 確認進行 ROI 評鑑的必要性 4.45 4.00 5.00 0.50 0.69 59. 確認 ROI 評鑑的可行性 4.00 4.00 4.00 0.00 0.45 60. 確認計算 ROI 的正確性 3.91 4.00 4.00 0.00 0.30

ROI

61. 確認 ROI 評鑑的合理性

4.09 4.00 4.00 0.00 0.54

註:「 」表示分數低於四,「_」表示標準差大於一。

在第二回合成效評鑑問卷統計分析如下:

一、 平均數與標準差:

「評量課程內容足夠反應訓練目標」「評量學習者對課程內容的 滿意度」「評量學習者對訓練的測驗方式,是否可激起其學習意願」

「評量學習者是否容易使用平台介面」「評量時間的安排」「評量執 行學習效果」「評估訓練對組織績效的影響」這些指標的平均數皆高 於 4.5,歸類於「非常重要」,其餘指標為「重要」的程度。

在第二回成效評鑑問卷中,標準差皆小於一,表示專家意見趨於 一致。

二、 四分位數:

四分位數皆在 0.6 以下,表示專家群具有高度共識。

三、 專家建議:

專家針對第二回成效評鑑的部分,並無提出任何建議。

(14)

第四節 德懷術第三回合資料處理與分析

在第二回問卷中,標準差皆小於一,表示專家群已趨於共識,因 此第三回問卷並不需要重新填答,專家只需做最後一次確認,並回應 爭議題,若還需調整分數,可以在調整分數欄修改。

經過第三回問卷回收後統計,有 7 個專家的答案不再改變,包括 專家 1、專家 2、專家 6、專家 7、專家 8、專家 9、專家 10。

表 4-7 第三回合 數位學習評鑑指標背景資訊輸入問卷統計分析表 數位學習評鑑——背景資訊輸入部分

題項 指標

Q1 Q3 Q

1. 評估組織對數位學習的需求 4.91 5.00 5.00 0.00 0.30 2. 收集企業數位學習的相關資訊 4.45 4.00 5.00 0.50 0.52 3. 評估數位學習開課規模(開課人數、時

數的多寡) 4.09 4.00 4.00 0.00 0.54 4. 諮詢數位學習的外部顧問 4.00 4.00 4.00 0.00 0.00 5. 評估高階主管支持數位學習的程度 4.91 5.00 5.00 0.00 0.30 6. 評估組織現有網路設備部署狀況(電

腦、網路連線頻寬、下載速度、軟體) 4.55 4.00 5.00 0.50 0.52 組織

現況 調查

7. 確定學習者有足夠的電腦技能運用數

位學習介面 4.36 4.00 5.00 0.50 0.50 8. 評估數位學習平台自製或外包 4.18 4.00 4.00 0.00 0.40 9. 根據企業的需求,評估平台價格 4.36 4.00 5.00 0.50 0.50 10. 根據企業的需求,評估平台功能 4.64 4.00 5.00 0.50 0.50 11. 評估跨平台的整合能力(軟體支援或相

容能力) 4.00 4.00 4.00 0.00 0.00 12. 評估平台未來的延展性(擴充彈性) 4.09 4.00 4.00 0.00 0.30 學習

平台

13. 評估平台業者的售後服務 4.27 4.00 4.50 0.25 0.47 14. 評估組織數位學習的預算分配 4.36 4.00 5.00 0.50 0.50 15. 評估組織長期平台的租賃預算 4.18 4.00 4.00 0.00 0.40 資金

16. 評估組織長期數位學習的設備維護費 4.09 4.00 4.00 0.00 0.30

(15)

17. 規劃數位學習所需的人才(如導入規劃 師、課程規劃師、內容設計師、多媒體設 計師、線上講師、學習網站經營人才、HR 人員等)

4.18 4.00 4.00 0.00 0.40

18. 評估內部講師制度(以利後續課程設計) 4.36 4.00 5.00 0.50 0.50 19. 經由組織分析(組織所期望的與真實情況

的落差)找出數位學習需求 4.45 4.00 5.00 0.50 0.52 20. 經由工作分析(員工技能與工作績效間之

差距)找出數位學習需求 4.36 4.00 5.00 0.50 0.50

21. 經由個人分析(員工技能與未來工作要求

的落差)找出數位學習需求 4.45 4.00 5.00 0.50 0.69

註:「 」表示分數低於四,「_」表示標準差大於一。

在第三回合背景資訊輸入問卷統計分析如下:

一、 平均數與標準差:

「評估組織對數位學習的需求」「評估高階主管支持數位學習的 程度」「評估組織現有網路設備部署狀況」「根據企業的需求,評估 平台功能」,這些指標的平均數皆高於 4.5,歸類於「非常重要」,其 餘指標為「重要」的程度。

二、 四分位數:

四分位數皆在 0.6 以下,表示專家群具有高度共識。

(16)

表 4-8 第三回合 數位學習評鑑指標方案設計問卷統計分析表 數位學習評鑑——訓練方案設計過程

指標

Q1 Q3 Q

22. 根據需求確定訓練目標,訂定數位學習計畫 4.82 5.00 5.00 0.00 0.40 23. 確定學習對象(員工或主管) 4.36 4.00 5.00 0.50 0.50 24. 分析學習者特性(依據其興趣、目的、需求,

來編制合適的教材) 4.45 4.00 5.00 0.50 0.52 25. 依預算規劃數位學習課程 4.45 4.00 5.00 0.50 0.52 26. 確定線上課程的產生方式(由講師或行政人

員自製、外包客製化、或購買市面上現有的 課程)

4.45 4.00 5.00 0.50 0.52

27. 規劃課程時間長短 4.36 4.00 5.00 0.50 0.50

28. 確定數位學習地點(為公司或特定的電腦教

室、或不限地點) 3.91 4.00 4.00 0.00 0.54 29. 組織整體教學設計的流程 4.27 4.00 4.50 0.25 0.47 30. 規劃訓練的內容大綱及主題 4.82 5.00 5.00 0.00 0.40 31. 確定每個主題之內容設計、學習活動 4.18 4.00 4.50 0.25 0.60 32. 規劃教材呈現方式(單純講師講述或輔以

power point 呈現) 4.45 4.00 5.00 0.50 0.52 33. 評量學習測驗的方式,是否可以反應學習成

4.73 4.50 5.00 0.25 0.47

34. 評量測驗內容的合宜性 4.27 4.00 4.50 0.25 0.47

35. 規劃教材所需硬體邊設備之需求 4.18 4.00 4.00 0.00 0.40 36. 評量課程錄製過程的品質(power point 呈

現,內容的流暢性等) 4.82 5.00 5.00 0.00 0.40 37. 將數位教材上線測試與修正 4.45 4.00 5.00 0.50 0.52 38. 確定數位教材內容之管理與維護(無網頁無

連結失效、資訊錯誤的情況出現) 4.27 4.00 4.50 0.25 0.47

39. 確定線上輔助或學習說明手冊足夠幫助學

習者操作、使用課程 4.27 4.00 5.00 0.50 0.65

註:「 」表示分數低於四,「_」表示標準差大於一。

在第三回合方案設計問卷統計分析如下:

一、 平均數與標準差:

(17)

「根據需求確定訓練目標,訂定數位學習計畫」「規劃訓練的內 容大綱及主題」「評量學習測驗的方式,是否可以反應學習成效」「評 量課程錄製過程的品質」這些指標的平均數皆高於 4.5,歸類於「非 常重要」,其餘指標為「重要」的程度。

二、 四分位數:

四分位數皆在 0.6 以下,表示專家群具有高度共識。

(18)

表 4-9 第三回合 數位學習評鑑指標成效評鑑問卷統計分析表 數位學習評鑑——成效評鑑

指標

Q1 Q3 Q 標準 40. 評量課程內容足夠反應訓練目標 4.73 4.50 5.00 0.25 0.47 41. 評量學習者對課程內容的滿意度(課程與

工作的相關性、容易理解) 4.82 5.00 5.00 0.00 0.40 42. 評量學習者對線上講師的滿意度 4.00 4.00 4.00 0.00 0.77 43. 評量數位學習是否有足夠人機互動 4.18 4.00 4.00 0.00 0.40 44. 評量學習者對訓練的測驗方式,是否可激

起其學習意願 4.64 4.50 5.00 0.25 0.67 45. 評量學習者對平台介面的滿意度(教學媒

體方便性、系統介面的美觀性等) 4.36 4.00 5.00 0.50 0.67 46. 評量學習者是否容易使用平台介面(瀏

覽、文章銜接、網頁連結的流暢性等) 4.64 4.00 5.00 0.50 0.50 47. 評量線上輔助或學習手冊等教學導引足夠

支持學習活動 4.27 4.00 5.00 0.50 0.65 48. 評量學習者對場地設備的滿意度 3.82 3.50 4.00 0.25 0.60 49. 評量學習者對整體環境的滿意度 3.73 3.50 4.00 0.25 0.79

50. 評量時間的安排 (教學內容長度適切而不

會太匆促) 4.64 4.00 5.00 0.50 0.50

51. 評量執行學習效果(知識、技能、態度等

各層面)的適切性 4.64 4.00 5.00 0.50 0.50 52. 收集學習者行為改變的資料,如調查或面

訪相關可以觀察到學習者行為的人(如主 管、部屬、同事等)

4.36 4.00 5.00 0.50 0.50

53. 評量學習者能應用所學於工作 4.36 4.00 5.00 0.50 0.50

54. 評量收集資料的時間點(受訓後三個月、

半年或一年) 4.00 4.00 4.50 0.25 0.89 55. 評估訓練對個人績效的影響 4.27 4.00 5.00 0.50 0.65 56. 評估訓練對團隊(部門)績效的影響 4.27 4.00 5.00 0.50 0.65

57. 評估訓練對組織績效的影響(如顧客滿意

度、計算成本效益) 4.64 4.00 5.00 0.50 0.50

(19)

58. 確認進行 ROI 評鑑的必要性 4.45 4.00 5.00 0.50 0.69 59. 確認 ROI 評鑑的可行性 4.00 4.00 4.00 0.00 0.45 60. 確認計算 ROI 的正確性 3.91 4.00 4.00 0.00 0.30

ROI

61. 確認 ROI 評鑑的合理性

4.09 4.00 4.00 0.00 0.54

註:「 」表示分數低於四,「_」表示標準差大於一。

在第三回合成效評鑑問卷統計分析如下:

一、 平均數與標準差:

「評量課程內容足夠反應訓練目標」「評量學習者對課程內容的 滿意度」「評量學習者對訓練的測驗方式,是否可激起其學習意願」

「評量學習者是否容易使用平台介面」「評量時間的安排」「評量執 行學習效果」、「評估訓練對組織績效的影響」,這些指標的平均數皆 高於 4.5,歸類於「非常重要」,其餘指標為「重要」的程度。

二、 四分位數:

四分位數皆在 0.6 以下,表示專家群具有高度共識。

(20)

表 4-10 第三回合 數位學習評鑑指標爭議題問卷統計分析表 爭議題

第一回合問卷中,第一部份資金的題項為

評估組織長期網路的租賃及設備維護等預算

第二回合問卷中,第一部份資金的題項,專家建議改為兩個題項

評估組織長期平台的租賃預算

評估組織長期數位學習的設備維護費

結果:

選擇維持一個題項的有兩人,並且答案皆為四。

選擇區分為兩個題項的人數有九人,並且該題項的答案不需再改變。

在第一回合中,有專家認為租賃與設備維護費是不同性質的選 項,因此必須要區分為兩個選項,因此在第二回中,研究者將其分為

「評估組織長期平台的租賃預算」「評估組織長期數位學習的設備維 護費」兩個題項。

但是在第二回問卷中,有專家認為租賃與設備維護費性質非常接 近,將其分為兩個題項有爭議,因此研究者評估這兩個意見,在第三 回問卷中將該題項設為爭議題,請所有的專家根據經驗做出選擇。

結果認為維持一個題項的有兩人,而認為應該要區分為兩個題項 並且該答案不變的有九人。因此本研究將租賃與設備維護費區分為兩 個題項。

(21)

第五節 綜合結果分析

在前三節中,根據專家經驗,找出評鑑中最重要的、重要的、普 通程度的指標。

但是由於本研究採用的方法是德懷術,希經由三回合的問卷,讓 專家的意見趨於一致,所以我們必須要討論是否專家的意見有趨向平 穩的傾向,因此研究者採用三回合的標準差比較觀察專家意見趨勢。

圖 4-1 背景資訊輸入標準差比較圖

在「背景資訊輸入標準差統計圖」中,我們發現,除了第十題外,

其餘選項的標準差都逐漸降低,表示專家意見趨於一致。

背景資訊輸入 標準差比較圖

0.00 0.20 0.40 0.60 0.80 1.00 1.20 1.40

1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 背景資訊輸入題項

標準差數值

第一回問卷標準差 第二回問卷標準差 第三回問卷標準差

(22)

圖 4-2 方案設計標準差比較圖

在「方案設計標準差統計圖」中,我們發現,除了第二十四、三 十三題外,其餘選項的標準差都逐漸降低,表示專家意見趨於一致。

而「24.分析學習者特性(依據其興趣、目的、需求,來編制合 適的教材)」中標準差,由第一回 0.50 上升到 0.52 然後保持一致,

但是因為平均數在「重要」的範圍內,並且由 4.36 上升到 4.45,而 Q 亦屬高度共識的範圍,所以研究者評估不需要再做第四回合的問卷。

平均數 Q1 Q3 Q 標準差 眾數

4.36 4.00 5.00 0.50 0.50 4

4.45 4.00 5.00 0.50 0.52 4

4.45 4.00 5.00 0.50 0.52 4

「33. 評量學習測驗的方式,是否可以反應學習成效」中標準 差,由第一回 0.4 上升到 0.47 然後保持一致,但是因為在「非常重 要」的範圍內,Q 亦屬共識的範圍,所以研究者評估不需要再做第四 回合的德懷術問卷。

方案設計 標準差比較圖

0.00 0.20 0.40 0.60 0.80 1.00 1.20

22 23 24 25 26 27 28 29 30 31 32 33 34 35 36 37 38 39 方案設計題項

標準差數值

第一回問卷標準差 第二回問卷標準差 第三回問卷標準差

(23)

平均數 Q1 Q3 Q 標準差 眾數

4.82 5.00 5.00 0.00 0.40 5

4.73 4.50 5.00 0.25 0.47 5

4.73 4.50 5.00 0.25 0.47 5

圖 4-3 成效評鑑標準差比較圖

而「47. 評量線上輔助或學習手冊等教學導引足夠支持學習活 動」中標準差,由第一回 0.6 上升到 0.65 然後保持一致,但是因為 平均數在「重要」的範圍內,並且由 4.18 上升到 4.27,而 Q 亦屬高 度共識的範圍,所以研究者評估不需要再做第四回合的問卷。

平均數 Q1 Q3 Q 標準差 眾數

成效評鑑 標準差比較圖

0.00 0.20 0.40 0.60 0.80 1.00 1.20 1.40

40 41 42 43 44 45 46 47 48 49 50 51 52 53 54 55 56 57 58 59 60 61 成效評鑑題項

標準差數值

第一回問卷標準差 第二回問卷標準差 第三回問卷標準差

數據

表 4-2 第一回合 數位學習評鑑指標方案設計問卷統計分析表  數位學習評鑑——方案設計 題 項  指標  平 均  數  Q1  Q3  Q  標準 差  19.  根據需求確定訓練目標,訂定訓練計 畫  4.73 4.50 5.00  0.25  0.47 20
表 4-3 第一回合 數位學習評鑑指標成效評鑑問卷統計分析表  數位學習評鑑——成效評鑑 題 項  指標  平 均  數  Q1  Q3  Q  標準 差  37.  評量課程內容足夠反應訓練目標  4.73 4.50 5.00  0.25  0.47 38
表 4-5 第二回合 數位學習評鑑指標方案設計問卷統計分析表  數位學習評鑑——訓練方案設計過程  題 項  指標  平 均數  Q1  Q3  Q  標 準差  22.  根據需求確定訓練目標,訂定數位學習計畫 4.73 4.50 5.00  0.25  0.47 23
表 4-6 第二回合 數位學習評鑑指標成效評鑑問卷統計分析表  數位學習評鑑——成效評鑑  題 項  指標  平 均  數  Q1  Q3  Q  標準差  40.  評量課程內容足夠反應訓練目標  4.73 4.50 5.00  0.25  0.47 41
+5

參考文獻

相關文件

(五)聲音量 測、聽覺 損傷之分 類及測 量、視障 者之特殊 聽覺需 求、視障 者之聽覺 輔具使 用、聽覺 訓練、利 用聲測數 據判讀交

(一)主題式的教育旅行 根據不同部別、年級學生規劃 特色行程,訴求清楚,定位明 確,使學生具有宏觀視野。實 施時間主要在暑假及寒假。其

項目 內容 時間 資源/評量 引起動機 課文或主要教材學.. 習經驗連結

退費方式參考「職業 訓練機構設立及管 理辦法」第 16 條規 定。. 3.職業訓練機構一旦被發現有「職業訓練機 構設立及管理辦法」第 18 條所列之違規事

7S 強化並且複習英國國定數學能力指標 level 4 的內容、主要學習 level 5 的內 容、先備一些 level 6 的延伸內容。. 8S 完成並且深化 level

每一位孩子必須接受 定期的英、數檢測,以 檢視每一位孩子面臨 的學習困難點。轉換教 學方式,找到真正適合

2.學士班學生須於畢業前(建議在大三結束前)修 習並通過「社會服務學習課程」(學系服務學習課

這個開放的課程架構,可讓學校以不同 進程組織學習經歷、調節學習內容的廣