• 沒有找到結果。

信度與效度分析

在文檔中 中 華 大 學 (頁 68-75)

如表 5.2 所示,T 值為 0.072,P 值為 0.943 未達 0.05 顯著水準,表示兩組實驗樣本 之先備知識無顯著差異。

表 5.1 兩組實驗樣本先備知識之描述性統計量 個數 平均數 標準差 一般線上學習系統 35 41.3143 9.15478 線上即時診斷學習系統 35 41.4857 10.71385

表 5.2 兩組實驗樣本先備知識之獨立樣本 T 檢定

先備知識

T 自由度 顯著性(雙尾)

0.072 68 0.943

註:*p<0.05 顯著,**p<0.01 非常顯著,***p<0.001 極顯著

5.3 線上診斷機制學習系統 線上診斷機制學習系統 線上診斷機制學習系統 線上診斷機制學習系統學習績效 學習績效 學習績效 學習績效實證研究之資料分 實證研究之資料分 實證研究之資料分 實證研究之資料分 析

析 析

為了檢驗不同的線上診斷機制學習系統對於學習績效的影響,並排除程式設計 自我效能的干擾,本研究使用單因子共變數進行分析。為了讓分析結果能正確推 論,本研究在常態性、獨立性及變異數同質性之檢定上均符合基本假設,另外也對 共變數分析之組內迴歸係數同質性假設進行檢驗。在不同的線上診斷機制學習系統 對學習績效影響的共變數分析中,本研究使用了 Levene 法進行變異數同質性檢定,

如表 5.3 所示,其 F 值為 3.393,P 值為 0.070 未達 0.05 顯著水準,代表無顯著差 異。在線上診斷機制*先備知識的組內迴歸係數同質性檢驗部分,其 F 值為 2.511,P 值為 0.118 未達 0.05 顯著水準,表示二組迴歸線的斜率相同,符合共變數迴歸係數 同質性假設,而線上診斷機制學習系統*程式設計自我效能的組內迴歸係數同質性檢 驗部分,其 F 值為 2.382,P 值為 0.128 未達 0.05 顯著水準,如表 5.4 所示,表示二 組迴歸線的斜率相同,亦符合共變數迴歸係數同質性假設,因此不同的線上診斷機

制學習系統對於學習績效的影響適宜進行共變數分析。

表 5.3 學習績效之變異數同質性檢定

依變數 F 檢定 分子自由度 分母自由度 顯著性

學習績效 3.393 1 68 0.070 表 5.4 學習績效之組內迴歸係數同質性檢定

依變數

線上診斷機制學習系統*先備知識

型 III 平方和 自由度 平均平方和 F 檢定 顯著性 學習績效 118.214 1 118.214 2.511 0.118

依變數

線上診斷機制學習系統*程式設計自我效能 型 III 平方和 自由度 平均平方和 F 檢定 顯著性 學習績效 112.122 1 112.122 2.382 0.128

診斷回饋機制對學習績效影響分析,如表 5.5 所示,其 F 值為 26.667,P 值為 0.000 達 0.05 顯著水準,因此在排除先備知識及程式設計自我效能後,不同的線上 診斷機制學習系統會造成學習者對於學習績效的顯著差異,故支持假說 H1。不同的 線上診斷機制學習系統對於學習者學習績效,受到學習者先備知識程度影響之分析 結果如表 5.5,其 F 值為 6.914,P 值為 0.011 達 0.05 顯著水準,顯示不同的線上診 斷機制學習系統對於學習者的學習績效,會因為不同的先備知識程度而有差異,因 此支持假說 H2。而不同的線上診斷機制學習系統對於學習者學習績效,受到學習者 程式設計自我效能程度影響之分析結果如表 5.5,其 F 值為 0.139,P 值為 0.711 未達 0.05 顯著水準,顯示不同的線上診斷機制學習系統對於學習者的學習績效,不會因 為不同的程式設計自我效能程度而有差異,因此未支持假說 H3。

表 5.5 線上診斷機制學習系統對於學習績效影響之共變數分析結果 來源 型 III 平方和 自由度 平均平方和 F 檢定 顯著性 矯正後模式 1664.712 3 554.904 11.262 0.000***

截距 33.094 1 33.094 0.672 0.415

先備知識(共變數) 340.677 1 340.677 6.914 0.011*

程式設計自我效能 (共變數)

6.831 1 6.831 0.139 0.711

診斷回饋機制 1313.880 1 1313.880 26.667 0.000***

誤差 3251.859 66 49.271

總和 25488.000 70

矯正後總合 4916.571 69

註:*p<0.05顯著,**p<0.01非常顯著,***p<0.001極顯著

推論假說 H1 獲得支持的原因,可能是因為一般的線上學習系統,只能透過學 習者不斷反覆的練習摸索才能找出可以執行的語法,每當語法發生錯誤時沒有任何 的引導援助,只能盲目的找尋問題可能的癥結所在,直至語法可順利執行,而這語 法卻不一定符合題意需求,因此即使能夠寫出可執行的語法,卻未必是正確符合題 意的答案內容。而本研究的 OSCLS,並非只是單純的提供練習平台,當學習者練習 語法時發生錯誤,系統會給予適當回饋訊息,指出發生語法錯誤可能的原因並給予 相關的教材連結提供學習者複習,藉此引導學習者往正確方向學習並能快速找出符 合題意的答案內容,省卻了盲目摸索的時間,也消除了答案不確定性的疑慮,因此 OSCLS 與一般線上學習系統在學習績效上有顯著的差異。

推論假說 H2 獲得支持的原因,在加入干擾變數先備知識的情況下,不同的線 上診斷機制學習系統對於學習績效上有顯著的差異,可能的原因是,具有較高先備 知識程度的學習者,本身對於學習知識具有相當的用功程度及學習效率,先備知識 程度較低的學習者,本身在學習知識的用功程度及學習效率相對的較低,不會因為

學習的科目不同而有所差異,再加上一般的線上學習系統,針對學習者在線上練習 SQL 語法時,給予學習者的回饋訊息無法對學習者有所幫助,反之,本研究之 OSCLS,不僅會提供錯誤指正的訊息還會提供相關教材的連結,以這類的回饋訊息 作為學習建議,因此,OSCLS 與一般線上學習系統會因為先備知識程度不同對於學 習者的學習績效上有顯著的差異。

推論假說 H3 未獲得支持的原因,可能是因為 SQL 語法主要的重點在於資料的 取得,語法結構較像自然語言,而不像 C 語言或是 JAVA 等程式語言一般,注重的 是如何取得資料,語法結構必須嚴謹且符合邏輯,兩者在程式語法複雜度上有著明 顯的差異,即使是程式設計信心能力較低的學習者,也未必會去影響到學習 SQL 語 法的學習績效,因此,OSCLS 與一般線上學習系統不會因為程式設計自我效能不同 而對學習者的學習績效上有顯著的差異。

5.4 線上診斷機制學習系統 線上診斷機制學習系統 線上診斷機制學習系統 線上診斷機制學習系統之系統 之系統 之系統 之系統效用實證研究之資料 效用實證研究之資料 效用實證研究之資料 效用實證研究之資料 分析

分析 分析 分析

線上診斷機制學習系統對於系統效用的平均數、標準差等描述性統計量如表 5.6 所示,為了瞭解線上診斷機制學習系統的系統效用是否有顯著差異,本研究針對一 般線上學習系統與線上即時診斷學習系統對於系統效用結果進行獨立樣本 T 檢定,

結果如表 5.7 所示,T 值為 4.079,P 值為 0.000 達 0.05 顯著水準,表示線上診斷機 制學習系統對於系統效用有顯著差異,故支持假說 H4。

表 5.6 線上診斷機制學習系統對於系統效用之描述性統計量 個數 平均數 標準差 一般線上學習系統 35 54.1714 6.78444 線上即時診斷學習系統 35 60.9143 7.04344

表 5.7 線上診斷機制學習系統對於系統效用之獨立樣本 T 檢定

系統效用

T 自由度 顯著性(雙尾)

4.079 68 0.000***

註:*p<0.05顯著,**p<0.01非常顯著,***p<0.001極顯著

推論假說 H4 獲得支持的原因,可能是學習者對於線上學習系統上的回饋訊息 認知,普遍認為應該要對學習者在學習語法上有所幫助,然而在實際操作一般的線 上學習系統後發現,一般線上學習系統所提供的回饋訊息對學習者的幫助是明顯不 足的,導致學習者對於一般的線上學習系統效用評價較低。而本研究的 OSCLS 則可 以滿足學習者對於線上學習系統上的回饋訊息認知,因此學習者對於 OSCLS 較一般 的線上學習系統的系統效用評價較高。

5.5 線上 線上 線上 線上即時診斷學習 即時診斷學習 即時診斷學習系統與現有線上學習系統之功能 即時診斷學習 系統與現有線上學習系統之功能 系統與現有線上學習系統之功能 系統與現有線上學習系統之功能 比較 比較

比較 比較

本系統在建置完成後,本研究將 OSCLS 之功能特性與其他現有的一般線上學習 系統進行比較,以期能突顯本研究發展之線上學習系統。其相關分析內容如表 5.8 所示。

表 5.8 線上即時診斷學習系統相較於現有線上學習系統的功能特性分析表

功能特性 本系統的成效說明

語法規則

本研究之線上即時診斷學習系統藉由語法結構機制與 SQL 驗證引 擎,將學習者輸入的語法指令,除了一般基本語法結構偵錯之外,

還能夠提供造成語法執行錯誤的語法為何,有效的提供學習者語法 問題癥結所在。

語意分析

因為本研究之線上即時診斷學習系統中包含了語意剖析模組,所以 可以有效的分析出學習者所輸入的語法指令的意圖,除了可以給予 學習者更明確的學習建議之外,還能有效的避免學習者所輸入的語 法執行結果相同,但實際上所輸入的語法涵義卻大不相同的問題。

表 5.8 線上即時診斷學習系統相較於現有線上學習系統的功能特性分析表(續)

功能特性 本系統的成效說明

回饋訊息

本研究之線上即時診斷學習系統給予學習者的回饋訊息,是經由語 法及語意剖析模組剖析過後給予使用者語法上的錯誤訊息之外,還 提供了包含錯誤指正及學習建議的回饋資訊。學習者所得到的回饋 訊息不僅是接收到語法錯誤或語法正確這種簡單回饋的資訊,當學 習者語法發生錯誤時還可以接收到輸入語法所屬的教材連結或是題 庫解答的提示,這類引導學習的訊息,可以有效的讓學習者對於學 習結構化查詢語言不容易產生挫折感。

5.6 本研究之 本研究之 本研究之 本研究之 OSCLS 與 與 與 與相關研究 相關研究 相關研究 相關研究之功能比較 之功能比較 之功能比較 之功能比較

本系統在建置完成後,本研究將 OSCLS 之功能特性與相關研究進行比較,以期 能突顯本研究之 OSCLS,其功能比較內容如表 5.9 所示。

表 5.9 本研究之 OSCLS 與相關研究之功能比較表

Database eLearning SQLzoo OSCLS

回饋訊息

方式 模糊的錯誤訊息 模糊的錯誤訊息 明確的錯誤指正 回饋訊息

內容

提供語法準確分數、花 費數據等時間,無明確 的學習建議。

無提供

提供正確之語法建議 及相關的教材連結等 學習建議。

提供較佳

解答 無提供 無提供

若輸入之語法符合系 統中的推論規則,則 會提供較佳解答。

練習模式 僅提供題目練習 僅提供題目練習 提供語法練習及題庫 測驗兩種練習方式。

練習的語

法分類 僅提供 DML 僅提供 DML 提供 DML 及 DDL 兩 類語法。

學習教材 僅提供簡易語法規則 無提供

提供依教材章節分類 之詳 細 學 習 教 材內 容。

學習歷程 無提供 無提供

提供語法練習操作記 錄、題庫測驗的答題 正確率等分析資料。

在文檔中 中 華 大 學 (頁 68-75)

相關文件