系統測試與評估結果

本研究系統開發完成後測試評估分成三個部分：1.進行實際施測，以教師評 分與系統評分相關程度來判斷系統評分有效性。2.以「新式健身操學習動機量表」

來調查評估使用本系統是否能提升新式健身操學習動機。3.施測後藉由問卷調查 使用者對本系統的看法與建議，作成描述性統計以評估系統介面的合宜性。

一、系統測試情況：

(一)進行系統實機測試以取得教師評分與系統評分，如圖 60、圖 61 所示。

圖 60 系統實機測試情況圖片(一)

圖 61 系統實機測試情況圖片(二)

(二)學生利用下課時間對本系統練習，如圖 62 所示。

圖 62 學生利用下課時間對本系統練習情況圖片 二、系統評分有效性評估分析結果：

為評估系統評分有效性，在施測前後取得每一位施測者的系統評分與教師評 分，以檢驗教師評分與系統評分是否呈現正相關，來判定系統評分有效性。所得 評分結果數據以 SPSS 軟體分析前後測教師 1、教師 2 及兩位教師給分平均與系統 給分實施相關分析，其結果如表 8。

表 8 動作前後測教師評分與系統評分相關一覽表

與系統評分相關

項目 個數

前測 後測

教師 1 給某生的總分 .91** .903**

教師 2 給某生的總分 .921** .886**

兩教師給某生的平均

22

.921** .899**

**p<.01

從表 8 針對某一個學童教師評分與系統評分的相關皆大於 0.8，呈現非常高 度相關(楊世瑩，2008)，顯示系統評分與教師的評判對某一個學童有一致性的看

給予某一個學童低分，大致上系統也會給予低分。再針對各個動作項目分析兩位 教師給分與系統評分之相關，結果如表 9。

表 9 各個動作項目兩位教師給分與系統評分之相關摘要表

前測 後測

動作 編號

動作名稱

教師 1 教師 2 教師 1 教師 2

平均值

0 插腰舉踵 .901** .891** .579** .508* .720 1 握拳內點 .606** .589** .741** .631** .642 2 交叉轉手 .612** .580** .573** .471* .559 3 踏併拍手 .714** .707** .606** .396 .606 4 上下搖擺 .622** .388 .768** .810** .647 5 轉手畫圈 .873** .853** .650** .482* .715 6 踏步轉圈 .797** .916** .871** .783** .842 7 勾腳屈手 .832** .799** .845** .798** .818 8 敲手舉踵 .570** .517* .668** .713** .617 9 踏步擺手 .699** .659** .642** .600** .650 10 點腳踏步 .713** .733** .772** .760** .744 11 轉腰擺手 .725** .665** .808** .747** .736 12 平衡抬腿 .665** .627** .643** .639** .643 13 夾肘畫圈 .803** .722** .809** .670** .751

**p<0.01 *p<0.05(使用 Pearson 相關)

從表 9 數據可看出針對各個動作兩個教師與系統的相關較低於表 8 個人整 體評分之相關，表 8 是學童各項目的總成績，動作技能好的學童和動作技能較差 的在加總後其差異會更加明顯，其相關度增加是可以理解的;而表 9 是針對每一 個 動 作 ， 更 能 解 釋 系 統 每 一 個 項 目 評 分 的 有 效 性 。 其 中 「 交 叉 轉 手 」 (.612，.580，.573，.471，平均.559)、「踏併拍手」(.714，.707，.606，.396，

平均.606)其教師評分與系統評分的相關程度較低，也就是系統與教師的評判並 不一致，這些項目的系統評分有改善的必要性。經實際觀察在「交叉轉手」時，

學生手部高低位置及轉手動作並不是很確實，但系統只偵測「兩手交叉」到「兩 手舉讚」的時間差，其差異小者就給高分，與教師的評判有所出入，因此相關程 度較低。在「踏併拍手」這一項目，系統偵測兩個拍掌之間的時間差，在後測時 學生似乎已掌握得分技巧，大部分的分數是 90、100，但教師的評分高低明顯，

所以系統與教師 2 評分的相關程度較低。總整而言，針對各個動作教師與系統的 評分相關大多落在 0.6~0.8 之間，呈現中度相關或高度相關(楊世瑩，2008)，所 以各動作的系統評分機制是有效的。

三、使用本系統是否能提升新式健身操學習動機調查分析結果：

為了解學童使用本系統前後學習動機是否改變，以自訂「國小五年級新式健 身操學習動機量表」在使用系統前實施動機前測，經使用本系統在練習完成動作 評分後測後，實施學習動機後測，經 SPSS 執行相依樣本 t 檢定，整理摘要如表 10。

表 10 參與動作測驗學童國小新式健身操學習動機前後測相依樣本 t 檢定摘要表 向度 前/後測 平均數 標準差 t 值 自由度 顯著性

前測 71.51 5.205 總分

後測 85.41 9.72 -8.026* 0.00 前測 25.32 1.887

專注力 後測 30.85 3.523 -8.357* 0.00 前測 14.23 1.343

自信心 後測 16.77 2.019 -6.217* 0.00 前測 14.91 1.231

關聯性 後測 17.14 2.436 -4.995* 0.00 前測 17.09 1.540

滿足感

後測 24.64 3.288 -12.925*

21

0.00

＊p<.05

由表 10 發現學童的學習動機，在總分(t=-8.026，p<.05)、學習動機中的專

表 11 系統介面設計合宜性調查分析結果一覽表

「可得性與可及性」分類中，答「非常同意」或「同意」在「追蹤到人體的 速度快」占 68.2%、「追蹤人體穩定」占 72.8%，「反應人體動作速度快」占 68.2%。

大約有 30%答「普通」可見這些項目未臻理想狀態，可能是因為施測地點在教室，

實測時圍觀的同學很多，站在旁邊的同學常造成系統突然去捉取並追蹤在旁邊觀 看的同學，使用者只好移位搶回追蹤，學童因此認為捉取人體的速度和穩定性較 差。人體的動作經由 Kinect 捉取，程式分析處理後再顯示於螢幕上，必然會產 生延遲現象，學童認為系統反應人體動作速度較慢應是不了解其原理，觀察線條 人延遲時間應在可接受範圍之內。

在「使用者親和力」分類中，答「非常同意」或「同意」在「系統容易上手」

占 90.9%、「系統操作順暢」占 81.8%、「彈出選單方便選擇動作」占 81.8%、「選 單的設計能快速找到動作分段」占 81.8%，顯示大部分學童認為系統體感操作介 面容易上手，操作上也沒有困難。

在「合作與互動性」分類中，認為「非常同意」或「同意」在「體感方式容 易跟系統互動」占 86.4%、「影像播放能幫助模仿學習」占 95.5%、「系統提供 的回饋會激勵學習」占 81.8%，顯示系統提供的互動介面及學習內容學童能夠接 受，且回饋的文字或音效會激勵學生的學習。

(二)：質性問卷結果與討論：

系統介面合宜性質性問題是請施測學童寫下對這一套新式健身操學習系統 的建議或使用感想，其結果彙整如表 12。

表 12 施測學童對本學習系統的建議或使用感想彙整表 學童

編號 建議或使用感想

1 我覺得電腦中的人很醜，線條人的頭變成一條線，不是一個頭。

2 線條人要換好看一點。

3 我覺得系統的操作很順暢，能讓我的跳舞進步，希望我還能多學一點。

表 12 施測學童對本學習系統的建議或使用感想彙整表 學童

編號 建議或使用感想

4 我覺得這套系統可以評分，糾正我的動作。

5 希望可以把線條人改成比較實體的人。

6 這個系統可以激勵我的學習，也讓我很有成就感。

7 (反應)速度能快一點，不要 lag。

8 這個系統可以糾正我以前做錯的地方。

9 這個系統可以讓我自行學習。

10 如果可以的話，線條人可以變成江南大叔會比較實在。

11 我很喜歡這套學習系統。

12 這個系統能讓我集中注意力，而且能讓我的動作更加標準。希望線條人 的樣子可以再做得更生動一點。

13 我很喜歡新式健身操學習系統，因為可以讓我學習每一個動作。

14 系統能讓我知道我跟同學的分數，並了解動作上有何差別。

15 這套系統讓我知道我自己的動作正不正確，我也覺得這套系統很有趣。

16 有評分系統，使我能快速知道我的分數，也能夠糾正我手部與腳部的細 節，也能跟同學互相比評，十分有趣。

17 這個系統可以讓我們互相比較。

18 我覺得用這套系統可以讓我更認真學習，線條人還能再更改!!

19 我覺得線條人可以變成一些可愛的卡通人物，那就好了。

20 線條人不好看。

21

我覺得圖畫裡的線條人稍微醜了些，但我覺得這個系統很有挑戰性，做 起來也非常有趣呢！但...要是線條人變成虛擬人物的話，啊～那就 能變得更有趣!!!!

22 頭應該是要圓的，不是一條線。

(續)

質性問卷中對反應人體動作的線條人的建議最多(1、2、5、10、12、18、19、

20、21、22)，認為線條人過於簡單醜陋，可能是因為線條人為練習者的化身，

他們的化身若是可愛或流行的人物將更符合他們的喜愛與期待。

編號 3、4、8、9、12、13、14、15、16 都認為本系統能了解、改善或糾正 健身操的動作，這些感想反應系統提供的學習示範與回饋機制能讓學生在練習時 察覺自身動作的對錯優劣，進而改善、糾正自己的動作。

編號 6、12、14、16 認為利用系統的評分可以和同學相互比較競爭，同時增 加了學習注意力也激勵了他們的學習。編號 11、13、15、16、21 覺得這個系統 很有趣、具挑戰性、喜愛這一套練習系統。也有針對系統本身提出看法，編號 3 覺得系統很順暢，但編號 7 則希望線條人的反應速度能快一點，不要延遲。

總體而言，除了認為線條人醜陋以外，參與施測的學童認為本系統新奇有 趣，系統的回饋激勵了他們的學習，大多給予正面的評價。