研究過程

國

立 政 治 大 學

‧

N a tio na

l C h engchi U ni ve rs it y

第四章

研究過程與結果分析

在本章節中，主要介紹使用 Kinect 感測器所錄製的簡報影片內容、評估資 料的蒐集過程，以及在每個階段中對所觀察到的問題，辨其原因，並且如何進 行修正。對於各階段蒐集到的評估資料，都視為一個獨立的資料集，以 R 分析 資料後，並嘗試回答第 3.3.2 節「研究架構」中所提出的三個問題，以分析結果 的可用性，最後再比較每個階段的分析結果。

4.1. 研究過程

4.1.1. 小量測試評估階段

在這個階段裡，將「研究架構」中所規劃的「評估者流程」實作內容大致底 定。首先，由 Kinect 感測器所錄製的簡報影片，採用了甲同學在論文口試簡報 中的 5 個錄影，影片長度從 1 分 42 秒到 2 分 15 秒，總長度約略為 10 分鐘，並 在評估系統網頁上依序提供評估，如圖 4.1 所示。

總共有 6 人次的研究生，參與了本階段的評估。對於每一輪的完整評估工 作，他們總共需要觀看上述的 5 個簡報影片。而在評估之始，評估系統會給予 該評估者一個時間戳記，並在上傳評估結果時以此戳記作為一部分的檔名，以 便在後續分析時，可用此戳記識別評估結果是否來自同一位評估者。

‧ 國

立 政 治 大 學

‧

N a tio na

l C h engchi U ni ve rs it y

圖 4.1、小量測試評估系統網站，位置：

http://tranquil-headland-6804.herokuapp.com/evaluation/

經由此階段的評估過程，陸續發現不少問題，條列如下：

1. 評估者反應，提示不夠清楚，不曉得評估的重點，以及要如何操作。

2. 與預期的數量比較，評估者提供的評估數量過少。

3. 超過半數的評估者，沒有做完一輪完整評估。

4. 發現在部分 POD/POL 內，不存在 Kinect 感測器的動畫單元、骨架資 料。

5. 當時並無儲存 Kinect SDK 所提供之 3D 臉部頂點資料。

針對上述列出的問題，重新檢討評估系統網站的使用者介面及流程，並在 其後加以錄製同時儲存 3D 臉部頂點資料的簡報影片後，由筆者一人模擬多人次 評估者，進行評估作業。至於 POD/POL 內不存在特徵資料的問題，可以藉由選

‧ 國

立 政 治 大 學

‧

N a tio na

l C h engchi U ni ve rs it y

擇影片以特徵資料多而優先選取，以及增加評估資料（例如提高評估意願，或者 使評估輸入變得輕鬆等）的作法，以減低此問題的重要性。

4.1.2. 實驗者自行測試評估階段

在此階段裡，先針對上節所發現之問題，進行修改，茲列出重要修正如 下：

1. 評估者提供的評估數量過少的問題，除了跟評估者所反應的「提示不夠 清楚」，而加強提示語以外，懷疑也有疲勞現象的影響，故依照研究架 構中所設想的，為避免評估者疲勞而影響結果，每一位評估者看到的 影片呈現順序皆不相同（隨機排序）。

2. 半數以上沒有做完一輪完整評估的問題，懷疑是使用者介面只能用滑 鼠，輸入不方便，故增加鍵盤快速鍵 u/d，以利更快速地標記喜歡／不 喜歡之意見。

圖 4.2、實驗者自行測試評估系統網站，左圖為正常影音版，位置：

http://tranquil-headland-6804.herokuapp.com/evaluation_2/；右圖為靜音版，位 置：http://tranquil-headland-6804.herokuapp.com/evaluation_silence/

‧

‧ 國

立 政 治 大 學

‧

N a tio na

l C h engchi U ni ve rs it y

式。此階段共有 35 位評估者，其中 33 位評估者為政大資科系大二學生，其餘兩 位評估者的身份則為社會人士。

圖 4.3、大量正式評估系統網站，左圖為預先提示的操作說明，位置：

http://tranquil-headland-6804.herokuapp.com/evaluation_3/

雖然並非所有人都完成一輪完整評估，也有評估者有重覆評估的情況，不 過，在剃除完全無意見的空白評估資料後，對於每個簡報影片，至少都有 32 人 次以上的有效評估資料，據此我們可以說，此階段所蒐集到的評估資料已足稱 大量。