• 沒有找到結果。

第四章 實驗設計與前期研究

4.6 前期研究

評論、comment,回覆同時是 reply。S 圖則是加上一些指示,以降低題目難易度,並 收斂答案的可能性,例如 S 圖第 10 題直接給予提示:「請先點開左圖中有白色環狀的

前期研究(pilot study)之目的為測試整體實驗設計、評估指標的可行性,根據觀 察與結果修改正式實驗的進行方式,且發展出更多分析可能。

鼠與眼動的水平、垂直點座標的調整後的決定係數(adjusted R squared),如圖 4.11所 示,發現實驗組、對照組的 S、T 圖的垂直相關性為 40.1% 至 48.6%,標準差 11.2% 至

‧ 國

立 政 治 大 學

Na tiona

l Ch engchi University

圖 4.11 平均眼動與滑鼠在水平、垂直點座標的決定係數

4.6.3 評估指標測試

此小節將驗證評估指標的可行性,並確立資料分析流程與方法,再從分析結果與 觀察發想出更多可評估互動式資料視覺化的指標。

A. 易理解性

  我們以答題正確率來衡量使用者是否能理解視覺化設計。以下為實驗組與對 照組的 S 圖與 T 圖的平均答題正確率,並列出不同實驗順序的影響。

表 4.4 答題正確率統計

ST 單題答對率 TS 單題答對率 單題答對率統計 S 71.1 % 59.7 % 66.2 % 實驗組

T 82.9 % 75.4 % 79.7 % S 63.2 % 67.4 % 66.2 % 對照組

T 71.1 % 71.6 % 71.4 %   從表 4.4得到幾項發現:

(i) 答題正確率落在 66% 至 80% 之間,顯示此實驗方法能區分出受測者對視覺

有使用。所有統計都是用滑鼠停駐點(mouse fixation)和眼睛凝視停駐點(gaze fixation)來計算,因為若只是不小心手滑過或眼睛瞄到並不算是有意識的行為。

‧ 國

立 政 治 大 學

Na tiona

l Ch engchi University

(a) S 圖功能區域編碼 (b) T 圖功能區域編碼

圖 4.12 功能區域編碼

越核心的概念應該放越中間,而且應避免將重要的功能放在太角落的位置。

C. 精準表達程度

  為了得知使用者是否能順利地得到足夠的訊息來達成任務,我們比較了使用 者操作步驟序列和該任務實際需要的最少步驟序列。

  使用者的行為依答案對錯、答題時操作步驟對錯分為表 4.5的四個象限,其中 步驟正確也答對的人完全符合設計者預期;步驟不正確卻答對的人沒有得到足夠 多的資訊卻答對,所以被懷疑是否猜測答案;步驟正確卻答錯者已得到足夠多的 資訊卻無法理解意義,是否為設計太困難;最後,步驟和答題都錯者則有很多可 能,不在此次討論範圍。

表 4.5 步驟正確性與作答對錯的關係與 S 圖實驗結果 步驟正確 步驟不正確

沒問題 答案用猜的嗎?

答對

31.2 % 40.3 % 設計的太困難? (很多可能) 答錯

3.9 % 24.7 %

  試分析 S 圖後,發現落在看錯、答對的人最多。因為有高達 64.9% 的使用者 執行序列被歸為看錯,讓可容許序列與使用者執行序列的 MT(平均完成運動的 時間)的差距幾乎是無限大,顯示為這樣的標準可能過於嚴格,所以我們試著調

‧ 國

立 政 治 大 學

Na tiona

l Ch engchi University

(a) S 圖功能區域初次眼睛發現時間點 (b) S 圖功能區域初次滑鼠觸動時間點

(c) S 圖功能區域眼睛觀看次數 (d) S 圖功能區域滑鼠觸動次數

(e) T 圖功能區域初次眼睛發現時間點 (f) T 圖功能區域初次滑鼠觸動時間點

(g) T 圖功能區域眼睛觀看次數 (h) T 圖功能區域滑鼠觸動次數

圖 4.13 易發現性實驗結果

‧ 國

立 政 治 大 學

Na tiona

l Ch engchi University

高眼動的容許值,然而並沒有改變此結果,因此這樣的評估方法還有改進的空 間,或許可以從觀察使用者未執行到哪些步驟去改善,將於 5.3.6 和 5.3.7 小節進 行後續討論。

4.6.4 質化結果

從民族誌的觀察中,可以將受測者的答題特性歸納為以下幾種類型:

(i) 謹慎:重覆確認題目和答案多次,多數都答對,花費較久時間。

(ii) 認真:題目理解普通,作答完後至少確認答案一次,多數都答對。

(iii) 順暢:平均每題回答時間不會很久,大部分都答對,多數是有程式能力或是對互 動式資料視覺化熟悉者。

(iv) 反應慢:每題都要想很久,實驗完成後對此視覺化有完全不同的理解,多數答 錯。

(v) 沒耐心:一題找不到的情緒深深影響之後的答題情緒,答題速度快,正確率低。

關於前期研究的情緒反應實驗結果,列於表 4.6,正負向情緒與任務順序、測試的 實驗資料無關,而是與受測者本身的個性或當下的心情有關,當他連續幾個任務都摸 不著頭緒時,會引發一連串略過作答和負面情緒,另外如果前面連續多題都沒有想法,

突然看懂了,反而會引起「驚喜、興奮」的感受。關於其他單一情緒的影響因素,「順 暢」來自三種可能,非常清楚答案、看錯題目、以為一個錯的答案;「不耐煩」有兩種 可能,知道要怎麼找,但是需要花時間,抑或是找很久都沒結果。綜觀來說,情緒反 應受到整體答題情緒和當題題目兩者共同影響。

常常會用「滑鼠點擊(mouse click)」來形容「滑鼠移上(mouse on)」,對此的誤解也有 可能來自許多人使用筆記型電腦的觸控板或是平板的機會大增,這兩者並沒有區分滑

‧ 國

立 政 治 大 學

Na tiona

l Ch engchi University

色環與綠色環的面積的依據不同,前者是按讚數、留言數的加權,後者只有按讚數;S 圖則是右圓的顏色變化同時來自是否為訊息散佈者和是否被滑鼠點擊。也有受測者提 到 S 圖的右圓是表示文章的分享情形,應該在「積極分享者」的分頁內才可以啟動,並 在離開時關閉,否則會讓人以為右圓跟左圓一樣是變動的,而在其他頁曲解了其設計 意義。