第四章 使用性評估結果
第一節 受試者分析
本節將說明本研究之受試者組成，以及根據所蒐集得來之相關資料進行分析 說明。
一、 受試者背景介紹
本研究透過教育部統計處所公佈之「學科標準分類查詢」將臺師大共 7 個學 院 55 個系所7重新歸類為七大領域。本研究之受試者則透過此一分類架構進行徵 集，徵集方式為到校內8與校外9的電子佈告欄發表文章以徵求受試者。各領域分 別徵求 5 名受試者參與使用性評估，受試者限制需為臺師大在學學生。本研究詳
7 參見國立臺灣師範大學網頁 http://ntnu.edu.tw
8 校內電子佈告欄(精靈之城) telnet://bbs.ntnu.edu.tw
9 校外電子佈告欄(PTT 實業坊)
細的受試者組成如表 8 所示，受試者來自 6 個學院 26 個系所。其中有 9 名受試
領域 編號 系級 使用臺師大圖書館網站頻率
生，為避免造成統計上的誤差，因此將各組差異最大的樣本予以刪除，刪除挑選
社會領域受試者使用臺師大圖書館網站的頻率明顯較工程、製造與營造領域以及 科學領域受試者為高。
表 11 各學科類別進行事後比較結果
Multiple Comparisons Dependent Variable: times
Scheffe
-432.00000* 100.73719 .026 -827.7865 -36.2135
-353.50000 100.73719 .103 -749.2865 42.2865
-236.25000 100.73719 .503 -632.0365 159.5365 -411.75000* 100.73719 .038 -807.5365 -15.9635
-330.25000 100.73719 .150 -726.0365 65.5365
-196.25000 100.73719 .703 -592.0365 199.5365
432.00000* 100.73719 .026 36.2135 827.7865
78.50000 100.73719 .995 -317.2865 474.2865
195.75000 100.73719 .705 -200.0365 591.5365 20.25000 100.73719 1.000 -375.5365 416.0365 101.75000 100.73719 .982 -294.0365 497.5365 235.75000 100.73719 .505 -160.0365 631.5365
353.50000 100.73719 .103 -42.2865 749.2865
-78.50000 100.73719 .995 -474.2865 317.2865 117.25000 100.73719 .964 -278.5365 513.0365 -58.25000 100.73719 .999 -454.0365 337.5365 23.25000 100.73719 1.000 -372.5365 419.0365 157.25000 100.73719 .867 -238.5365 553.0365 236.25000 100.73719 .503 -159.5365 632.0365 -195.75000 100.73719 .705 -591.5365 200.0365 -117.25000 100.73719 .964 -513.0365 278.5365 -175.50000 100.73719 .797 -571.2865 220.2865 -94.00000 100.73719 .988 -489.7865 301.7865 40.00000 100.73719 1.000 -355.7865 435.7865
411.75000* 100.73719 .038 15.9635 807.5365
-20.25000 100.73719 1.000 -416.0365 375.5365
58.25000 100.73719 .999 -337.5365 454.0365
175.50000 100.73719 .797 -220.2865 571.2865
81.50000 100.73719 .994 -314.2865 477.2865
215.50000 100.73719 .607 -180.2865 611.2865
330.25000 100.73719 .150 -65.5365 726.0365
-101.75000 100.73719 .982 -497.5365 294.0365 -23.25000 100.73719 1.000 -419.0365 372.5365
94.00000 100.73719 .988 -301.7865 489.7865
-81.50000 100.73719 .994 -477.2865 314.2865 134.00000 100.73719 .933 -261.7865 529.7865 196.25000 100.73719 .703 -199.5365 592.0365 -235.75000 100.73719 .505 -631.5365 160.0365 -157.25000 100.73719 .867 -553.0365 238.5365 -40.00000 100.73719 1.000 -435.7865 355.7865 -215.50000 100.73719 .607 -611.2865 180.2865 -134.00000 100.73719 .933 -529.7865 261.7865 (J) groups
(I-J) Std. Error Sig. Lower Bound Upper Bound 95% Confidence Interval
The mean difference is significant at the .05 level.
*.
另外，本研究受試者中有 9 名為大學部同學，26 名為研究所碩士班同學。
於此一併使用 ANOVA 分析來檢驗這兩種身份別對於使用性評估的表現上是否 具有顯著差異；將這兩種身份的每一位受試者完成任務的總時間(秒數)施行單因 子變異數分析，得到的結果如表 12。
表 12 依身份別進行單因子變異數分析摘要表
變源 Sum of Squares 自由度 Mean Square F Sig.
組間 109494.175 1 109494.175 3.312 .080 組內 859591.075 26 33061.195
總和 969085.250 27
可知單因子變異數分析的結果為 F = 3.312，P = .080 > .05，未達顯著。因此 可知大學生與研究生這兩種身份別對於師大圖書館網站使用性評估的完成時間 來說沒有顯著差異。
第二節 使用性評估結果
本小節將針對使用性測試之 11 道任務分別提出討論，透過任務效能(是否完 成任務、完成時間)，以及受試者的意見分析臺師大圖書館網站，並提出建議。
本節不依照 11 道任務之順序依序討論，採取將 11 道題目分為館藏查詢、個人服 務資訊、一般性資訊三類，將性質相近的任務集中討論；可從不同任務面向，瞭 解是否有使用性問題。
於本節中將會使用部份名詞，在此作一簡單說明。本節將會根據 Rosenfeld &
Morville(2003)對於網站導覽系統分類來陳述內容。使用到的名詞如下：
z 全站導覽系統：網站上的每一頁都展示的全域導覽系統，常見的形式為放在 每個網頁頂端的導覽列呈現。
z 區域導覽系統：輔助全站導覽系統的工具。
z 情境式導覽系統：處理「不適合、很難擺到網站架構或分類當中」的連結關 係。
將這三種導覽系統套用於臺師大圖書館網站中，則如圖 8 所示。A 處為全站 導覽系統、B 處為區域導覽系統，而 C 處則為情境式導覽系統。
圖 8 導覽系統示意圖
一、 館藏檢索
大學圖書館網站最常被使用的功能為館藏檢索，館藏檢索系統設計與功能配 置，亦會影響使用者操作。因此在這個部份設計了四道任務來讓使用者於臺師大 圖書館網站中操作。分別為透過已知書名查詢館藏、以作者姓名查詢館藏、以已 知期刊刊名與已知資料庫名稱查詢館藏，藉以檢視臺師大圖書館網站所提供之館 藏檢索功能是否具有使用性問題。
A 全站導覽系統
C 情境式導覽系統 B 區域導覽系統
(一) 以已知書名查詢館藏
「因為我想說館藏，就直接點進去那邊查」(C04)，「事實上我覺得這個功能還蠻 方便的。因為它是所有館藏裡面不管是任何電子資源或是紙本的都可以查得到，
我覺得蠻好的。」(G03)。
另外於 35 位受試者中，有 21 位沒有選擇查詢項，以預設的「所有館藏」進 行檢索、12 位查詢項選擇「書/刊名」與 2 位查詢項選擇「關鍵字」。若本題於快 速檢索頁面以所有館藏作為查詢項進行檢索時，會出現「瀏覽相近館藏目錄資料」
功能連結，如圖 9。有 6 位受試者沒有注意到按此查看連結，重新進行檢索。
圖 9 臺師大圖書館網站快速檢索畫面
受試者認為出現「按此查看」功能的設計有些多此一舉，「其實一開始改版 的時候，我有點不知道該怎麼辦，沒有注意到這個東西。」、「我會覺得按了查詢 以後，應該要直接跳出查到的東西。要不是在其它的系統上有看過類似的設計，
不然我也找不到。」(D05)，「找書的時候如果它的查詢項是所有館藏，它會找不 到東西，還是很慢。所以我通常是用關鍵字或是什麼去找。」(A03)，「我覺得它 這個還蠻不明顯的，會沒注意到。」(B01)，「沒有注意到，因為一般就會覺得按 下去就會直接跳出來，就會忽略這個東西」(F03)，「我會比較想直接點查詢，直 覺按了以後應該要馬上有東西出來。」(B02)，「我最後會發現這個，是因為我按
了很多次查詢，都沒有東西出來。」(E03)，「這個東西我沒有發現到。因為我自 己以前的習慣是照理來說按了查詢，它下面就會出來東西。」(C05)、「當然會希 望直接跳出找到的東西，這樣會比較方便一點。可能是因為網路使用就了就會習 慣，然後你按一個東西就會跳一個新的東西出來、按一個東西就會跳一個新的東 西出來」(C02)
雖然原先設計理由應為當使用者下了查詢詞以後，系統針對館藏進行檢索，
若在電子期刊、電子資料庫或是電子書查詢項中亦有相近館藏時提供使用者選 擇，點選所需之資料。以查詢項為所有館藏、關鍵字為 rowling 作為範例，進行 檢索後會出現圖 10 之畫面，使用者可以依據個人的需求點選要查的是哪一項。
但若於圖 9 之範例，使用查詢項為所有館藏、查詢詞為別鬧了！費曼先生進行檢 索時，則只會出現「瀏覽相近館藏目錄資料」，受試者認為如果只有一項的話，
直接切換到查到的資料會比較好。「或是說可以跳到另外一個頁面再出現這個，
可能會好一點。可能還是會有人沒注意到，因為它跟那個背景的部份還蠻像的。」
(G03)，「這樣太麻煩了，還要再多按一個。因為如果可以找到東西就直接按查詢，
東西就出來，這樣比較方便。」(A03)、「就是我第一次查的時候就是這樣的感覺，
按了以後，就是在等那個東西(查詢結果)，然後才發現這個」、「一開始的時候的 確是會預設按了就會跑出找到的東西來，不過我覺得這樣也有這樣的好處啦，就 是去做個分類」(A04)。
受試者也提出一些可能的改進建議，「其實我覺得大小其實它的影響力還是 有差」、「換顏色，就譬如說按此查看，做得看起來就像是個按鈕，譬如說像這個 首次登入這樣子，感覺就很明顯。」(A04)、「我覺得如果要注意到，可能查詢的 方向要改。因為我會覺得說我看到的是查詢」(B01)。
圖 10 查獲館藏檢視
(二) 以西文作者姓名查詢館藏
於任務 3 中，設計以西文作者姓名查詢館藏中該作者所有作品，所使用的是 撰寫哈利波特系列小說的知名作者，J. K. 羅琳(J. K. Rowling)，作為檢索任務主 題。總共 35 名受試者，在此部份有 16 名受試者未能完成任務，失敗率約為 46%。
順利完成任務的受試者花費的時間約為 2 分 26 秒；而無法順利完成任務的受試 者花費的時間約為 4 分 30 秒。詳細的受試者任務進行資料如表 14。
表 14 受試者完成任務 3 花費時間一覽表
任務 3 單位：秒
編號 時間 編號 時間 編號 時間 編號 時間 編號 時間 編號 時間 編號 時間 A01 101 B01 258 C01 175* D01 463* E01 96 F01 252* G01 126 A02 282 B02 127 C02 540* D02 87 E02 167 F02 234* G02 130*
A03 54 B03 251 C03 255* D03 290* E03 134 F03 249* G03 223*
A04 98* B04 282* C04 231 D04 200 E04 73 F04 54 G04 227*
A05 29 B05 209* C05 251 D05 42 E05 375 F05 283* G05 153*
組平均 112.80 225.40 290.40 216.40 169.00 214.40 171.80 組變異數 99.33 60.98 143.14 168.57 120.63 91.42 49.67
總平均 200.03
總變異數 114.37
* 表示受試者放棄完成任務
所有的受試者進行此任務時，都會先選擇「作者」作為查詢項來進行檢索，
使用的查詢詞為 J.K. Rowling 或 J.K.羅琳，但卻無法順利的找到所需資料；於訪
談時間經研究者說明需將查詢詞改為 Rowling, J. K.，才可以順利找到所需資料。
「因為一開始我要搜索的時候就是打作者的英文名字，後來想到應該是把姓氏放 在前面來找會比較快，一般的讀者可能當下的反應就是直接打 J.K. Rowling，其 實應該找的時候從姓去找，他的檢索速度會比較快。像我用臺大的那個介面也是 這樣。」、「所以這個功能一般的使用者可能在查詢像 J.K. Rowling 的時候如果一 直打這個可能很難找到想要找到的書。」(A01)，「像現在這樣了解，可能之後就 沒有問題，可是我會覺得說如果他算是一個還滿大的作者，我覺得像這樣子的關 鍵字就是放在前面放在後面，理論上他應該都要可以出來。」(A03)，「我不知道 要這樣改，而且我也沒有想到要這樣子找。」(B03)，「喔，所以在裡面輸入顛倒 就會找不到。這應該一般人都不知道吧？」(F01)，「我會覺得如果可以的話就照 大家比較習慣的用法。」(G02)
唯有受試者 A05 於第一次檢索即使用 Rowling, J.K.的方式進行檢索。「根據 以往的經驗，應該是要這樣查才查得到。」(A05)；其餘的受試者有 5 名最後採 用 Rowling 作為查詢詞檢索，「一開始我要檢索的時候就是打作者的英文名字，
後來想到應該是把姓氏放在前面來找會比較快。」(A01)，「我知道他前面是縮寫 (J.K.) ， 想 說 如 果 用 前 面 去 查 ， 會 出 現 更 多 東 西 。 所 以 就 乾 脆 只 留 後 面 的 (Rowling)。」(D05)。有 2 名受試者在嘗試失敗後使用關鍵字作為查詢項，「我只 要用比較精確的找不到的時候，就會改去用關鍵字找，只是關鍵字有時後會出現 一些無關緊要的東西。」(A03)、6 名受試者最後採用進階關鍵字查詢完成任務，
但受試者大多不瞭解進階關鍵字查詢的意思，「應該就只是一般搜尋引擎，就只 是再變進階一點，縮小範圍吧。其實我是第一次點到這個功能，但是我知道網路 上很多搜尋引擎都有這樣的功能。我想應該是一樣的效果。」(C05)、「因為簡易 查詢查不到東西，我以為進階關鍵字這邊會用全部的關鍵字、什麼的關鍵字，可
是他沒有」(F04)。
5 名受試者是透過尋找書籍「哈利波特」，來找到作者。由此可以發現，受
5 名受試者是透過尋找書籍「哈利波特」，來找到作者。由此可以發現，受