• 沒有找到結果。

系統易用性評估相關研究

第二章 文獻分析

第四節 系統易用性評估相關研究

有鑑於使用者意見調查僅能根據使用者回憶與經驗,瞭解系統問 題,但使用者表達意見屬於主觀性看法,故有易用性評估,是一種觀 察個人實際使用系統並記錄使用經驗的方法。在評估過程有使用者實 際參與,研究者可從使用者身上獲取第一手資料進行分析,評估結果 較容易貼近使用者實際感受。國外進行系統易用性評估案例不勝枚 舉,本研究雖聚焦在檔案資訊系統之易用性評估,但不乏數位典藏系 統易用性評估案例值得參考,故先介紹有關數位典藏系統之實測研究 文獻,以參考易用性評估設計與系統介面設計之通則性問題,繼而針 對檔案資訊系統評估研究的成果加以分析,因國內並無檔案資訊系統 易用性評估文獻,故國內易用性評估研究,以曾進行過之網站或是整 合查詢目錄等相關文獻為例。

一、數位典藏系統易用性評估

Jason A. Clark(2004)曾以威斯康辛大學數位典藏系統為例,

進行易用性測試,該典藏系統涵蓋多元媒體類型,除文字資料外尚有 影像與聲音館藏,研究以焦點團體方式收集使用者檢索資訊需求、態 度與對於系統觀感,接續藉由 5 位檢索者實測過程,擷取系統檢索過 程畫面與錄音方式,分析實測者在檢索、資料儲存、資料下載郵寄等 過程中之系統操作問題。藉由兩種分析方法改善系統圖示設計與欄位 標籤等介面功能。

H. Long, K. Lage & C. Cronin(2005)則以輔完成之數位影像 系統雛形進行易用性評估,針對系統未來使用族群之地理學系師生為 對象,採訪談方式瞭解需求,再歷經簡要系統功能介紹,讓受測者對 於系統有初步瞭解,然後依循易用性評估實測分析方式交付 4 位受測 者 5 項實測任務,結果發現使用者採地圖檢索方式優於以關鍵字檢索 方式,但對於不熟悉的事物如採關鍵字檢索的失敗比例較低。

E.F. Kramer(2005)以名為 IUPUI 的影像典藏系統進行易用性測

試,該典藏系統主要收錄歷史照片與地圖,實測分析徵求 70 位參與 者,觀察其檢索照片的過程,統計每位受測者完成檢索時間,並採檢 索後問卷調查方式蒐集實測者對於系統使用意見,根據問卷分析結果 瞭解系統介面問題。

不同於前述採用實測過程紀錄方式,M. Proffitt(2006)則以 焦點團體輔以問卷調查方式,瞭解 RLG 典藏資源聯合目錄滿足使用者 需求程度與使用者對於系統滿意度,採用訪談方式是希望不僅探知使 用者對於系統易用性觀感,尚可同時蒐集使用者對於系統內容的需求 與期許,關注的不只是界面設計問題,還可瞭解系統內容是否滿足使 用者需求。

M. Ochoa, T. Minton & D. Benson(2009)則是針對弗羅里達 大學發展的報紙數位典藏系統進行易用性測試,希望瞭解系統瀏覽和 檢索功能的易用程度,關注使用者是如何檢索系統的過程?目前檢索 結果的呈現是否為使用者需求?系統有否提供導航與易於操作的設 計?研究徵求 11 名對於報紙內容有使用需求之教師與研究生進行實 測觀察,以前測問卷瞭解測試者背景,利用檢索後測問卷瞭解受測者 對於系統滿意度,並輔以深度訪談方式,探知受測者對於系統操作過 程的意見。個別受測者在檢索過程以放聲思考方式,重述檢索過程與 檢索問題,由研究者記錄問題與檢索過程觀察,最後歸納參與實測者 對於系統整體瀏覽、是否容易使用、系統檢索功能、結果顯示與內容 呈現等各面向之意見,作為系統改善功能之依據。

對於數位典藏系統易用性評估的綜合性分析,有 P. Reakes & M.

Ochoa(2009)曾以問卷調查方式,對美國與加拿大地區有報紙數位 典藏系統之 64 所機構發送問卷,希望瞭解各典藏機構是否有進行易 用性測試的經驗與採用的易用性評估方式,根據回覆的 21 份問卷顯 示,各機構採用的測試方式包括問卷、焦點團體訪談、深度訪談、實 測觀察等方式,多數典藏機構認為易用性測試對系統很重要,但顧慮

實測分析費時且質疑分析易受受測者經驗影響,故進行意願不高,加 上典藏機構館員認為易用性測試結果雖可發現系統介面問題,但系統 介面設計需要資訊人員,測試結果不見得能立即改善系統,而認為分 析結果致用性不高。結果顯示缺乏有經驗之施測研究人員與對後續系 統改善能力的質疑,使得進行易用測試之典藏系統經驗,寥寥可數。

國內進行系統易用性評估有蔡維君(2006)以臺灣大學在學學生 為測試對象,採用焦點訪談與易用性實測,進行臺大圖書館網站好用 性評估,研究結果發現臺灣大學圖書館網站首頁雖設計美觀,但首頁 項目過多,需拉動頁面捲軸方可看到所有資訊,而其中多數項目的使 用率並不高,影響使用效率。藉由好用性評估亦可發現資訊結構與網 站好用與否相關,舉凡網站內容分類組織方式、項目如何命名、導覽 系統的設計及站內搜尋功能的提供,皆關係著使用者能否順利瀏覽網 站並從中取得所需資訊完成任務,認為好的網站設計不僅是提供優質 的資訊內容,規劃良善的資訊結構亦為重要因素,研究結果提出好用 性評估建議模式,可供進行網站好用性評估參考。

謝建成與劉至逢(2009)以師範大學圖書館網站為例,針對全校 七個學科領域分別徵求 5 位受測者進行實測記錄,並輔以深度訪談與 量表瞭解受測者的問題與滿意度,並根據受測結果修改網站功能,獲 得修改後使用者完成檢索任務,平均可減少 56%的檢索時間。

姜義臺(2010)以靜宜大學 SmartWeaver 整合系統為例,採易用 性測試與問卷調查方式,由圖書館隨機抽選 15 名受測者進行測試任 務,結果發現使用者對於系統個人化服務困惑、圖示功能與線上輔助 說明欠佳等 11 項系統測試問題。

林佳穎與吳明德(2011)則關注臺灣大學 MUSE 整合查詢系統易 用性問題,徵求 10 位人文、社會、自然科學、生物醫學與工程技術 領域研究生為受測者,給予四項指定任務,並於過程中觀察記錄受測 者與系統互動情形,最終提出改善資訊呈現方式與修改難懂術語等建

議。除上述採系統實測進行易用性評估外,亦有林妙樺為文,提出數 位典藏系統入口網進行易用性評估之模式建議,內容重點在於評估方 式之設計,並非進行實證研究調查。(林妙樺,2006)

二、檔案系統易用性評估

關於檔案資訊系統易用性評估研究,有 B. Altman 與 J.R.

Nemmers 以 Florida 大學圖書館建置之檔案檢索系統(POLARIS)為 例,進行系統易用性測試,並以焦點團體訪談方式綜整使用者意見,

研究者強調找到真正有代表性的受測者很重要,並讓受測者依實際需 求,以實際問題完整操作,最後讓受測者以口說方式表達檢索過程與 想法。為廣納意見,同時根據館藏使用統計找出經常使用者,進行焦 點訪談,綜合 11 位受測者檢索過程意見與焦團結果,認為檔案系統 提供內容摘要描述、有檢索詞彙提示或相關詞彙顯示功能,是使用者 認為系統易用的設計。(Altman, Nemmers,2001)

C.J. Prom 認為過去對於檔案檢索工具的探討多半關注使用者意 見調查與描述標準規範的討論,對於檢索系統本身功能的分析比較缺 乏,故而希望透過使用者與檢索系統的互動,瞭解使用者對於系統的 看法,研究透過檔案人員論壇(Archivists Listserv)徵求自願受 測者,計有 89 位受測者分群接受九個不同檔案檢索系統的實測觀 察,實測觀察有採現場或遠距實施,測試者完成檢索任務後,輔以問 卷瞭解受測者背景與使用過程意見,研究結果顯示新手使用者與有經 驗之使用者檢索檔案過程不同,越有經驗者檢索時間越短,畫面過多 的連結功能容易讓新手使用者困惑或是會被錯誤引導,使用者介面提 供的檔案目錄瀏覽功能與頁籤說明文字應該加強,最終歸納可針對不 同檢索背景者提供分眾設計以滿足不同需求。(Prom,2004)

Springfield College 曾針對一項聯邦資訊檢索工具 ENCompass 進行易用性評估,採放聲思考方式,設計檢索任務請受測者一邊檢索 一邊表示檢索意見,由研究者加以觀察記錄,藉由 4 位不同背景受測

者執行 7 項任務,研究發現該系統存在收錄資料類型說明不清,使用 者在檢索結果難以判定資料類型;缺乏檢索結果再次限縮條件,使用 者難以過濾檢索資料;系統反應時間過久,應在畫面讓使用者瞭解系 統仍處於查詢狀況,以免重複點選執行。(Alling, Naismith,2007)

英國對於「檔案館中心(archives Hub)」之檔案整合查詢系統 的易用性評估,是採使用者操作後訪談方式,蒐集 10 位使用者意見,

訪談針對檔案資訊系統設計最為人所詬病之系統術語、使用介面呈現

(layout)與內容描述等三項核心問題,請使用者經實際操作後立即 受訪表達意見,研究結果顯示受訪者認為該系統介面呈現符合使用者 期許,但根據「國際檔案描述規範 ISAD(G)」設計之欄位描述術語,

不易被使用者理解,使用者也期許檢索結果能呈現與此次檢索主題相 關之其他研究資源顯示與連結。(Stevenson,2008)

J.C.Chapman 則 以 北 卡 羅 來 納 大 學 的 南 方 歷 史 館 藏 目 錄 (Southern Historical Collection, SHC)為例,希望瞭解使用者在 沒有檢索中介者協助下的線上系統操作情形,研究採觀察、問卷與訪

J.C.Chapman 則 以 北 卡 羅 來 納 大 學 的 南 方 歷 史 館 藏 目 錄 (Southern Historical Collection, SHC)為例,希望瞭解使用者在 沒有檢索中介者協助下的線上系統操作情形,研究採觀察、問卷與訪