• 沒有找到結果。

第五章 結論與建議

第一節 結論

第一節 結論

本研究利用問卷、實驗法、回溯性放聲思考法以及訪談法,深入了解圖資系 研究生使用 EBSCOhost 視覺化檢索介面的情形,試著回答研究者所提出的研究 問題,以下將分段進行討論:

1、使用者使用 EBSCOhost 視覺化檢索介面(column 介面以及 Block 介面)的情形?

2、EBSCOhost 視覺化檢索介面之檢索效率、檢索效能、滿意度、學習性?,視覺 化檢索介面幫助使用者建構理想詞彙的程度為何?

3、EBSCOhost 視覺化檢索介面適用何種使用情境?

126

一、使用者使用視覺化檢索介面情形

視覺化檢索介面所提供的資訊環境 (information environments),包括:透過 自動分群所產生的分群架構(cluster structure),以及利用互動式檢索地圖的方式呈 現資訊檢索結果,的確可以帶給使用者不同的檢索經驗,根據研究結果,受試者 的檢索行為會因為介面不同而有所不同,但是依然會受到受試者使用習慣的影響,

所以受試者的檢索行為(例如:相關判斷、資訊過濾行為)和傳統的檢索行為並無 太大差異,僅在使用者的瀏覽行為會呈現較大差異。

研究者在研究假設中,提出使用者使用相同介面之檢索行為會有差異,經由 實際測試之後,發現受試者使用相同介面之檢索行為呈現差異,通常會在使用 Column 介面情境之下產生,最主要是因為 Column 介面所呈現的詞彙類別,相 對於 Block 介面來的多,因此若介面呈現的詞彙類別和受試者心中符合程度低時,

有使用者會以隨意瀏覽的方式進行瀏覽。

二、使用圖形化搜尋會改變使用者的知識概念圖

根據 Card, Mackinlay 與 Shneiderman(1999)對於視覺化的定義,視覺化技術 (visualization technique)可以加強人們內心的心智模型,研究者使用知識概念圖去 評估 EBSCOhost 介面,目的想要瞭解使用者使用圖形化搜尋,是否會改變使用 者的知識概念圖;以及視覺化技術是否真正能夠加深使用者對於檢索主題所建構 的心智模型,主要方式是比較使用者在和系統介面互動前後,畫的知識概念圖節 點數之間的差異,以及訪談受試者,改變知識概念圖節點概念的原因。

研究者實際去比較 12 位受試者知識概念圖節點之間的差異,無法真正看出 視覺化技術是否能夠加深使用者對於欲檢索主題所建構的心智模型,只能知道使 用者內心的心智模型,會受到介面的影響,但是此一影響在本研究中並不明顯,

因為受試者知識概念圖節點改變,也會受到使用者本身資訊需求狀態的影響。換

127

句話說,或許是因為受試者在和系統介面互動結束之後,認為不需要畫太多節點 概念,就可以表達欲檢索的問題,因此從分析受試者知識概念圖的小節,可以發 現大多數受試者的知識概念圖,在和系統介面互動結束之後,畫的知識概念圖,

其節點數量會有所減少。總而言之,本研究無法看出使用圖形化搜尋是否真正改 變受試者永久對於檢索主題之認知架構(conceptual framework),因此必須要透過 長時間的研究,才有辦法得知。

三、視覺化檢索介面之實質效益

本研究透過檢索效率、檢索效能、滿意度、理想詞彙來評估視覺化檢索介面 之實質效益。另外,也使用學習性指標評估介面學習性。雖然研究者在指標分析 的部份,有呈現分析結果,但是因為本研究的檢索任務是來自於受試者真實的資 訊需求,因此檢索效率指標也會受到受試者檢索問題的影響,若受試者的檢索問 題過於冷門,將會影響到研究結果。另外,本研究實驗組別有兩組,一組是從 Column 介面開始,另外一組是從 Block 介面開始,但是檢索任務僅有一題的情 形之下,有受試者表示會受到上一個介面使用的影響,因此研究者認為呈現檢索 效率的指標意義不大,無法真正看出視覺化檢索介面之檢索效率;在檢索效能指 標層面,受試者在 Column 介面平均找到文章相關程度優於在 Block 介面;但是 平均找到文章新穎程度卻是 Block 優於 Column 介面;在滿意度指標層面,不論 是介面有用程度或是檢索結果滿意程度,Column 介面都優於 Block 介面。整體 而言,因為本研究的樣本數(n=12)太小,所以在指標分析層面,分析結果並沒有 統計效力(power),亦即無法作統計上任何的推論。

另外,在理想詞彙指標層面,受試者在開始和系統介面互動之前互動檢索前 問卷所寫下的理想詞彙 (ideal query),不一定能夠反應受試者資訊需求問題,因 此本研究希望透過理想詞彙評估指標,了解視覺化搜尋介面是否能夠幫助受試者 達成欲檢索問題之理想詞彙,主要是會分析比較受試者在互動結束之後,所寫下

128

的理想詞彙,在和系統介面互動之前,所寫下理想詞彙之間的關係,總共有 24 組詞彙,僅有兩組詞彙在互動結束之後,並未改變理想詞彙,在分析其他詞彙之 間的關係,得到下列三種關係:(1)原理想詞彙因互動而減少:使用者在和系統 介面互動結束之後,所寫下的理想詞彙,包括在原理想詞彙裡,但是因和系統互 動的關係而減少詞彙;(2)原理想詞彙因互動而增加;使用者在和系統介面互動 結束之後,所寫下的理想詞彙,包括在原理想詞彙裡,但是因和系統互動的關係 而增加新的詞彙;(3)新的理想詞彙取代所有的理想詞彙:受試者在和系統介面 互動結束之後,以全新的詞彙,當作最終理想詞彙。總而言之,根據受試者的訪 談以及比較受試者在檢索前和後,所寫下理想詞彙的關係,可以歸納受試者過去 搜尋經驗 search experience)、介面 (interface)可能會影響使用者查詢問句再形成。

四、視覺化檢索介面適用於何種使用情境

現今已經有許多不同的檢索工具 (search tools),因此在不同的檢索情境 (search contexts)下,應該要努力找出視覺化檢索工具適用於何種使用情境,才能 發揮檢索工具最大效益。

考量視覺化檢索工具可以幫助使用者釐清資訊需求問題,因此研究者在設定 問題情境,分為熟悉/不熟悉兩種問題情境,以使用者真實需求評估視覺化檢索 工具適用於何種情境。本研究的檢索任務僅有一題,並且由受試者自行評估對於 檢索主題的熟悉程度,根據問卷填答,受試者平均對於檢索主題的熟悉度為 4,

僅有兩位受試者對於檢索主題的熟悉程度低於平均值。另外,受試者通常是以自 己的論文題目當作檢索任務,所以普遍對於檢索問題相當熟悉,從量化的研究結 果,並無法看出視覺化檢索適用於何種問題情境,但是從質性的研究結果,發現 有受試者認為熟悉問題的情境,視覺化檢索工具對於使用者的幫助有限,主要是 受到過去搜尋經驗的影響。另外,從分析實驗結束之後的訪談,受試者再次使用 視覺化檢索介面的情境為: (1)不熟悉檢索問題(2)新的研究議題(3)縮小研究問題

129

範圍。最後,研究者認為因為本研究所採用的檢索任務僅有一題,且研究樣本太 小(n=12),因此無法真正找出視覺化檢索工具適用於何種使用情境。

五、相關研究比較

本研究將研究結果和過去相關研究進行比較,主要是比較過去兩個相關研究:

一個是陳思穎《自動分群搜尋引擎評估研究》;另外一個研究是Fagan《Usability Testing of a Large,Multidisciplinary Library Database: Basic Search and Visual Search》,選擇這兩個研究的原因是研究對象跟本研究較為接近。從研究方法、

130

131

從過去視覺化檢索工具評估研究脈絡(contexts) ,缺少以資訊行為角度出發,

探討使用者使用視覺化檢索工具之檢索行為,因此研究者在考量相關文獻之後,

決定採用和以往不同的評估方式,希望採用新穎的評估方法,捕捉使用者使用視 覺化檢索工具不同行為的面向,所以本研究的主軸將探討使用者實際使用視覺化 檢索介面的情形、圖形化介面是否改變使用者的認知狀態(congitive states)和 檢索詞彙,以及受試者遇到的好用性問題(usability issues),雖然也有針對自動分 群技術進行討論,但是並沒有像陳思穎(民 96) 的研究,透過實際問卷問題,深 入探討使用者對於自動分群的認知與看法,只是進行概略性的探討。

在使用者檢索行為分析層面,雖然 EBSCOhost 視覺化檢索介面背後使用的 資訊視覺化技術和 Vivisimo 不同,但是和陳思穎研究結果一致,使用者的資訊 搜尋行為會受到使用者平常搜尋習慣的影響;另外一個研究重點是希望透過測試 使用者,找出好用性問題,其中有幾項好用性問題,將會嚴重影響使用者的經驗,

例如:瀏覽器相容問題、暫存文章問題。研究結果找出九項好用性問題,其中一 想好用性問題和 Fagan(2006)研究結果符合,就是使用者無法使用布林邏輯(and 、 or 、not)方式,將多少會影響到使用者的搜尋速度。

Fagan(2006)研究目的與問題主要有兩個:(1)了解視覺化搜尋以及文字型介 面支援學生研究的程度,(2)了解使用者分別在文字型介面以及視覺化檢索介面 之檢索表現。在實驗結束之後,訪談使用者對於不同介面的偏好(preferences)之

132

後,發現喜歡視覺化搜尋介面的使用者,可以歸納下列幾個原因;(1)使用者認 為相對於文字型檢索介面,視覺化搜尋介面比較容易使用;(2)視覺化搜尋介面 是以圖形化的方式,呈現檢索結果,因此使用者認為視覺化搜尋介面較為新奇 (novel)。使用者認為使用搜尋介面的優點是使用者可以探索不同的主題,缺點是 檢索結果量呈現過少,使用者怕遺漏掉所需的資訊。

陳思穎(民 96)研究目的與問題主要是比較使用者分別在相關排序搜尋引擎 和視覺化搜尋引擎之檢索表現。研究結果指出相關排序搜尋引擎,就能夠滿足使 用者多數的資訊需求,但是使用者對於視覺化搜尋引擎 Vivisimo 抱持好感,再 次使用的意願也很高。

綜合上述所說,資訊使用者普遍對於視覺化檢索工具,抱持一定好感,但是

綜合上述所說,資訊使用者普遍對於視覺化檢索工具,抱持一定好感,但是