第四章 研究結果與分析
第三節 綜合討論
本節將根據上述第一、二節所提到的研究發現,以及研究所關注的議題,進 行綜合分析,主要是分為兩個部分進行討論:(1)使用者資訊搜尋行為(2)互 動式檢索評估:將針對本研究所提出的評估方法,再次進行分析。
一、使用者在視覺化檢索環境中之資訊搜尋行為
EBSCOhost 視覺化檢索介面分為 Block 以及 Column 介面,兩種介面檢索 結果呈現的方式不同,一個以分類架構的方式呈現檢索結果,使用者必須不斷點 擊群集(clusters),才能搜尋到資訊;另外一個是以地圖的方式呈現檢索結果,使 用者通常會傾向看檢索結果。綜合上述幾節的分析結果,受試者檢索行為的特性,
在檢索結果過濾以及判斷相關資訊的方式,並不太會受到介面的影響,主要還是 以受試者本身的搜尋習慣為主。另外,仔細查看 EBSCOhost 視覺化檢索介面,
視覺化僅使用在檢索結果呈現,雖然提供一些互動機制(interaction mechanism),
例如:block 介面所提供的互動式捲軸,讓受試者隨時可以和系統介面進行互動。
舉例來說:受試者對於某個檢索結果內容有興趣時,可以透過互動式捲軸,將文 章方塊的內容標題放大或是縮小。
從早期圖書館目錄到後來的網路環境,圖書資訊學領域的研究者一直關心使 用者如何在不同的情境(contexts)之下搜尋資訊。研究者在進行實驗之前,原本希 望可以透過實際測試使用者,找出視覺化檢索工具是否會改變使用者資訊搜尋行 為模式,但是透過研究得知使用者的資訊搜尋行為,和在文字型介面環境下之資 訊搜尋行為,但是透過研究得知使用者的資訊搜尋行為,和在文字型介面環境下
122
之資訊搜尋行為差異性不大,研究者認為這是因為使用者的資訊搜尋行為,依然 深受文字型介面的影響,無法真正看出視覺化檢索工具對於使用者資訊搜尋行為 的影響。
二、互動式檢索評估
資訊檢索一直是圖書資訊學重要的領域,早期資訊檢索研究是以系統導向為 主,著重於系統符合使用者檢索詞彙的需求,近幾年透過不斷的研究,研究者認 為資訊檢索是使用者和系統介面不斷互動的過程,因此開始努力去了解使用者在 資訊搜尋過程中所扮演的角色。
從早期傳統資訊檢索系統到現今互動式檢索系統,使用者如何使用檢索系統
,一直是系統評估研究關心的議題。隨著互動式檢索系統越來越多,評估互動式 檢索系統已經是一件刻不容緩的事情,但是若全面採取傳統資訊檢索評估的方式
,並無法全面了解使用者在視覺化檢索環境下,所有的檢索行為特徵,因此必須 採取新穎的評估方法,評估互動式檢索系統。
EBSCOhost 視覺化檢索介面除了是一個視覺化檢索環境之外,也是一個互 動式檢索環境,因此研究者在考量相關文獻之後,並不比較使用者在不同介面之 檢索表現,而是將研究主軸擺在使用者如何使用視覺化檢索工具,以及使用者對 於視覺化檢索工具的觀感。以下將根據研究結果發現,重新檢視本研究所採用的 研究方法。
(一)檢索任務以及評估指標
回顧本研究的檢索任務設計,僅使用受試者本身的資訊需求問題,主要目的 是為了模擬真實需求情境,但是經由實際測試使用者在視覺化介面之檢索表現,
發現若僅使用受試者自己的檢索問題,當作檢索任務,依然還是會有疑慮,因為 使用者的檢索任務屬於開放性問題,所以若研究者沒嚴格去篩選使用者的檢索問 題,會造成一些研究結果的影響,因此雖然本研究有呈現評估指標分析結果,但
123
是研究者認為分析結果意義不大,最主要是因為檢索問題會影響這些指標分析的 結果,特別是在介面檢索效率,此外因為本研究的樣本數(n=12)太小,亦即無法 做任何統計上的推論。
任務(tasks) 在資訊檢索研究非常重要,可以幫助研究者了解使用者怎麼去 尋找資訊、獲得資訊。因此研究結束之後,研究者省思本研究的檢索任務設計,
應該要分成人工制定任務、以及使用者本身的任務,就像是陳思穎(民 96)所進行 視覺化搜尋引擎 Vivismo 評估研究,研究進行兩項實驗,一項實驗是利用人工制 訂任務,來評估 Vivismo 搜尋引擎;另外一項實驗是採取使用者本身檢索需求當 作檢索任務。
(二)理想詞彙
在使用者檢索詞彙分析層面,研究者主要是分析使用者在介面互動之前和結 束後,使用者寫下關於欲檢索問題之最佳理想詞彙,以及最佳理想詞彙能夠表達 資訊需求問題的程度。研究結果顯示受試者和系統介面結束後,所寫下最佳理想 檢索詞彙,通常包含在和系統介面互動之前,在檢索互動前問卷所寫下的檢索詞 彙,因此在本研究個案中,圖形化搜尋能改變使用者檢索詞彙的程度有限,所謂 是否能改變使用者的檢索詞彙,主要關心使用者在和系統介面互動結束之後,寫 下的理想詞彙,是否來自於介面提供的詞彙類別。採取這種評估方法,主要目的 是為了瞭解視覺化檢索工具,是否能夠幫助使用者查詢問句再形成,但是從過去 一些資訊行為研究,可以知道使用者的資訊需求是持續變動,所以使用者資訊搜 尋(information searching)的過程,使用者的檢索詞彙也會隨時變動,因此對於研 究者而言,應思考使用者在和系統介面互動過程,是否有檢索詞彙能夠真正滿足 使用者的資訊需求問題,但是研究者在實驗完成之後,作了一些研究上的省思,
思考使用者在互動結束後,寫下的理想詞彙 (ideal query),會不會只是因為很容 易找到所需的文獻,但不足以代表使用者檢索問題需求。
124
(三)知識概念圖
過去系統評估領域中,很少研究使用知識概念圖評估系統介面。本研究使用 知識概念圖的原因,是為了了解知識概念圖是否能夠加深使用者內心建構欲檢索 主題之心智模型。
根據研究結果,受試者在和系統介面互動結束之後,畫的節點數變少。雖然 本研究找出節點改變的原因是來自於介面以及和系統介面互動影響,但是依然不 清楚受試者減少節點概念數的原因。但是從資訊行為的角度來看,研究者認為可 能的原因是因為受試者在和系統介面互動結束之後,認為不需要用那麼多節點概 念數,就可以表達欲檢索問題。
125