• 沒有找到結果。

本文與文獻在理論模式層次的討論

雖然目前文獻上並無與機械動態表徵相關的認知模式,但從 Hegarty 與其同事

(Hegarty, 1992, 2005; Hegarty & Just, 1993; Hegarty et al., 2003; Kriz & Hegarty, 2007)詳細描述、解釋他們在一系列實徵研究結果的程度,可知他們對讀者形成 機械動態表徵的主張。因此,筆者嘗試將 Hegarty 等人的文字說明轉為理論模式,

以對應本文所提出的認知模式。

Hegarty 和 Just(1993)在滑輪系統圖文眼動實驗的論述中,談及讀者主要是 從文建構滑輪系統的動力訊息,圖則提供空間結構訊息,讀者因而能將文字所描 述的滑輪部件與圖上的部件位置做參照,進而能主動在圖上進行運作步驟的推論 與模擬。這樣的說法若轉為理論模型,其基本結構與本論文的機械動態表徵之認 知模式類似;也就是同樣都認為,機械系統的內在表徵有空間結構與動力訊息兩 種成分,而外在表徵的圖、文各自能提供空間結構與動力訊息,且動力訊息是仰 賴在空間結構為基礎之上來運作。若將 Hegarty 和 Just 的主張對應到本論文的模 式,就是文指向動力訊息、圖指向空間結構,以及內在表徵裡空間結構指向動力 訊息,這三條實線箭頭的表示關係。而本文的兩個實驗除了再次驗證 Hegarty 和 Just 的這些主張,還發現了其他的影響關係,包括:文能影響讀者對空間結構內在 表徵的形成、圖能影響讀者對動力訊息內在表徵的形成、動力訊息也能反過來調 整空間結構表徵的影響關係。其中,文在表述空間結構的局部向度上,已確定是 強勢作用,但其在整體空間向度的表述作用則須進一步設計實驗才能驗證;至於 後兩者的關係則是相對弱勢的訊息影響來源,但它們仍然存在。簡言之,在本文 的模式裡,外在表徵的圖、文都有提供空間結構與動力訊息的功能,且空間結構

93

和動力訊息彼此之間有相互影響的關係,這有別於 Hegarty 和 Just 只討論到單向 作用的說法。

從理論發展的角度觀之,Hegarty 和 Just(1993)的主張是合理的,因為所有 理論發展的初期,基本上都會優先確認關係中強勢作用的存在。在此前提之下,

理論發展趨於成熟之後,才有機會以此為基礎再進一步思考是否有其他作用存在 的可能,例如:強勢、弱勢作用,以及交互作用。而本論文的貢獻就在於再次確 認理論中的強勢作用,並發現弱勢作用和交互作用的存在。

至於在與圖文閱讀理論層次的討論上,本論文所提出之「機械動態表徵的認 知模式」也可精緻化圖文閱讀的相關理論。以下主要與「圖文理解整合模式」

(Schnotz , 2005; Schnotz & Bannert, 2003)做討論。雖然此閱讀模式與本論文模式 都同樣從認知心理學的觀點出發,提出讀者如何從圖文閱讀建構心智模式,但筆 者認為此模式有幾項論點尚有討論空間。

首先,Schnotz 和 Bannert(2003)的模式圖中「心智模式」和「命題表徵」位 階不清。從本文在理論回顧此模式的模式圖(頁 16,圖 2)來看,這兩者的位階 是相同的,就會使得這兩個概念似乎沒有層次高低的區分。按照此模式的畫法,

似乎把圖片編碼成視覺心像之後,不用經過命題表徵的轉換,就可以直接到達心 智模式;反而是在圖片與文本參照的階段,心智模式才轉換成命題表徵。這樣的 想法與文本閱讀理論(Kintsch, 1988; Kintsch & van Dijk, 1978; van Dijk & Kintsch, 1983)和訊息處理理論(Johnson-Laird, 1983)都認為心智模式比命題表徵的位階 更上層、更能反映人對世界的整體表徵之最終型態的想法不符。而 Schnotz(2005)

雖對 Schnotz 和 Bannert 的圖文閱讀理論進行部分修改,但仍將心智模式與命題表 徵兩個概念維持在相同的位階(頁 18,圖 3)。

其次,Schnotz 和 Bannert(2003)的模式圖有些箭頭關係標示不清。圖上有實 線與虛線的箭頭,但並沒有標示兩者的差別,該文對模式圖的描述也未解釋此差 異。此外,Schnotz 和 Bannert 在文中說明圖片的外在表徵形成視覺心像之後,也 會產生命題表徵,最終再建構成心智模式。按此說法,視覺心像和命題表徵應該 是直接關係,但模式圖卻與論文內容的描述不符;在模式圖中,「視覺心像」到「命 題表徵」用虛線呈現,似乎就是一種弱勢或非直接的關係。筆者認為若能在文中

94

論述為何採用虛線而非實線表示這兩者的關係,區隔兩種線段的用法與意義,才 能讓此模式的論點更清楚明瞭。Schnotz(2005)在修改後的圖文理解整合模式中,

將所有箭頭都以實線標示關係,但這樣反而降低模式的細緻度,同時也可能忽略 在閱讀歷程的轉換關係中,有一些認知成分之間可能有強勢與弱勢作用的差別。

再者,Schnotz 和 Bannert(2003)模式圖中,讀圖的認知路徑在各個轉換的歷 程都是採類比結構對應的分析方式。筆者認為如果讀圖所產生的視覺心像,最終 可以形成 Kintsch(1988)和 Johnson-Laird(1983)所言的心智模式,在此轉換的 歷程中,視覺心像的類比性應該要被削弱。也就是說,若類比的屬性(例如:結 構關係)都還保留在心智模式,只是選擇重要的訊息而省略細節,就比較類似心 像,而不像既非口語、也非心像的高層次心智模式的概念。在 Schnotz(2005)的 修改模式中,已經不見類比結構對應的詞彙,因此也無從得知作者的想法是否有 所改變。

最後,在 Schnotz 和 Bannert(2003)模式圖中視覺心像到心智模式的歷程,

他們用「主題選擇」表達這個表徵轉換的認知歷程。但筆者認為選擇只是刪掉不 重要的訊息或擷取重要的訊息;整合的概念比較接近讀者自己添加一些訊息並賦 予意義,如此才能在圖片呈現的訊息之外,增加其他訊息,使讀者有機會調整最 終的心智模式。這個由長期記憶的背景知識和經驗基模向下整合訊息的歷程,也 是諸多閱讀理論都強調的重要概念之一(Ericsson & Kintsch, 1995; Kintsch, 1988;

Mayer, 2001, 2005; van Dijk & Kintsch, 1983)。雖在該模式中有畫出「概念組織」

往命題表徵和心智模式的箭頭指示,也隱含整合的概念,但未給箭頭命名,就會 讓整個模式所要傳達的訊息之精確度降低。在 Schnotz(2005)的修改模式中,雖 已將「認知基模」標示在長期記憶層次的位階上,補充了由上而下的整合概念,

但在新模式中,向下指引到命題表徵與心智模式的箭頭仍未見命名。

本文的機械動態表徵認知模式對上述這些有待討論的問題做了澄清。首先,

「心智模式」在本論文的模式裡,代表的是圖、文訊息最終被處理的結果,是比

「命題表徵」更上層的概念,這樣的觀點也與多數學者的理念一致(Johnson-Laird, 1983; Kintsch, 1988; van Dijk & Kintsch, 1983),認為無論是從文字或圖片所形成的 知識表徵,最終保留在讀者心中的都是表徵深層意義的心智模式。而 Schnotz 與同 事所提出的「圖文理解模式」(Schnotz, 2005; Schnotz & Bannert, 2003)對於心智

95

模式的看法,比較像是一個還在被處理的表徵,所以在其模式中,就不清楚外在 訊息進入內在表徵處理後,最終的狀態是甚麼。其次,在本文的模式中,所有以 箭頭表示閱讀認知歷程的轉換關係都有命名,例如:選擇、組織、整合、引導、

搜尋等表示歷程關係的詞彙;以實線和虛線分別表示強勢與弱勢作用,或穩定與 不穩定的關係,也在論文中有文字說明。最後,本文的模式強調長期記憶中的知 識會與內在表徵不斷來回交流,再將組織過後的內在表徵整合進入心智模式。

筆者雖對「圖文理解整合模式」(Schnotz, 2005; Schnotz & Bannert, 2003)有 些評論,然而,本論文仍肯定此模式在圖文閱讀理論的貢獻,以及可作為本論文 的兩個實驗與所提出模式的對話基礎。在本文機械動態表徵的認知模式中,讀者 閱讀用文字描寫動力訊息的初始處理,就是對應圖文理解整合模式(Schnotz &

Bannert, 2003)的「文章表層表徵」,而逐句閱讀句子形成的內在表徵,就是對應 該模式的「命題表徵」;至於圖的空間結構,基本上是對應到該模式的「空間心 像」。在本論文模式中,空間結構與動力訊息的這兩個框以及箭頭的雙向指示,

代表讀者會來來回回組織與重整圖、文所提供的這兩類訊息;在此處的處理所產 生的內在表徵,就是對應到該模式的「命題表徵」。在本文的模式裡,命題表徵 是內在表徵中,空間結構與動力訊息交互組織所形成的,它可以是短暫的,例如,

每次閱讀一個新的句子,不論是空間結構或動力訊息,就把方才讀到的訊息組合 在一起,所以會產生一個暫時性的命題表徵。若這兩種訊息無法有效整合,就會 是零碎的表徵,讀者在內在表徵裡若要同時處理多個零碎的、無法整合的命題,

就很容易遺忘訊息,最後也很難表現出理解狀態;但若讀者在閱讀過程中,可以 有效整合這些局部的命題表徵,就會形成最終的單一動態表徵之心智模式。

四、閱讀材料編製的啟示

在很多機械閱讀的材料中,並非總是有圖、文兩種表徵,例如很多說明書常 常只有圖或文其中一種表徵,或是兩種表徵所提供的訊息有相當程度的不對等。

因此,研究本論文所探討的問題可知,在只有一種閱讀媒介的條件限制情況下,

讀者只閱讀一種表徵可以理解到什麼狀況。另外,也可以對近年圖文閱讀的研究 議題:什麼是一個好的圖或文的設計,可以提供一些基礎的探究,例如:如何凸 顯圖上的知覺線索、要呈現哪些視覺線索、而文要寫哪些訊息等才有助於讀者有 更好的理解?

96

在圖文並置的機械主題文章中,圖常扮演提供空間結構的角色,文則是提供

在圖文並置的機械主題文章中,圖常扮演提供空間結構的角色,文則是提供

相關文件