第四章 想像思考測驗之計分指標與信效度研究
第三節 想像思考測驗之信效度研究
本研究採評分者間內部一致性及相關等,瞭解計分的穩定情形,以重測信度 瞭解受測者作答的穩定度;在效度方面,則分別以「新編創造思考測驗」、「未來 想像傾向量表」、「華─葛氏批判思考量表」等測驗或量表為效標,分析本測驗與 前揭工具之相關情形;最後以參加未來想像社團之學生為效標組,檢驗效標組學 生在本測驗之表現,是否高於一般高中學生,做為外在效度的指標。以下即分別 說明之。
壹、信度分析
一、評分者一致性信度
59
為了驗證測驗工具之信度,本研究請 3 位評分者根據研究者提供計分指標說 明,針對受試學生作品的超越現實以及圖像的鮮明進行評分,求得評分者信度。
各指標評分者間一致性 Cronbach's α值以及相關如表 4-7 。超越現實及鮮明的 評分者間 Cronbach's α值分別為 0.945 與 0.923;評分者間相關則分別為.858~.912 之間,以及.812~.909 之間,均十分良好。
表 4-7 各指標之評分者間一致性與相關摘要表
超越現實 鮮明
Cronbach's α 值 0.945 0.923
評分者間相關
評分者 1 0.858 0.812
評分者 2 0.912 0.909
評分者 3 0.893 0.846
二、再測信度
研究者於受試學校中選取一個班級 43 名學生進行再測,期間相隔一個月。
以相關分析獲得再測信度,如表 4-8 所示,超越現實為 r (41) = .555, p<.001,鮮 明為 r (41) = .320, p<.05,兩者均有顯著相關,惟屬於中度相關。然吳靜吉等人
(1998)編製「新編創造思考測驗」,再測相關亦僅介於.34~.60 之間,故考量時 間間隔、測驗特性,以及受試者本身配合再測的態度因素,這樣的再測相關尚屬 可接受。
表 4-8 想像思考測驗各評分指標之再測相關(n=43)
超越現實 鮮明
超越現實 .555***
鮮明 .320*
*p<.05 ***p<.001
貳、效度分析
一、以其它測驗做為同時效度
為檢驗本研究所發展想像思考測驗的效度,分別以「新編創造思考測驗」、「未 來想像傾向量表」、「華─葛氏批判思考量表」做為同時效度的檢驗工具。結果如 4-9 所示。其中「超越現實」指標與「新編創造思考測驗」之各分測驗均有低度 到中度的顯著相關,介於.254~.447 之間;與「未來想像傾向」有臨界顯著的相 關(r (31) = .322, p =.71)及「批判思考量表」則無相關。另一方面,「鮮明」指 標與「新編創造思考測驗」無相關,與「未來想像傾向」有.478 的顯著相關,與
「批判思考量表」亦無相關。
表 4-9 想像思考測驗各評分指標之效標關聯效度
超越現實 鮮明
相關係數 n 相關係數 n
新編語文流暢 .405** 61 0.212 61 新編語文變通 .414** 61 0.170 61 新編語文獨創 .271* 61 0.224 61 新編圖形流暢 .462*** 68 0.149 68 新編圖形變通 .447*** 68 0.152 68 新編圖形獨創 .380** 68 0.160 68 新編圖形精進 .254* 68 0.099 68 未來想像傾向 0.322† 32 0.478** 32 批判思考 -0.042 39 -0.001 39
*p<.05 **p<.01 ***p<.001 †p<.08
整體而言,本測驗兩個指標當中,僅「超越現實」與「創造思考」有中等 程度的關連,另一個「鮮明」指標則與「創造思考」較無關聯,然而另一方面兩 種指標又同時與情意層面的「未來想像傾向」有關連,顯示本測驗的兩種指標測 量出來的結果,同時與創造思考及未來想像傾向都有一定程度的關聯,而且與未
61
來想像傾向更為接近。此外,兩種指標都與批判思考測驗結果無相關,而批判思 考是一種聚斂性思考,性質不同於想像思考為擴散性思考,故此一結果支持二者 有所區別。
二、以未來想像社團學生為效標組
在本研究的受試學生當中,有一個高中是以該校參加「未來想像社團」的 29 名學生受試,這些學生已經接受了一個學期(約 16 週)每週一節課(50 分鐘)
的未來想像課程,較其他受試學生有更多且更具系統的想像思考培訓經驗,故為 驗證本測驗是否具有實徵上的效度,本研究選取這 29 名參加未來想像社團的學 生做為想像思考測驗的效標組,與另外隨機挑選的 29 名受試學生做為對照組,
以獨立樣本 t 檢定進行「超越現實」與「精緻」分數的差異考驗,如表 4-10 所示。
結果發現,在超越現實方面,效標組與對照組採用變異數不同質之 t 檢定公式,
t (42.683) = 3.318, p=.002,前者顯著高於後者;在鮮明方面,效標組與對照組則 沒有顯著差異(t (56) = -1.236, p=.222)。
表 4-10 未來想像社團學生與一般高中生在各計分指標上的差異 t 檢定摘要表 評分指標 分組 n M SD t df p 超越現實 效標組 29 8.31 4.841 3.318 42.683 0.002
對照組 29 4.93 2.576
鮮明 效標組 29 2.72 0.797 -1.236 56.000 0.222 對照組 29 3.10 1.448
整體結果來說,效標組的高中生對想像思考測驗較其他對照組高中學生在超 越現實方面,前者顯著高於後者;在鮮明方面,效標組與對照組則沒有顯著差異。
顯示想像思考的超越現實力是可以透過訓練而增進的,而想像思考的鮮明力究其 原因,研究者推測,可能是想像的鮮明性與個人的繪畫能力有關聯,而個人繪畫
能力無法在短期之內有明顯提升,因此兩組在鮮明指標的得分上沒有明顯差異。
參、小結
本研究針對想像思考測驗進行效標關聯效度研究,假設「創造」、「未來想 像傾向」與「想像」有部分重疊的構念,與「批判思考」為不相關的構念,且受 過想像思考訓練之未來想像社團學生在想像思考測驗上表現較好。
在測驗方面,採用吳靜吉等人 (1998) 所編製之「新編創造思考測驗」與巫 宜錚 (2012) 所編製的「未來想像傾向量表」,作為「想像思考測驗」的相關構 念證據,結果為「超越現實」指標與「新編創造思考測驗」之各分測驗均有低度 到中度的顯著相關,且「想像思考測驗」及「批判思考量表」則無相關,顯示想 像思考的超越現實特性具有「創造」的構念,並以想像的「超越現實」構念為核 心,但亦顯示想像思考不完全同等於「創造」。另一方面,「鮮明」指標與「未 來想像傾向」有.478的顯著相關,與「新編創造思考測驗」及「批判思考量表」
則無相關,顯示想像思考的精緻特性與想像傾向具有某種程度的關聯,而與創造 性成分無關,可能是因為想像思考的精緻性著重在細節的表現,與想像傾向「情 節建構」向度上可能有關。
其次,以陳學志等人(2011)修訂之「華─葛氏批判性思考量表精簡版 WGCTA 中文版」亦做為「想像思考測驗」相關構念的證據,結果顯示無相關,可見兩者 是完全不同的構念。
最後,研究者以獨立樣本 t 檢定進行「超越現實」與「鮮明」分數的差異考 驗,以取得「接受未來想像課程(效標組)與未接受未來想像課程(對照組)高中學 生之比較」,驗證本測驗是否具有實徵上的外在效度,也就是與效標組差異方面 的證據,整體結果來說,效標組的高中生對想像思考測驗較其他對照組高中學生 在超越現實方面,前者顯著高於後者;在鮮明方面,效標組與對照組則沒有顯著
63
差異。上述三類效度的檢視,可印證想像思考與「創造」及「未來想像」的內涵 關聯高,與「批判思考」無關,且接受未來想像課程學生對於想像思考的超越現 實力較其他類科高。由此四種效標關聯效度的證據支持本測驗的構念。
65