• 沒有找到結果。

測驗信效度的統計分析 測驗信效度的統計分析 測驗信效度的統計分析 測驗信效度的統計分析

第四章 研究結果與討論 研究結果與討論 研究結果與討論 研究結果與討論

第三節 測驗信效度的統計分析 測驗信效度的統計分析 測驗信效度的統計分析 測驗信效度的統計分析

第三節 第三節

第三節 測驗信效度的統計分析 測驗信效度的統計分析 測驗信效度的統計分析 測驗信效度的統計分析

壹、信度分析

測驗的信度分析包括了內部一致性、評分者間信度及再測信度三者。以下 依序分述。

一、內部一致性(internal consistency)

以 Cronbach's Alpha coefficients 來評估各個分測驗項目之內部一致 性。內部一致性的基本假設是:受試者接受測量相同概念的項目時應該會呈現 一致的情況。表 4-3-1 是各分項測驗內部一致性信度係數的結果整理,整體來 看,總量表信度係數為 0.929,而以分測驗來看,整體動作控制其內部一致性 之α係數為.664,局部口語動作控制此分測驗驗具有相當高的內部一致性,其 α係數為.882,順序維持此分測驗亦具有相當高的內部一致性,其α係數 為.863,連續性口語的動作控制此分測驗則具有可接受的內部一致性,其α係 數為.773,而最後一個分測驗整體語言特徵因二元計分法,即得分為 0 或 1,

故無法以 Cronbach's Alpha 係數進行信度考驗。表 4-3-2 是各題項與整體動 作控制此分測驗總分的相關,由此表最後一欄可得知刪除任何一題後並未來明 顯提高內部一致性之α係數,所以不考慮刪減此分測驗的任何題項。而表 4-3-3 為局部口語動作控制分測驗中刪除各題項後的α係數,由表中可知刪除 任何一題後並未明顯提高內部一致性之α係數,所以不考慮刪減此分測驗的任 何題項。而表 4-3-4 為順序維持此分測驗中刪除各題項後的α係數,由表中可 知刪除任何一題後並未明顯提高內部一致性之α係數,所以也不考慮刪減此分 測驗的任何題項。而表 4-3-5 為連續性口語的動作控制此分測驗中刪除各題項 後的α係數,由表中可知刪除題項 77 後,可將α係數提高至.845,但題項 77 為針對連續性口語的表現做一整體的評分,並不是一獨立的題項,故無法刪 除。α係數是內部一致性的函數,也是試題間相互關連程度的函數,根據

Henson(2001)的觀點,如果研究者目的在於編製預測問卷或測驗或測量某構念 之先導性研究,信度係數在.50 至.60 已足夠,但以基礎研究為目的時,信度 係數最好在.80 以上。Log(2001)也提出對於一般性的研究而言,內部一致性 估計值普遍可接受數值為.80,當標準化測驗分數作為重要的臨床或教育決策 if Item Deleted

Corrected Item-Total Correlation

Cronbach's Alpha if Item

Deleted

i1 .209 .000 .667

表 4-3-2 整體動作控制分測驗中各題項得分與此分測驗總分的相關(續)

題項 Scale Variance if Item Deleted

Corrected Item-Total Correlation

Cronbach's Alpha if Item

Deleted

i13 .209 .000 .667 Item Deleted

Scale Variance if Item Deleted

Corrected Item-Total Correlation

Cronbach's Alpha if Item

Deleted

i14total 188.66 287.603 .000 .882

表 4-3-3 局部口語動作控制分測驗中各題項得分與此分測驗總分的相關(續)

題項 Scale Mean if Item Deleted

Scale Variance if Item Deleted

Corrected Item-Total Correlation

Cronbach's Alpha if Item

Deleted

i40total 192.67 286.817 .344 .882

表 4-3-4 順序維持分測驗中各題項得分與此分測驗總分的相關

Scale Mean if Item Deleted

Scale Variance if Item Deleted

Corrected Item-Total Correlation

Cronbach's Alpha if Item

Deleted

i33seq 49.07 64.856 .216 .863

表 4-3-5 連續性口語的動作控制分測驗中各題項得分與此分測驗總分的相關

Scale Mean if Item Deleted

Scale Variance if Item Deleted

Corrected Item-Total Correlation

Cronbach's Alpha if Item

Deleted

i73 22.78 14.371 .703 .676

i74 22.66 15.186 .717 .680

i75 22.49 14.592 .493 .759

i76 22.59 15.597 .775 .673

i77 21.74 18.569 .209 .845

二、評分者間信度

本研究由 224 位受試者名單中隨機抽出 10 位於施測過程中錄影(需先經過 家長同意),施測人員(非原施測人員)則分別就影帶內容給予獨立的評分,將 原施測者和以影帶內容評分所得的分數作評分者間信度考驗,以皮爾遜積差相關 (Pearson product correlation)方法探討評分之相關係數。結果如下表 4-3-6。

於整體動作控制此分測驗由於評分者甲給 10 位受試者的分數均為滿分 20 分,無 法進行信度考驗,但由評分者乙的給分資料來看 9 位受試者也是滿分 20 分,只 有 1 位是 19 分,顯示於此分測驗中評分者的給分差異是不大的。而兩位評分者 於局部口語動作控制、順序的維持和連續性語言的口語動作控制三個分測驗的評 分為高度相關(>.700),而語言特性上則為低度相關(<.400)。上述結果顯示 本測驗於整體動作控制、局部口語動作控制、順序的維持和連續性語言的口語動 作控制分測驗具有良好的測驗者間信度,而語言特性雖然在相關係數上較低,但 可能因為題數及樣本數較少,故信度考驗上顯著性不高,但由平均分數上來看評 分者甲和乙並無明顯的差距,整體而言,本測驗為一個具有良好再測者間信度的 評估工具。

表 4-3-6 評分者間信度 Pearson 相關

係數

20.00 267.40/16.635 48.00/7.572 36.70/ 4.244 6.40/.699

評分者乙的 平均給分/標 準差

19.90 269.40/21.141 49.50/7.502 43.60/12.799 6.90/.316

*p 值<.05

三、再測信度

本研究使用 SPSS12.0 中文版軟體信度分析中的積差相關係數考驗,探討兒 童第一次和第二次接受本測驗評估表現的關聯性。同時本研究以描述性統計呈現 第一次和第二次施測時各測驗分項中原始分數的平均值、標準差、相關係數及絕 對分數差異的平均值(mean absolute score difference)。並以列表方式呈現 各測驗分項中分數差異的次數(frequency)及百分比率(percentage)。由表 4-3-70 得知再測信度考驗中兩次測驗得分於局部口語動作控制、順序的維持及 連續性語言的口語動作控制三個分測驗中有高度的顯著相關,其 Pearson 相關係 數分別為.718、.743 及.774,顯示這些分測驗有相當不錯的再測信度;而整體 動作控制分測驗中 10 位受試兒童有 9 位在兩次測驗中均得滿分 20 分,只有 1

施測指導語的再次接觸而較能表現出正確的反應,這些因素皆可能影響再測信度

Pearson 相關 係數

20.00/.000 278.20/37.422 51.30/9.499 42.10/5.301 7.00/0.00

第二次施測 平均分數/標 準差

19.90/.316 294.50/13.125 55.30/2.710 41.60/5.481 7.00/0.00

絕對分數差

表 4-3-8 再測信度中兩次測驗於各分項測驗中分數差異的次數(frequency)及 百分比率(percentage)。

分測驗 整體動作控 勢與差異,因此本研究採用雙因子變異數分析(two-way ANOVA)來評估不同年齡 層之男女生在本測驗量表中各測驗得分上是否有顯著的不同。結果發現不同年齡

交互作用與得分的關係,在排除性別和年齡因子的主要效果後,其交互作用效果 項僅能解釋極小的變異量,也就是說年齡和性別的交互作用項與順序分測驗的得 分呈現「低度關係」。

二、既知團體效度

本研究以獨立樣本 t 考驗來評估臨床組(30 位構音障礙患者)及對照組(30 位年齡性別配對的正常兒童)在本測驗量表中各測驗得分上是否有顯著的不 同,,一個具備良好建構效度之測驗工具必需能反應出不同臨床組表的表現。以 上兩組接受「三至六歲兒童口語動作功能評估量表」測試 ,分析兩組樣本在各 分測驗得分上是否有顯著差異,以瞭解本測驗工具是否足以區辨一般兒童與口語 動作功能異常的兒童。臨床測驗部份的全部個案由研究者獨立完成施測,結果將 於本章第四節呈現。

三、內部效度

每個測驗將與本身所屬的測驗面向之間反應出一定的相關程度,即所謂之內 聚效度,為內部效度的一種,本研究將探討項目-分測驗總分之相關(item-total correlation)以鑑定每個面向之測驗項目所呈現之內聚效度(convergent validity),同時也以皮爾遜積差相關(Pearson product correlation)方法探 討各分測驗之間得分之相關,檢視其相關程度是否如預期的結果,這也是內部效 度的考驗之一。

表 4-3-9 項目-分測驗總分之相關(item-total correlation)

分測驗 項目 Pearson 相關係數 顯著性

整體動作控制 Item 1-13,26 - -

整體動作控制 Item 27 .548 .000**

整體動作控制

Item 28

.747 .000**

整體動作控制

Item 29

.747

.000**

表 4-3-9 項目-分測驗總分之相關(item-total correlation)(續)

表 4-3-9 項目-分測驗總分之相關(item-total correlation)(續)

表 4-3-9 項目-分測驗總分之相關(item-total correlation)(續)

作控制與該分測驗題項得分的相關性最高,相關係數介於.563-.777,表示此分

表 4-3-11 3.00-3.99 歲組各分測驗之間得分之相關

表 4-3-12 4.00-4.99 歲組各分測驗之間得分之相關(續)

表 4-3-14 6.00-6.99歲組各分測驗之間得分之相關(續) 齡層及全體的相關係數極低,係數分別為為-0.87、0.069、0.006 和 0.363,

顯示此兩個分測驗得分為低度相關,此發現與原版結果相同。但本研究中四 歲組的相關係數較高,達到中度相關(.647),需要進一步研究以確定。

(二) 「整體動作控制」部份與「順序維持 」部份在各個年齡層及整體均呈現低 相關,從三至六歲及整體係數分別為 0.181、0.414、0.208、-0.051 和 0.298,

此發現亦與原版結果相同,顯示整體動作控制和順序維持兩者為獨立運作的 功能。

(三) 「局部口腔動作控制」部份與「順序維持」部份的相關居冠,三至六歲及整 體的相關係數分別為.751、.714、.507、.836 和.756,為高度相關,顯示兩 者在學齡前的階段有有高度的相關,此發現亦與原版結果相同,但原版研究 中同時發現年紀越大,相關係數越低,顯示隨著大腦側化及功能分區的發展,

兩者控制逐漸獨立的結論,因本研究未收案七至十二歲的兒童,故無法做此

推論,尚需進一步的研究以釐清。

(四) 由於「連續性的語言控制」所評估的層面與「局部口腔動作」相近,因此至 少有中等程度的相關,對於三歲、四歲、五歲、六歲組和整體來說,其相關 係數分別為.682、.306、.452、.713 和.551。同時「連續性的語言控制」所 評估的層面和「順序維持」也有部份重疊,故其相關程度也達中度,對於三 歲、四歲、六歲組和整體來說,其相關係數分別為.579、.357、.533、和.482 而五歲組則相關較低,係數為.119,此發現亦與原版結果相似。而「連續性 的口語動作控制」和「整體動作控制」由於測驗不同功能,因此其相關係數 較低是可以預期的,對於三歲、四歲、五歲、六歲組和整體來說,其相關係 數分別為-.196、.097、-.111、-.076 和.021,此發現亦與原版結果相同。

(五)「語言特性」分測驗中主要評估音高、語速、音量、音質、共鳴及語調,這 些層面在構音音韻障礙者也大多無礙,因此這部份的控制與構音的調控可能 是獨立的,而此分測驗與其它部份的測驗也顯示低的相關,在四、五、六整 體的相關係數範圍為-.038 至.449,至於三歲組在此分測驗與順序的維持和 連續性口語的動作控制部份呈現出中度的相關(.404 和.545),可能原因為

(五)「語言特性」分測驗中主要評估音高、語速、音量、音質、共鳴及語調,這 些層面在構音音韻障礙者也大多無礙,因此這部份的控制與構音的調控可能 是獨立的,而此分測驗與其它部份的測驗也顯示低的相關,在四、五、六整 體的相關係數範圍為-.038 至.449,至於三歲組在此分測驗與順序的維持和 連續性口語的動作控制部份呈現出中度的相關(.404 和.545),可能原因為