信效度分析

為了讓網站首頁內容分析更具有準確度，因此本研究就要有一定的信效度，

來確保學校網站首頁內容分析的可看性。本節分為專家效度與信度分析這二個部 份來討論。

壹、專家效度

效度實際上定義可以說是，我們所衡量的是否為我們真正想衡量的，只有符 合使用者的科學或實務上的目的，才是一份有效的測驗或量表（黃營杉、汪志堅，

2002 : 308）。

為提高本研究的客觀性與可靠性，研究者根據文獻分析與研究者個人在規劃 設計學校網站的經驗，完成「初步的類目與項目分析表」(如附件二)，再依據電腦 領域專家意見，修訂原始的分析內容，完成「正式的類目與項目分析表」(如附件 三)，以建立專家內容效度，協助內容分析的適當性。本研究所邀請之專家如下表 3-1。

表 3 - 3 電腦領域專家內容效度諮詢名單表

姓名 現 職

候明達 台東縣利嘉國民小學資訊教師 黃文昌 屏東縣立枋寮高級中學生活科技教師 林憲平 台北市私立靜心國民中小學資訊教師

在初步的「類目與項目分析表」和正式「類目與項目分析表」當中，三位研 究人員有討論與研議的部分是：1.網頁的文字大小。2.網頁的色彩配置。3.網頁的 路徑連結。4.是否有中文網頁以外語言的網頁版本。5.學校電話、住址。6.網頁的 多媒體動畫。7.學校網站的 QR code。

因為網頁的文字大小，在網站首頁呈現時，文字有的大、有的小，沒有一個 絕對的標準的量測，所以將「網頁文字大小是否合宜」，更改為「網站首頁是否有 可調整文字大小的設計」。此外，網頁的色彩配置，每個人的認知都不太一樣，而 且更加沒有一個準確的標準去觀測，所以也將此項目排除。網頁的路徑連結，則 需要檢查蠻多的網站頁面，來確認網站是否有使用路徑連結，但是本研究將焦點 放在網頁的首頁，因此沒有使用這個項目。

中文網頁以外語言的版本，定義不夠精準，經過討論後，將主題改為「是否 有英文版本的網頁」，如此一來，能更加清楚的傳達所要分析的項目。一開始是將 學校電話與住址分開，而且沒有學校的電子郵件信箱，但是，經過研究人員之間 的互相討論後，發現學校電話與住址幾乎都是合在一起的，所以就將學校電話與 住址歸為同一項目。還有在觀測的過程中，決定新增「學校電子郵件信箱」這個 項目。

網頁的多媒體動畫部分，為了能更詳細的分析，將其分別為「文字動畫」、「圖 片動畫」、「影音動畫」三個部分來討論。最後在觀測期間，因為二維條條碼在現

實世界與網路世界的流行，故新增了代表學校網站網址的「QR code」部分。

貳、信度分析

為降低網站更新導致研究員間閱讀網站內容造成判斷上的偏差，因此本研究 設定由甲、乙、丙 三位研究員於 2012 年 4 月 29 日至 5 月 6 日一週內將網站點閱 完畢，在檢視高職網站內容時，以高職網站首頁為主，也就是最主要的學校 內容首頁那一頁為主。編碼時在適當的類目下登錄數字 1，若網站缺乏該項 內容則在類目中登錄數字 0。並依 51 項項目為依據分別點閱 43 個網站，共 2193 個項目（43 個網站×51 個分析項目），檢視各網站所設置之功能，並計算其信度係 數，其分析步驟如下：

在進行網站內容資料分析之前，須對網站內容訊息的編碼進行信度檢定 Budd 等人（1967）提出有三種方法可用來衡量內容分析的信度，分別是重測法

（Test-Retest），折半係數（Split-Halves）和同義形式法（Equivalent-Forms）等。

重測法乃是要求二個以上編碼員，遵循同一編碼準則，登錄相同資料，此種方法 可用來檢視編碼準則和類目定對的清楚性，也可考驗編碼員遵循準則、了解定義 的能力。折半係數是一種以統計方法來檢視樣本的同質性，而無法檢驗資料本身 是否含有研究者想要的資訊，以描述研究者所關心的現象，因此以折半係數技術 來檢驗內容分析的信度，並不適切。而同義形式法實是重測法的一種變化形式，

它係利用兩個編碼員登錄相同資料的結果，來檢驗資料的關聯性。百分比同意度

（Percentage-Agreement）是一種常被用於衡量編碼員信度係數的技術。

為計算高職學校網站編碼的信度係數，本研究使用「重測法」，由研究者和另 二位編碼員，分別對研究的高職學校網站進行編碼分類，再利用三人的編碼結果，

來計算信度係數。其方法為首先計算兩人間的相互同意度，再根據所得到的相互 同意度求算信度係數。

兩人間相互同意度和信度係數之計算公式如下：

兩人相互同意度＝2M / N1+N2

M ：為兩人間編碼結果為完全同意的變項個數 N1：為第一位登錄者測試的總變項數

N2：為第二位登錄者測試的總變項數

信度係數＝ ( n * 平均相互同意度 ) / 1 + [ (n-1) * 平均相互同意度 ] n：參與編碼人員數

信度係數高低水準如何才合宜，在各研究者間，並無一個確切的標準和範圍，

推格柏那在文化指標的設立時，是以 0.80 的信度係數標準為門檻值！他同時指出 如果信度係數介於 0.67 和 0.80 之間，則下結論時就得特別小心，謹慎保留不可 過於武斷。

Kassarjian（1997）指出，若信度係數高於 85%，則研究者便可滿意此統計結 果。但為求研究之嚴謹，本研究一開始的信度係數要求達 98%，且三位研究員仍 細究彼此間認知差異最大的部份。

三位研究人員對於分析項目的結果有差異部份，一起共同檢閱網站所包含的 語幹，而且討論出結果後進行最後的歸類，倘若經過充份討論後，仍沒有共識，

則排除此項分析項目。

最後被研究者排除的項目有：1.版面配置是否在九個區塊以內，最後將這個項 目刪除的原因是，每個人對於區塊的定義不一樣，每個網站的區塊有大有小，有 的不是很清楚，所以造成這個分析項目，分析的結果差異很大，因些就排除此一 分析項目。2.網站的風格是否有一致性，網站的風格是否一致，這是需要觀看網站 的其它網站，而本研究的焦點放在網站的首頁，所以是沒有比較的對象，因此也 將此一分析項目移除。

最後本研究所討論的部分，是所有研究者皆同意與認可的部分，也就是信度 達 100%，三位研究者討論之後，仍沒有辦法達成相同共識的部分，則排除那部分 的分析項目，如此一來，本研究的信度才會完整。類目與項目分析表的信度分析 之流程圖如下：

從文獻分析與研究者個人的構思：初步「類目與項目分析表」

和二位電腦教師討論，最後產生：正式「類目與項目分析表」

三位電腦教師完成 43 所學校網站首頁資料分析

使用重測法，確認三位研究者的信度係度大於 85%

若網站資料編碼有不同意見，則進行討論，修正資料編碼的錯誤

若三位研究者對某項目分析無法達統一編碼的共識，則刪除此分析項目

開始進行「結果與討論」的資料分析 圖 3-3 類目與項目分析表的信度分析之流程圖