第三章、 研究方法
第六節、 信度檢驗
國
立 政 治 大 學
‧
N a tio na
l C h engchi U ni ve rs it y
第六節、 信度檢驗 一、 信度檢驗說明
信度檢驗公式說明
在進行正式編碼之前,所有參與本研究之編碼員均經過 Cohen’s kappa 一致 性信度檢測,以確保本研究之內容分析結果具「一致性」(consistency)
(Babbie, 1998)。編碼員信度檢測公式(王文心,2012;Viera & Garrett, 2005),說明如下:
N :總樣本數;
K:編碼員人數;
i:細格行數;
j:細格列數。
PA:前後(兩種)測量結果一致的百 分比;
P0:前後(兩種)測量結果預期相同 的機率。
信度檢驗流程說明
1. 「貼文」信度檢驗:性訴求、自我揭露類目
本研究之「貼文」信度檢驗共分為「文字」與「圖像」兩部分。「文字」
部分,經由「機器篩選」以進行編碼,藉此判別各則貼文之文字敘述是否符合
「性訴求」與「自我揭露」類目操作型定義。「圖像」部分,則由兩位編碼員 進行人工編碼,藉此判別各則貼文之圖像是否符合「性訴求」與「自我揭 露」。
在「文字」貼文之信度檢驗方面,研究者先依據貼文編號、以亂數隨機抽 取總樣本數 10%(N = 74),再由兩位編碼員進行「人工編碼」;最終,計算
‧ 國
立 政 治 大 學
‧
N a tio na
l C h engchi U ni ve rs it y
兩位編碼員之相信度,以及兩位編碼員各自與電腦之一致性信度。「圖像」之 信度檢驗,同樣先由研究者貼文編號、以亂數隨機抽取總樣本數 10%,並且在 進入正式內容分析前,本文針對信度較低的類目以討論方式再次確認、微調編 碼原則,以確定信度符合一致性之標準,總計信度檢測貼文共 151 則。
2. 「評論」信度檢驗:擬社會互動評論類目
考量本研究分析之粉絲專頁之「評論」以「文字敘述」為主要媒體類型,
故「評論」僅分析「文字」部分。評論之「文字」部分,經由機器篩選以進行 編碼,藉此判別各則貼文之文字敘述是否符合「擬社會互動評論」類目操作型 定義。
在信度檢驗方面,首先由研究者從所有評論中,隨機抽取總樣本數 10%
(N = 6, 693),再由兩位編碼員進行人工編碼;最終,計算兩位編碼員之相信 度,以及兩位編碼員各自與電腦之一致性信度。
二、 信度檢驗結果
貼文信度檢驗:文字與圖像之「性訴求」類目
在隨機抽樣之「文字」貼文中,各項關鍵字之性訴求子類目經過編碼員信 度計算,兩位編碼員各自與電腦之一致性信度均達 .90~ 1.00,符合信度一致性 之標準。如表 11。
在隨機抽樣之「圖像」中,「衣著類型」、「裸露部位」兩項性訴求子類 目經過編碼員相互同意度及信度計算,兩位編碼員各自與電腦之一致性信度均 達 .84~ .85,符合信度一致性之標準。如表 11。
貼文信度檢驗:文字與圖像之「自我揭露」類目
在隨機抽樣之「文字」貼文中,「文字自我揭露」類目(貼文中是否出現 關鍵字「我」)經過編碼員信度計算,兩位編碼員各自與電腦之一致性信度均 達 .97~ 1.00,故符合信度一致性之標準。如表 11。
在隨機抽樣之「圖像」中,「圖像自我揭露」類目(貼文中是否出現「女 性遊戲實況主本人」)經過編碼員信度計算,兩位編碼員各自與電腦之一致性
‧
Cohen’s kappa 兩位