本研究目的為發展COMTESS 以完整、快速且精準地評量思覺失調症患者的 二向度工作社交技巧,並初步驗證COMTESS 之信效度與施測效率。研究者透過 文獻回顧、編製題庫、專家審核、題庫驗證與選題建立COMTESS。就研究者所 知,目前COMTESS 為國際上第一項針對思覺失調症患者之工作社交技巧所發展 的電腦化角色扮演測驗。
題庫之發展與優勢
COMTESS 之題庫為依據 Salzberg 等學者之職業能力模型 (Salzberg et al., 1986) 以及 Tsang 等學者之三階層工作相關社交技巧模型 (Tsang & Pearson, 1996) 所發展,其向度結構完整包含工作社交技巧之二個向度,即「個人社交技巧」向 度與「職務相關社交技巧」向度。此外,題庫中所有題目評估之工作社交技巧相 關行為皆為文獻中常見,且經28 位臨床專家審核後,普遍認為對於思覺失調症 患者有點重要至非常重要。各題目之工作社交技巧相關行為與情境內容亦經過專 家審核與修改,故COMTESS 之題庫具有理論基礎與專家內容效度。與過去常用 之工作社交技巧角色扮演測驗相比,COMTESS 題庫之評量向度完整涵蓋工作社 交技巧理論建議之二向度結構,且題庫內容所涉及的工作社交技巧情境較為多 元,包含常見且重要的各項工作社交技巧行為。故COMTESS 題庫之內容完整性 優於其它既有測驗。
COMTESS 之題目為透過影片呈現角色扮演情境,並以電腦完成施測。此設 計使得COMTESS 具備有以下五項優勢:(1) 減少施測者訓練時間:COMTESS 為透過影片呈現題目與角色扮演情境,施測者僅須學習施測軟體的操作方式、題 目內容與計分方式,而不需要如傳統角色扮演測驗之施測訓練般,熟記每項情境 的劇本並多次練習演出過程。故COMTESS 可大幅降低施測者之訓練時間。(2) 降低施測負擔:COMTESS 透過電腦化施測與呈現角色扮演情境,施測者僅需在
一旁觀察與計分。故COMTESS 相較於傳統的角色扮演測驗,可降低施測者之施 測負擔。(3) 一致的角色扮演情境:以相同題目情境而言,每次施測或每位患者 所接受的施測情境刺激物相同,不會因為施測者個人特質或施測者角色扮演之表 現差異,進而影響患者所感知到的情境與作答表現有所不同。(4) 短劇有利於患 者融入角色扮演情境:COMTESS 題目以第一人稱視角的短劇呈現,且影片為模 擬劇情可能發生的真實場景,故有利於患者理解與融入角色扮演情境,進而表現 出更貼近患者在現實生活中可能出現的社交反應。(5) 可行性高:每次施測僅須 準備(筆記型)電腦、滑鼠、音響與計分紙,並由患者自行以滑鼠操作電腦完成 測驗。故COMTESS 之臨床施測可行性高。
計分量尺之驗證
COMTESS 之計分量尺為參考文獻中重要的社交行為觀察指標所設計。每題 之計分量尺由非口語指標及口語指標所組成,而每項指標皆包含4~5 個觀察細項 以引導計分者計分。原始的計分量尺為0~4 分,然而經過羅序分析發現原始計分 量尺之第2 及第 3 階難度具有順序錯置的問題,顯示原始計分量尺過多,中間量 尺可能無法有效地區辨患者的能力。因此研究者將計分量尺縮減為0~2 分(非口 語指標及口語指標各為0~1 分),此計分量尺之階難度符合預期之排序,代表 0~2 分之計分量尺適合。此外,實務應用上,將量尺縮減為0~2 分可能較便於計分,
計分者僅須判斷患者在各觀察細項表現是否適切,即可計算「非口語表達指 標」、「口語表達指標」及各題得分,無需花較多時間斟酌不適切的嚴重程度。故 COMTESS 之最終版計分量尺即為 0~2 分之 3 點量尺。
題庫之建構效度驗證
COMTESS 題庫之題目合適度與殘差檢驗結果發現,所有題目之 infit MNSQ 或outfit MNSQ 皆落在 0.60~1.40 範圍內,顯示患者在題庫中所有題目之得分皆符
合羅序模型之預期。各個向度所包含的題目間,其殘差之第一個主成份之特徵值 皆小於3.0,顯示「個人社交技巧」向度與「職務相關社交技巧」向度內的題目 皆為單向度,即各個向度內的題目皆只評量同一個概念。各向度內題目殘差間之 相關係數皆小於0.50,表示各向度內之題目符合局部獨立性假設。即給定患者能 力時,患者在某一題的答題表現或得分,不受其它題目之答題表現或得分影響。
上述三項檢驗結果支持題庫中各個向度的題目皆為單向度且符合局部獨立性假 設,代表題庫具備建構效度。雖然研究者並未再次檢驗COMTESS 之題目與羅序 模型之適配度,然而由於其題庫已具備建構效度,故COMTESS 亦具備建構效 度。
由COMTESS 題庫之「題目難度與患者能力之對應圖」可發現:無論「個人 社交技巧」向度或「職務相關社交技巧」向度中,題目難度範圍大致涵蓋患者的 工作社交技巧程度範圍,然而多數題目對於患者而言較容易。較困難的題目數量 太少,可能造成COMTESS 在評估高能力患者的工作社交技巧程度時,缺乏難度 與患者能力相符合的題目,以致無法提供太多有用的資訊以估計患者的能力,進 而降低COMTESS 對於高能力患者能力估計的信度。因此,後續研究修改
COMTESS 時,可優先考量在題庫中增加較困難的題目。
COMTESS 分派題之效能
COMTESS 之第一階段測驗共有 2 題分派題,二個向度各有 1 題。2 題分派 題之分派正確率達74.8%~76.3%,顯示 COMTESS 第一階段分派題之分派效能 高。此結果之主因為分派題是難度最接近患者平均能力值的題目,這些題目能夠 提供最多訊息以精準地估計能力位於平均值附近的患者,因此最能區辨能力位於 平均值附近之患者屬於高/低能力組。然而,研究者僅挑選固定的 2 題題目作為 COMTESS 之分派題,可能產生練習效應而降低分派題的分派正確率。意即當患 者的整體工作社交技巧未有明顯的提升,但在多次施測COMTESS 後,對於這 2
題的社交情境較為熟練而通過率提高,進而在第二階段的測驗中挑選到對於患者 較困難的測驗組。但是練習效應可能對於高能力組的患者影響較小,因為即便患 者熟悉分派題而提高通過率,該群患者在第二階段適用的測驗組仍為高難度測驗 組。未來修改COMTESS 時,須擴充題庫中難度接近患者能力平均值之題目,以 增加分派題之複本,避免同一組分派題因重複施測而降低分派的正確率。
COMTESS 之信度驗證
COMTESS 之「個人社交技巧」向度與「職務相關社交技巧」向度的平均信 度皆為0.80,此結果顯示 COMTESS 具有良好的平均信度。可適用於團體層級之 分數比較,如研究中實驗組及對照組之工作社交技巧的能力比較。個別信度部 份,97.8%的患者在二個向度的能力估計皆具有 ≥ 0.70 的信度,其中超過半數患 者的信度 ≥ 0.80,此結果顯示整題而言 COMTESS 之個別信度可接受。顯示 COMTESS 可用於個別層級之比較,如臨床上不同患者間之能力比較。然而全數 患者之個別信度皆低於0.90,且有 3 位能力值接近 4.0 之患者的信度未達 0.70,
可能原因為COMTESS 題庫中困難的題目較少,且少數較困難題目的難度未及這 些患者的能力範圍,以致於無法提供太多有用的資訊以估計這些患者的能力,使 得這些患者的個別信度不佳。此外,能力區間為1.0~2.5 的患者,其個別信度水 準會因為第一階段分派題之分派正確或錯誤而有所不同,被分派錯誤者的個別信 度較低。然而因這群患者的信度皆已達0.70 以上,故 COMTESS 第一階段分派結 果對於這群患者之能力估計信度的影響可能不大。
COMTESS 之效度驗證
COMTESS 二向度能力值與 PSP 總分之相關係數皆為 0.41,此數值符合過去 文獻所示之社交技巧與整體社會表現的關聯程度 (r ≥ 0.40) (Halford & Hayes, 1995)。本結果初步支持 COMTESS 具有良好的收斂效度,可評量到思覺失調症
患者的工作社交技巧。COMTESS 與 PSP 之相關係數僅 0.41,可能原因有二:(1) 本研究樣本之PSP 總分平均為 67.3 ± 7.0,即患者的整體社會表現中上,且多數 患者的分數範圍落在60~80 分之區間,如此可能低估 COMTESS 與 PSP 之相關性 (Goodwin & Leech, 2006)。(2) PSP 之分數為涵蓋四面向之總分,除患者在工作訓 練機構的人際與社交關係外,尚包含患者之一般角色功能(如出缺勤、工作品 質)、自我照顧、干擾與攻擊行為,故COMTESS 與 PSP 總分之相關較低。
已知族群效度部份,有明顯認知障礙組與無明顯認知障礙組的患者之間,在
「個人社交技巧」向度與「職務相關社交技巧」向度之能力值皆有顯著差異 (p <
0.001) 且具有大的差異量 (Cohen’s d = 0.91~0.92),此結果支持 COMTESS 具有 良好的已知族群效度,可有效區辨不同認知程度患者間的工作社交技巧差異。然 而,由於COMTESS 之多數題目對於患者而言較容易,故 COMTESS 之分數可能 較難呈現中、高能力患者間的能力差距,例如:無明顯認知障礙組內,認知程度 中等與良好者。
COMTESS 之施測效率
COMTESS 之施測時間預估僅需 9.9 分鐘。過去研究顯示,有效率的臨床評 估,每項測驗時間以不超過10 分鐘為佳,以避免受測者疲勞或分散注意
(Gurland & Wilder, 1984)。故本研究所發展的 COMTESSS 之施測效率高,可適用 於國內忙錄的臨床環境中,快速地評量思覺失調症患者的工作社交技巧。相較於 過去文獻常用的工作社交技巧角色扮演測驗,其測驗時間約需30~40 分鐘 (Harvey et al., 2007; Mathews et al., 1980; Tsang & Pearson, 2000)。如此長時間的施 測,恐造成施測者與患者龐大的負擔,亦難以適用於臨床例行評估。故相較於其 它既有工作社交技巧角色扮演測驗,COMTESS 具有高施測效率,推薦用於臨床
(Gurland & Wilder, 1984)。故本研究所發展的 COMTESSS 之施測效率高,可適用 於國內忙錄的臨床環境中,快速地評量思覺失調症患者的工作社交技巧。相較於 過去文獻常用的工作社交技巧角色扮演測驗,其測驗時間約需30~40 分鐘 (Harvey et al., 2007; Mathews et al., 1980; Tsang & Pearson, 2000)。如此長時間的施 測,恐造成施測者與患者龐大的負擔,亦難以適用於臨床例行評估。故相較於其 它既有工作社交技巧角色扮演測驗,COMTESS 具有高施測效率,推薦用於臨床