抽樣分配分類器之信心水準分類效果差異檢定

(2). 信心水準為 95%時，即 0.05 時：

以 95%信心水準設定抽樣分配分類器時，其分類準確率平均值為 69.9%，值域 分佈在 67%到 72%之間，標準差為 0.011，極大值為 71.3%。召回率的部分平均值 為 69%，值域分佈在 66%到 71%之間，標準差為 0.016，極大值為 70.9%。F 值平 均數為 69.4%，標準差 0.011，極大值為 71%。

圖 22 抽樣分配分類器於信心水準為 95%之分類效果

資料來源：本研究繪製

表 15 抽樣分配分類器於信心水準為 95%之分類統計值

準確率 召回率 F 值

平均數 0.699 0.69 0.694

標準差 0.011 0.016 0.011

極大值 0.713 0.709 0.710

資料來源：本研究整理

(3). 信心水準為 99%時，即 0.01 時：

以 99%信心水準設定抽樣分配分類器時，其分類準確率平均值為 68.6%，值域 分佈在 67%到 72%之間，標準差為 0.011，極大值為 71.3%。召回率的部分平均值 為 68.2%，值域分佈在 66%到 71%之間，標準差為 0.011，極大值為 70.1%。F 值 平均數為 68.4%，標準差 0.008，極大值為 69.8%。

圖 23 抽樣分配分類器於信心水準為 99%之分類效果 資料來源：本研究繪製

表 16 抽樣分配分類器於信心水準為 99%之分類統計值

準確率 召回率 F 值

平均數 0.686 0.682 0.684

標準差 0.011 0.011 0.008

極大值 0.713 0.701 0.698

資料來源：本研究整理

實驗分析

抽樣分配分類器藉由設定各特徵維度之信心水準求得其信賴區間，並依此建構 限制式求距離極大值以供分類計算。因此本實驗檢驗在信心水準不同的情況下，

分類器之分類效果是否有顯著差異。

表 17 不同信心水準下，抽樣分配分類器效果比較

90% 95% 99%

準確率平均 0.7 0.699 0.686 召回率平均 0.698 0.690 0.682

F 值平均 0.699 0.694 0.684

資料來源：本研究整理

(1). 信心水準為 90%、95% 與 99% 之準確率

圖 24 不同信心水準下抽樣分配分類準確率比較 資料來源：本研究繪製

令信心水準 90%之分類準確率為 ，信心水準 95%之分類準確率為 ，信心 水準 99%之分類準確率為 。假設檢定如下：

檢定一：90%信心

： 90%信心水準分類準確率與 95%信心水準分類準確率無差異 水準與 95%信心水準

0

： 0 90%信心水準分類準確率較 95%信心水準分類準確率高

經 t 檢定計算得 t 值為 0.202 小於臨界值 1.761，因此不拒絕虛無假設，即當信 心水準為 90%與 95%時之分類準確率無顯著差異。

檢定二：95%信心

： 95%信心水準分類準確率與 99%信心水準分類準確率無差異 水準與 99%信心水準

0

： 0 95%信心水準分類準確率較 99%信心水準分類準確率高

經 t 檢定計算得 t 值為 2.624 大於臨界值 1.734，故拒絕虛無假設，即當信心水 準為 95%時之分類準確率高於 99%信心水準分類準確率。

檢定三：90%信心

： 90%信心水準分類準確率與 99%信心水準分類準確率無差異 水準與 99%信心水準

0

： 0 90%信心水準分類準確率較 99%信心水準分類準確率高

經 t 檢定計算得 t 值為 1.946 大於臨界值 1.761，故拒絕虛無假設，即當信心水 準為 90%時，分類準確率高於 99%信心水準。

(2). 信心水準為 90%、95% 與 99% 之召回率

圖 25 不同信心水準下抽樣分配分類召回率比較 資料來源：本研究繪製

令信心水準 90%之分類召回率為 ，信心水準 95%之分類召回率為 ，信心 水準 99%之分類召回率為 。假設檢定如下：

檢定一：90%信心

： 90%信心水準分類召回率與 95%信心水準分類召回率無差異 水準與 95%信心水準

0

： 0 90%信心水準分類召回率較 95%信心水準分類召回率高

經 t 檢定計算得 t 值為 1.267 小於臨界值 1.74，因此不拒絕虛無假設，即當信 心水準為 90%時之分類召回率與 95%時之分類召回率無顯著差異。

檢定二：95%信心

： 95%信心水準分類召回率與 99%信心水準分類召回率無差異 水準與 99%信心水準

0

： 0 95%信心水準分類召回率較 99%信心水準分類召回率高

經 t 檢定計算得 t 值為 1.242 小於臨界值 1.746，因此不拒絕虛無假設，即當信 心水準為 95%時之分類召回率與 99%信心水準分類召回率無顯著差異。

檢定三：90%信心

： 90%信心水準分類召回率與 99%信心水準分類召回率無差異 水準與 99%信心水準

0

： 0 90%信心水準分類召回率較 99%信心水準分類召回率高

經 t 檢定計算得 t 值為 2.9 大於臨界值 1.74，故拒絕虛無假設，即當信心水準 為 90%時，分類召回率高於 99%信心水準。

(3). 信心水準為 90%、95% 與 99% 之 F 值

圖 26 不同信心水準下分類 F 值 資料來源：本研究繪製

令信心水準 90%之分類 F 值為 ，信心水準 95%之分類 F 值為 ，信心水準 99%之分類 F 值為 。假設檢定如下：

檢定一：90%信心

： 90%信心水準分類 F 值與 95%信心水準分類 F 值無差異 水準與 95%信心水準

0

： 0 90%信心水準分類 F 值較 95%信心水準分類 F 值高

經 t 檢定計算得 t 值為 0.801 小於臨界值 1.746，因此不拒絕虛無假設，即當信 心水準為 90%時之分類 F 值與 95%時之分類 F 值無顯著差異。

檢定二：95%信心

： 95%信心水準分類 F 值與 99%信心水準分類 F 值無差異 水準與 99%信心水準

0

： 0 95%信心水準分類 F 值較 99%信心水準分類 F 值高

經 t 檢定計算得 t 值為 2.32 大於臨界值 1.74，故拒絕虛無假設，即當信心水準 為 95%時之分類 F 值較 99%信心水準分類 F 值高。

檢定三：90%信心

： 90%信心水準分類 F 值與 99%信心水準分類 F 值無差異 水準與 99%信心水準

0

： 0 90%信心水準分類 F 值較 99%信心水準分類 F 值高

經 t 檢定計算得 t 值為 2.62 大於臨界值 1.77，故拒絕虛無假設，即當信心水準 為 90%時，分類 F 值高於 99%信心水準。

小結與討論

(1). 小結

抽樣分配分類器在信心水準為 90%與 95%時，準確率並無顯著差異，但兩者 皆比 99%較佳。召回率的部分，當信心水準為 90%與 95%時並無顯著差異，當 95%

與 99%之間也沒有顯著差異，但當信心水準為 90%與 99%比較時則以 90%較佳。

在 F 值則與準確率相同。

(2). 討論

本研究設計之抽樣分配分類器其分類效果不如決策樹、貝式機率分類器與支 持向量機。根據期刊文集資料特性顯示，以特徵比例作為文件向量權重方式，其 值域分佈情形相當廣泛，致使信賴區間範圍過大，信賴區間作為限制式之效用降 低，導致分類效果不理想。但此分類器分類效果接近 70%，若能針對特徵分佈情