4 研究結果
4.3 研究結果比較
4.3.3 Accuracy 和 precision 比較
在本小節中我們將以統計上的量，來驗證改良策略與基準策略(此為定期定值策略) 之優劣，在此基準策略為定期定值策略，透過 accuracy 和 precision 分析改良策略是否 有足夠的有效性。
4.3.3.1 各年期 accuracy 和 precision 比較
在實驗中改良策略每一個 CV 所產生 100 個回合之最佳內部報酬率，將與基準策略 在同一時間之內部報酬率相比較，若改良策略優於基準策略在此回合的註記為 true，若 基準策略優於改良策略，則在此回合的時期註記為 false，依照上述方式計算，得出各年 期 TP 、TN、FP 和 FN 個別次數，如表 10 所示。
表 10. 各年期 TP 、TN、FP 和 FN 個別次數的比較
CV 3 年期 4 年期 5 年期 6 年期 7 年期 8 年期 9 年期 10 年期
TP 1384 1320 1297 1124 782 760 832 651
TN 40 102 19 192 314 210 2 17
FP 1175 945 748 495 590 526 524 449
FN 1 33 136 189 114 104 42 83
從表 10 中可以看出，對於大部分的年份，TP 的次數都比 FP 來的高，TP 為訓練期 與測試期改良策略都優於基準策略，FP 為訓練期改良策略優於基準策略但測試期改良 策略比基準策略來的差，由此可發現，改良策略在訓練期所選出最佳的投資系統，代到 測試期大部分都也能有不錯的投資績效。由上述表 10 各參數的次數，可計算出 accuracy 和 precision，各年期 accuracy 和 precision 的變化圖如圖 7 與圖 8 所示。
32
圖 7. 各年期 accuracy 統計圖
圖 8. 各年期 precision 統計圖
33
由這些圖各年期的 accuracy 和 precision 的數據看出，各年期的數值都超過 0.53 以 上。由此發現改良的定期定值投資策略，整體而言經過訓練後的投資系統，在其他不同 股市價格波動的情況，也能有不錯的投資績效，重要的是在各年期的實驗也都有較高的 勝率能夠打敗基準定期定值投資策略。
4.3.3.2 各年期 z-test value accuracy 和 precision 比較
研究將每一個 CV 執行 100 個回合所得到的最佳內部報酬率，與基準策略在同一時 間之內部報酬率，透過 z-test 檢定方法，實驗假設改良策略有足夠信心能勝過基準策略，
並設定信心基準設為 0.05 (95%信心程度)，各別算得訓練期與測試期的 p-value 值，若 p-value 值小於 0.05，則表示接受實驗假設，且改良策略與基準策略有顯著的差異，並在 此 CV 的時期註記為 true；但 p-value 值大於 0.05，則表示拒絕實驗假設，並在此 CV 的 時期註記為 false，依照上述方式計算，得出各年期 TP 、TN、FP 和 FN 個別次數，如 表 11 所示。
表 11. 各年期 z-test value 換算後 TP 、TN、FP 和 FN 個別次數的比較
CV 3 年期 4 年期 5 年期 6 年期 7 年期 8 年期 9 年期 10 年期
TP 12 14 13 10 9 7 9 7
TN 2 1 0 2 3 2 0 0
FP 12 9 8 6 5 6 5 4
FN 0 0 1 2 1 1 0 1
從表 11 中可以看出，對於大部分的年份，TP 的次數都比 FP 來的高，TP 為訓練期 與測試期改良策略都優於基準策略，FP 為訓練期改良策略優於基準策略但測試期改良 策略比基準策略來的差，由此可發現，改良策略在訓練期所選出最佳的投資系統，帶到
34
測試期大部分都也能有不錯的投資績效。由上述表 10 各參數的次數，可計算出 accuracy 和 precision，各年期 accuracy 和 precision 的變化圖如圖 9 與圖 10 所示。
研究利用 accuracy 和 precision 主要是提供我們分析改良策略是否具有有效性，由 這些圖各年期的 z-test value 所得到的結果計算 accuracy 和 precision 的數據看出，透過 z 值檢定判斷改良策略是否具有高度信心程度，能夠優於基準策略，由於 z 值檢定是以 嚴謹的檢驗方式，判斷假設是否成立，再將比較結果代入算出的 accuracy 和 precision。
因此，雖然 accuracy 和 precision 的數值相對較低，但各年期數值都超過 0.5，證明改良 策略在 95%的信心程度下，績效能優於基準策略。
圖 9. 各年期 z-test value accuracy 統計圖
35
圖 10. 各年期 z-test value precision 統計圖