第四章、 實驗結果
4.5. 基於情緒辨識之音樂選取實驗
4.5.3. 音樂選取實驗結果
此實驗之目的在於驗證本論文設計之人臉情緒辨識與音樂選曲系統之效能,
經由設定不同之音樂轉換目標,驗證情緒轉換過程與選曲之音樂是否合宜,以下 包含兩種實驗之驗證,情緒轉換目標分別設定為高興情緒(A:0.63, V:0.85),以 及中性情緒(A:-0.47, V:0.61)之位置。
a. 情緒轉換目標 (A:0.63, V:0.85)
此實驗中,系統設定之情緒轉換目標為(A:0.63, V:0.85)即高興情緒,使用 者情緒與情緒轉換目標之播放音樂數目設定為 10 首,主要目的在於希望將使用 者情緒由不愉快轉為愉快。系統一開始辨識使用者情緒為(A:-0.07, V:-0.71)即 既生氣又厭惡之情緒,如圖 4-17(a)右上 A-V Plane 藍色軌跡所示,系統藉由計算 使用者目前情緒與情緒轉換目標位置之距離,播放第 1 首音樂位置為(A:0.02, V:
-0.27),並取得預備播放之 9 首音樂位置,分別如圖 4-17(a)右下 A-V Plane 紅點 與綠點所示;透過第 1 首音樂之播放,使用者情緒逐漸往 Valence(愉快程度)為正 向的情緒做轉換,如圖 4-17(b)所示;系統經過一段時間之情緒辨識,使用者 A-V 收斂至(A:-0.54, V:-0.45)即傷心情緒,第 1 首音樂播放結束,系統重新計算使
83
用者情緒與情緒轉換目標之距離,播放第 2 首音樂(A:-0.48, V:-0.40),並取得 其餘預備播放之 8 首音樂位置,如圖 4-17(c)所示;透過第 2 首音樂之播放,使 用者情緒依舊往 Valence 正向轉換,如圖 4-17(d)所示;第 2 首音樂播放結束時,
使用者情緒轉換至(A:-0.35, V:0.17),此時中性情緒占大多數之比例,Valence 已轉為正向,系統計算取得第 3 首音樂播放位置(A:-0.38, V:0.14),以及預備 播放之 7 首音樂位置,如圖 4-17(e)所示;第 4 首音樂透過轉換至(A:-0.46, V:
0.62)之使用者情緒即中性情緒,計算取得其播放位置(A:-0.33, V:0.27)與預備 播放之 6 首音樂,如圖 4-17(f)所示;透過第 4 首音樂之播放,使用者情緒逐漸轉 變收斂至轉換目標之高興情緒,如圖 4-17(g)所示;最終使用者情緒轉換至接近 目標之情緒位置(A:0.57, V:0.82) (使用者情緒與情緒轉換目標之距離dTS 0.2),
計算位於目標情緒附近之音樂(A:0.45, V:0.59)進行最後一首歌曲之播放,如圖 4-17(h)所示。
(a)
84
(b)
(c)
85
(d)
(e)
86
(f)
(g)
87
(h)
圖 4-17、情緒轉換情境設計,由不愉快情緒轉為愉快情緒之實驗,其中右上 A-V Plane 代表使用者情緒 A-V 之軌跡,右下 A-V Plane 紅點代表已播放或正在播放 之音樂,綠點為預備播放之音樂。(a)使用者情緒(A:-0.07, V:-0.71),第 1 首音 樂播放位置(A:0.02, V:-0.27),(b)使用者情緒往 Valence 為正方向做轉換,(c) 第 1 首音樂播放結束,使用者情緒(A:-0.54, V:-0.45),播放第 2 首音樂(A:-0.48, V:-0.40),(d)使用者情緒持續往 Valence 為正方向做轉換,(e)使用者情緒(A:-0.35, V:0.17),播放第 3 首音樂(A:-0.38, V:0.14),(f)使用者情緒轉換至(A:-0.46, V:0.62) ,播放第 4 首音樂(A:-0.33, V:0.27),(g)使用者情緒逐漸轉變收斂至 轉換目標之高興情緒,(h)最終使用者情緒轉換至(A:0.57, V:0.82),播放最後 一首音樂(A:0.45, V:0.59)。
88
b. 情緒轉換目標 (A:-0.47, V:0.61)
此實驗中,系統設定之情緒轉換目標為(A:-0.47, V:0.61)即中性情緒,使 用者情緒與情緒轉換目標之播放音樂數目設定為 10 首,主要目的在於希望將使 用者情緒由興奮轉為平靜。系統一開始辨識到使用者情緒為(A:0.57, V:-0.71) 即驚訝情緒,如圖 4-18(a)右上 A-V Plane 藍色軌跡所示,以此計算與情緒轉換目 標之距離,播放第 1 首音樂(A:0.45, V:-0.49),並取得預備播放之 9 首音樂位 置,分別如圖 4-18(a)右下 A-V Plane 紅點與綠點所示;第 1 首音樂播放結束時,
使用者情緒轉換至(A:0.45, V:0.63)高興情緒占大多數之比例,計算取得第 2 首音樂播放之位置為(A:0.45, V:0.59) 與其餘 8 首音樂之位置,如圖 4-18(b) 所示;經由 2 首不同音樂之播放,使用者情緒轉換至(A:-0.30, V:0.14),已逐 漸改變為中性情緒,系統計算取得播放之第 3 首音樂位置(A:-0.38, V:0.25),
以及預備播放 7 首音樂之位置,由圖 4-18(c)可看出由於音樂資料庫在中性情緒 附近的音樂較為稀疏,如圖 4-13 所示,故在選擇音樂時會有集中於某一區域跳 動的情況產生;最終使用者情緒逐漸轉換至目標情緒,使用者之 Arousal(興奮程 度)在轉換過程中逐漸下降,回復至平靜之情緒(A:-0.44, V:0.56) (使用者情緒 與情緒轉換目標之距離dTS 0.2),計算取得最後一首音樂播放之位置,為情緒 轉換目標附近之音樂(A:-0.33, V:0.27) ,如圖 4-18(d)所示。
89
(a)
(b)
90
(c)
(d)
91
圖 4-18、情緒轉換情境設計,由興奮情緒轉為平靜情緒之實驗,其中右上 A-V Plane 代表使用者情緒 A-V 之軌跡,右下 A-V Plane 紅點代表已播放或正在播放 之音樂,綠點為預備播放之音樂。(a)使用者情緒(A:0.57, V:-0.71),第 1 首音 樂播放位置(A:0.45, V:-0.49),(b)第 1 首音樂播放結束,使用者情緒(A:0.45, V:0.63),播放第 2 首音樂(A:0.45, V:0.59),(c)使用者情緒(A:-0.30, V:0.14),
播放第 3 首音樂(A:-0.38, V:0.25),(e)最終使用者情緒轉換至接近目標情緒之 位置(A:-0.44, V:0.56),播放最後一首音樂(A:-0.33, V:0.27)。
92