第三章 《掘》多媒體原創作品之架構設計
第七節 Max/MSP/Jitter 即時影音互動程式架構設計
筆者以 Max/MSP/Jitter 32,作為《掘》整合不同領域的中樞。
此平台不僅是整體演出時間與各項效果開關的總控制台,也是預置電音、
預置影像的撥放器;同時也負責溝通現場器樂與音響設備,對其演奏施以即時 互動的參數調整;與舞者互動方面,則溝通舞者與錄影、投影設備,達成現場 肢體動作與影像的互動。筆者更透過此平台,將聲音與影像參數交叉影響呈現 器樂演奏、肢體舞導以及即時影音的三維互動。
下圖為〈掘〉之 Max/MSP/Jitter patch 的設計架構:
圖 3-30 《掘》之 Max/MSP/Jitter patch 的設計架構
上圖中,綠色為《掘》控制介面,紅色代表該段落主 Patch;藍色則為不同 特效的子 Patch。以下依樂段順序區分,介紹 Max/MSP/Jitter Patch 的架構設計。
32 Max/MSP/Jitter 為一物件導向(Object-Oriented)程式,包含 Max、MSP、Jitter 三部分是,Max 處理邏輯與數值。MSP 處理音訊。Jitter 負責影像部分。由 Cycling ’74 公司出版。詳情請參閱 Cycling ’74 公司網站: http://cycling74.com/whatismax/
第一樂段〈始〉與第二樂段〈印〉
Opening Patch 為〈始〉與〈印〉之主 Patch。
〈始〉與〈印〉皆以預置電音及預置影像呈現,故 Opening Patch 的主要功 能是樂曲計時器整合同時撥放,並且包含隨機與可調整的環場 Panning 效果的設 置。
Panning 的效果包含方位與遠近,以其在方位與距離快速改變的特性加強
〈始〉撲朔迷離的神祕空間特性,及〈印〉忽快忽慢的時間節奏、印表機聲的 急促慌亂感。下圖為 Opening Patch:
圖 3-31 工作於〈始〉與〈印〉的 Opening Patch
第三樂段〈我〉
Id-Ego-Superego 為本段主 Patch 名稱,集合數個即時互動聲音效果的子 Patch,如 Reverb、Echo 、Panning 、RM 等
本樂段以器樂和舞者肢體呈現精神世界中三個人格的生態,其中器樂演奏 Id-Ego-Superego Patch:
圖 3-32 工作於〈我〉的 Id-Ego-Superego Patch
第四樂段〈構〉
Unconscious mind 為本段主 Patch。此 Patch 以電腦分析所接收的影像數值並 以其數值,接入 cycle~物件,驅動低頻的正弦波。
〈構〉樂段描述潛意識之中,「本我」與「超我」挑選被塵封在潛意識的回 憶,東拼西湊創造夢境,並將所欲傳達的訊息包含於其中。在佛洛伊德所提出 的理論中,潛意識是無法察覺的,當潛意識被察覺當時,即轉變為意識;故筆 者以器樂演奏者與道具之間的靜默互動所呈現之即時影像的數值,驅動在
《掘》中,象徵筆者精神本體的正弦波。透過乘法處理影像參數,使每個無聲 肢體動作皆有其對應的低頻聲響。而隨著肢體動作而觸發的低頻正弦波,則象 徵是「本我」與「超我」在潛意識中的對話。以下為 Unconscious mind Patch
圖 3-33 為〈構〉樂念而設計的 Unconscious mind Patch
第五樂段〈闖〉
Dream 為本段主 Patch。使用 jit.qt grab 物件為核心,將舞者肢體投影作緊密 結合。內含另一個影像處理的子 Patch:GrabPlayer 處理更為複雜之影像效果。
〈闖〉分為疑惑、恐懼、憤怒、悲傷四段。疑惑樂段舞者肢體重點在於與 燈光及聲音效果互動,此段只投影閃爍不定的光球影像作為背景與輔助效果。
並利用電腦分析現場影像得出的數值,改變預置電音的 Reverb 和 RM 效果。
恐懼樂段的影像互動效果則是以黑霧(電腦所投出之黑色光影)不斷覆蓋舞 者。舞者的移動可暫時將黑霧撥離,並產生白色的殘影,但黑霧很快又會聚 集,故筆者以舞者的肢體動作搭配節奏對比極大且不諧和的音樂,再結合此黑 霧影像效果,意圖呈現黑影的壓迫與恐懼感。並利用電腦分析現場影像得出的 數值,改變預置電音的 Reverb 和 Panning 效果。
憤怒樂段以重音節奏的強調和樂句力度的增疊表現。本段影像效果奠基於 恐懼樂段的效果,並且加入現場真實的影像當背景,最後以器樂演奏的力度參 數控制影像的 RGB 顏色改變,現場真實影像隨著音樂力度的起伏摻雜閃爍的紅 色全域投影,呈現怒火中燒的意象。
悲傷樂段則黑霧改為灰色,並且以一黑白的殘破廢墟影像為基底,舞者的 肢體,即使不斷的掙扎,撥開灰霧,也只能呈現面對廢墟的絕望。樂段結尾,
舞者走近攝影機,並呈現手指擦拭的動作,此時調整殘影停留時間為極長,以 此將灰霧驅散,並改變背景的影像由廢墟轉為美麗風景。並利用電腦分析現場 影像得出的數值,改變預置電音的 Filter、Echo、Reverb、Panning 的效果,下圖 為 Dream Patch。
圖 3-34 為〈闖〉樂念而設計的 Dream Patch
下列為本〈闖〉所應用之部分子 Patch:
圖 3-35 GRABPLAYER Patch
圖 3-36 RM Patch
圖 3-37 Har Patch
圖 3-38 Filter Patch
第六樂段〈悟〉
Ending 為本段主 Patch。與 Opening Patch 一樣都為 sfplay~物件組成的撥放 器,由於〈悟〉需要安穩平和的意象,取消了 Panning 效果,故其被設計為一只 預置電音與雙立體聲撥放器。
圖 3-39 為〈悟〉編寫的雙立體聲撥放器-Ending Patch
以下為控制《掘》所有 Patch 的控制介面
圖 3-40《掘》 控制介面 Excavating Patch