夏雨 - 2D視覺音樂動畫之創作研究
108
0
0
全文
(2)
(3)
(4) . 目錄 目錄 ........................................................................................................................................ I . 圖目錄 ....................................................................................................................................III . 表目錄 ................................................................................................................................... VI . 摘要 ........................................................................................................................................ 1 . ABSTRACT ............................................................................................................................ 2 . 誌謝 ........................................................................................................................................ 3 . 第 1 章 . 緒論 ..................................................................................................................... 4 . 1.1 . 研究動機 .......................................................................................................................... 4 . 1.2 . 目的 .................................................................................................................................. 6 . 1.3 . 研究方法 .......................................................................................................................... 7 . 1.4 . 研究架構圖 ...................................................................................................................... 8 . 1.5 . 創作範圍與限制 .............................................................................................................. 9 . I .
(5) . 第 2 章 . 文獻探討 ............................................................................................................ 11 . 2.1 . 名詞釋義 ........................................................................................................................ 11 . 2.2 . 從聽覺到視覺的學理 .................................................................................................... 16 . 2.3 . 音樂、造形與色彩關係 ................................................................................................ 26 . 2.4 . 音樂的視覺描述 ............................................................................................................ 41 . 2.5 . 音樂與動畫的形式結構 ................................................................................................ 55 . 2.6 . 相關音樂動畫的分類 .................................................................................................... 63 . 第 3 章 . 創作論述 ............................................................................................................ 74 . 3.1 . 音樂發展動畫腳本之設計過程 .................................................................................... 74 . 3.2 . 動畫故事大綱 ................................................................................................................ 80 . 3.3 . 故事分鏡 ........................................................................................................................ 81 . 第 4 章 . 結論 ................................................................................................................... 93 . 參考文獻 ............................................................................................................................... 94 . II .
(6) . 圖目錄 圖 1，接收聲音或音樂訊息的基本過程 (本研究整理) ......................... 21 圖 2，Contrasting Sounds ,1923, Kandinsky. ............................................ 32 圖 3，Colour Study- Squares with Concentric Circles，1913，Kandinsky. .............................................................................................................. 32 圖 4，Flora On The Sand，1927，Paul Klee. .......................................... 33 圖 5，Halbkreis zu Winkligem，1932，Paul Klee. .................................. 33 圖 6，Color Music Code ............................................................................ 35 圖 7，線條的音樂性 (本研究整理) ......................................................... 37 圖 8，線條結合之對照 (本研究整理) ..................................................... 37 圖 9，音樂類型之旋律線條概念圖 (本研究整理) ................................. 38 圖 10，Beethoven第五號交響曲圖像式對照，Kandinsky ..................... 40 圖 11，“Towards...＂，Carl Bergstrom-Nielson. ...................................... 42 圖 12，“Paprika King ＂，Joe Pignato. ................................................... 42 圖 13，- “PAVILION＂，StevenRoden. ................................................... 43 圖 14，“THE EMOTIONAL ORCHESTRA＂，Marina Rosenfeld. ....... 44 圖 15，John Cage, 《4’33”》 Prose Score，1952. ................................. 45 . III .
(7) . 圖 16，基本五線譜結構............................................................................ 46 圖 17，“Makrokosmos Vol 1 第 8 號” - (Leo) ，George Crumb. ........... 47 圖 18，"第 12 號-Spiral Galaxy-(Aquarius)"，George Crumb. ............... 48 圖 19，Roll Notation. ................................................................................. 49 圖 20，Music & Sounds. ............................................................................ 50 圖 21，Visualization by MAM. ................................................................. 50 圖 22，Music Animation Machine Images. ............................................... 50 圖 23，Hans Christoph Steiner's score for“ Solitude＂ created using Pure data's data structures. ........................................................................... 51 圖 24，visual chord - Paul Friedlander. ..................................................... 52 圖 25，Pink Floyd The Wall，1982. ......................................................... 53 圖 26，Windows Media Player 界面之Visual Effect。 ........................... 54 圖 27，Windows Media Player 界面之Visual Effect。 ........................... 54 圖 28，Windows Media Player 界面之Visual Effect。 ........................... 54 圖 29，旋律線 ........................................................................................... 57 圖 30，故事線 ........................................................................................... 57 圖 31，Fantasia, Disney, 1940. .................................................................. 65 圖 32，Fantasia, Disney,1940. ................................................................... 66 . IV .
(8) . 圖 33，Yellow Submarine, The Beatles. .................................................... 68 圖 34，Feel Good Inc., Gorillaz. ................................................................ 69 圖 35，Innocence, Björk. ........................................................................... 69 圖 36，Swan Meat, Subtle. ........................................................................ 70 圖 37，Visual by VDMX 5. ....................................................................... 71 圖 38，Animusic, Computer Animation Music. ........................................ 72 . V .
(9) . 表目錄 表格 1，各音樂類型及情感感受 (本研究整理) ..................................... 17 表格 2，造型藝術與音樂基本要素對照表.............................................. 27 表格 3，《實驗審美心理學》第 121 頁.................................................... 58 表格 4，動畫與音樂形式結構關係圖 (本研究整理) ............................. 62 表格 5，音樂元素與故事劇情呈現分析 (本研究整理) ......................... 75 表格 6，動畫意念圖與動作路徑之示意表.............................................. 78. VI .
(10) . 摘要 視覺與聽覺是我們人們最重要的兩種感覺，所有生活的感知有一大半都來自 這兩個知覺，尤其是在這個資訊及網路發達的現今，許多的東西事物都已經資訊 化及數位化，人們只要坐在電腦前動動滑鼠按按鍵盤便可瀏覽所有資訊，不論是 學術性、娛樂性、及時訊息等等，一覽無疑。. 而自電影問世以來，音樂影像從一開始的無聲影像與現場演奏的配合發展到 有聲收錄的影音，解決了現場演奏的限制，也經歷歌舞電影極盛時期，音樂與影 像一直密不可分，近代受迪士尼音樂動畫長片《幻想曲》的影響了音樂錄影帶的 發展，至今仍不斷開創出音樂與影像的多元性。. 俄國藝術家康丁斯基深受音樂家華格納與荀柏格的音樂影響，在他的創作 裡利用了音樂的特性，創造了他獨特的抽象繪畫藝術風格，並提出色彩與音樂的 相關理論，影響後期 visual music 實驗影片。. 本研究論文的範圍從聽覺到視覺的學理作為切入，再從音樂相關動畫影片中 探討音樂、音效與動態影像的關係，延伸出自己的動畫創作分析。. 關鍵詞：視覺與聽覺、音樂影像、動畫、Visual Music。. 1 .
(11) . Abstract Sound and vision are the two most important senses for us human beings., with more than half of what we feel everyday coming from it. In the modern age where cable lines and information are everywhere, much of the world is now digitalized, whatever information it is, academic, entertainment, or timely news, are all just a click off the mouse away to your service. And ever since the introduction of the movie, music pictures has developed from a combination of silent images and live orchestra, to pictures recorded along with its sounds; it has dealt with the limitations of live orchestra, and also has went through the best yimes for movies. Music and image were always inseparable, especially with the influence of the late Disney lengthy animated musical “Fantasia＂ on the development music video, who until today are still pioneering the plurality of music videos. Russian artist Kandinsky, deeply influenced by the music of musician Richard Wagner and Arnold Schoenberg, in his compositions facilitated the specialties of music to create his own unique artistic abstract painting style, and also proposed theories discussing color and music, and has affected later experimental video of visual music. This thesis cuts in from the theories of sound and visual senses, and then from music related animation pictures to discuss the relationship between music, sound effects, and animated images to extend our own animation composition analysis.. Keyword：Visual and sound senses, Music Image, Animation, Visual Music.. 2 .
(12) . 誌謝 在這兩年碩士班求學生涯裡，由衷地感謝鄧有立以及蔡志忠等老師對班上的 用心付出，有資深動畫背景的前輩們來承傳業界經驗，並提供許多豐厚的動畫之 相關知識，以及所有大師講座裡的講師們，百忙中仍撥空分享其經驗及人生哲 學，這些難能可貴的學習經驗，著實讓學生非常珍惜與感激至深。. 本論文能順利完成，首要感謝指導教授林達隆老師及戚務蒖老師，林老師豐 碩的學識，在論文討論時給予我許多研究上的方向及建議，適時的點破我的疑 惑，並繁忙之中仍費心地給予指導；戚老師在音樂的領域上也提供了許多的專業 知識，讓我的思惟能獲得相當多的啟發，以及予以班上耐心指導的研究所教授 們，在此表達最深的感謝。. 另外在這兩年的時光裡包括班上同學、朋友們及許許多多給予協助的人等 等，使我的創作過程更順利。最後，感謝家人的體諒及無私付出，是我在求學過 程中背後最大的精神支柱，再此獻上最誠摯的敬意與感激。. 3 .
(13) . 第1章. 緒論. 1.1 研究動機 音樂本質屬於時間的藝術，是肉眼所不得見的，但人類對音樂的興趣，主要 是來自於音樂與周遭的各種重要情感生活有著密切關係，且音樂的表現形式從大 型公開的活動(如交響樂、室內樂、歌劇或晚會…)發展更多能傳達更遠播的唱片 媒體、網絡傳媒，甚至至今仍不斷研發嶄新的聆聽方式。. 自文藝復興時期(Renaissance 1450-1600)開始，人類的自我意識的提高，畫 作主題不再受限於以神為主宰，創作裡也更注重感官刺激的歡愉表現，經印象主 義 (Impressionism)、表現主義 (Expressionism)、未來主義(Futurism)、達達主義 (Dadaism)、超現實主義(Surrealism)…等等畫派，出現許多音樂與繪畫結合的作 品。. 能證明音樂與視覺藝術兩者之間的發展息息相關，還有浪漫時期 (Romanticism) 的藝術家、文學家、音樂家，他們的相關作品中也都涉及了有關 視覺、聽覺、思維及文字範圍，可以從主題上、題材上或理論上的特性裡來看， 都不難找出彼此地跨涉及接觸的共通點：音樂能直接地訴諸人的心靈世界，它的 表現性、滲透力及概括性，能夠在繪畫、文學、雕塑等藝術創作中互相感通。. 藝術的浪漫、幻想的特質，在動畫的世界裡也看得到：迪士尼在 1940 年發 表的音樂動畫長片《幻想曲》(Fantasia)，可謂是經典的藝術作品，它將古典樂與 動畫巧妙結合，聲音與圖像和諧地表現在屏幕上也帶來了一系列新的視聽體驗， 4 .
(14) . 使動畫片的走向更加多元。而這部音樂電影並非劇情片，是古典日樂與動畫所搭 配而成的作品，本片也是第一部以立體音響拍攝的電影，音樂則由史托科夫斯基 的費城管弦樂團來演奏。在 120 分鐘的影片裡可分成「故事音樂」 、 「無特定主題 音樂」以及「交響樂」等三大類篇章，劇情的部分大多放在米奇所扮演的「魔法 師的學徒」角色上，其餘的段落皆無太多的劇情，純粹表現影像與音樂的巧妙配 合，利用色彩或線條帶出隱喻的概念，因此迪士尼公司在宣傳時指出： 《幻想曲》 是一部可以“聽＂的動畫也能“看＂古典音樂的作品。但這部作品在當時在美國上 映反應並不熱烈，但獲得奧斯卡最佳音樂表現及最佳傑出貢獻特別獎的獎項，證 明了本片在動畫史上的藝術之作確是無庸至疑地。近年重映的《幻想曲 2000》 依然保持著 1940 年版本一貫的特點，這種跨越家庭娛樂電影、古典音樂配樂、 光刻電影等藝術領域，形成音樂與動畫之間緊密結合的風格，亦奠定了音樂錄影 帶的發展開端。. 而當科技進步及社會不斷地發展著，我們看到許多音樂的傳達方式也變得多 元化，有了媒體的普及與音樂產業化的驅使，讓利用畫面解釋音樂形象、以音畫 結合的 MTV 形式就此誕生，同時帶來一種全新的審美體驗。在音樂錄影帶的表 現裡，動畫的呈現比起單單只是以拍攝歌手歌唱樣貌作為音樂宣傳，更能碰撞出 更多想像空間與表現手法，如同一個藝術家一樣，無論是抽象或具象的方式，動 畫藝術的特質能在受眾者腦海中留住更多印象。. 5 .
(15) . 1.2 目的 人文心理學家馬斯洛(Abraham Maslow)認為人類創作的動機是來自於自我 實現的需要(self-actualization)。作者受到音樂藝術與視覺藝術相互作用的刺激 下，認為在媒體影像、實驗動畫、音樂性到一般故事性的動畫短片中，針對有關 於聲音、音樂與動畫之間的探討，都有其存在的必要性。. 因此作者欲藉由透過對樂音的感知來創作動畫影片，如同法國畫家保羅．高 更(Paul Gauguin)所說： 「在畫作中必須有一個線索是給予暗示甚至描述，像是畫. 中有音樂一樣。」就像人類在聆聽音樂的時候，隨著旋律或節奏引發許多的情緒 和舞動，作者認為這些音樂就像注入了每個人不同的生活經驗感受，這些感受像 啟動了大腦的記憶裝置，因此和樂曲產生了互動及共鳴。利用音樂轉換成為視覺 化的做法如同藝術的創造(Creation)一樣，是「翻譯」也是「模仿」，因為藝術創. 造無非是將內在美感 – 意象，給以具體可觀的形式。 1. 因此盼在研究過程與作品製作中，一方面提升自我的創造力及潛能，另一方 面探討音樂對於視覺創意的思考、可以的體驗及技術的克服，資料將經由收集、 歸納、整理分析與實踐創作，盼尋出聲音與動態影像的定位，給予欲相關研究背 景之學者作為參考之用。. . 1. 孫旗， 《藝術概論》 ，黎明文化事業公司，頁 155。. 6 .
(16) . 1.3 研究方法 本論文在文獻探討中由音樂出發，藉由學者與藝術家對音樂產生的感知及引 發的概念，去歸納了解音樂視覺化作品的屬性，由於音樂範圍甚大，故本論文僅 就音樂帶給人們聽覺上的情感轉化為視覺之過程，及音樂元素與動畫之間做形 態、屬性之分析。. 文獻與相關創作探討：. 著重在音樂所帶給人的情感及形式來探討，並了解學理上音樂的一些基本感 官知覺，以及音樂帶給人們聽覺上的聯想所產生的意象來討論， 如「聽覺所對 應的色彩及形狀的關係」，以及「聽覺視覺化的平面作品」。. 有了這些學理及作品的基礎探究後，再進一步比對音樂的結構元素轉化為動 態視覺的關係，並於相關音樂動畫作品中做歸類與賞析。. 動畫創作分析：. 將聆聽音樂時產生的意像記錄下來，經思考、整理、歸納、設計後，以線性敘 事故事的方式及 2D 動畫的方式呈現《Hiszékeny》這首曲子，讓畫面配合音樂，也讓 音樂帶動劇情，達到聽覺視覺化的動畫設計。. 7 .
(17) . 1.4 研究架構圖. 8 .
(18) . 1.5 創作範圍與限制 z. 創作題材部分：. 以音樂意象延伸出動畫創作，固然是有一定的困難度，這是因聲音的抽象性 特質，讓人捉摸不清的原故。並且作者僅有聆聽音樂的喜好，本身並無接觸有關 樂理的經驗，僅曾參與色彩學課程裡「音樂共感覺」的實驗製作，以及於 2008 年嘗試以古典樂製作關於夢境的音樂實驗動畫，和《夏雨》動畫裡如夢似境之風 格的想法相仿，然而此部動畫經意見調查後發現大家對作品的看法認為太抽象， 也不符合當初自己的要求。也鑒於此經驗，《夏雨》音樂動畫故事發想，選擇了 線性敘事的方式來呈現。. z. 音樂選擇：. 音樂作品的類型繁多，在選擇上由於流行音樂普遍聽起來都大同小異較無特 色，因此選擇小品的實驗音樂，本音樂除了作者本身的喜好外，其旋律簡單清楚， 有利於動畫上的製作，故選此音樂。. z. 動畫製作的選擇、限制與改善：. 當初在選擇製作方式時，由於整首音樂帶給自己的感覺比較偏向一種手繪的 風格，再者手繪方式的質感有著無可取代的特色也較有個人風格，能表現出一種 樸質與特有的幽默感，最後手繪也是自己較擅長的方式，因此決定欲採用較擅長 的手繪工具執行，另外也利用電腦軟體來輔助完成動畫。. 9 .
(19) . 而手繪固然較有風格特色，但耗時較費時費力是它最大的缺點，由於製作時 間有限，因此選擇手繪方式在時間的安排與拿捏上要格外小心謹慎，以免最後製 作超出時間而無法完成，另外本作品所使用的音樂由於屬於非自創的音樂，在音 樂版權的問題上將會面臨無法投稿參加競賽的遺憾。. 在製作上為了減少手繪製作的時間，所以以數位板及 PHOTOSHOP 繪製動 畫，再搭配其他製作軟體來完成。. 10 .
(20) . 第2章. 文獻探討. 2.1 名詞釋義 2.1.1. 音樂動畫 (Music Animation). 指音樂與連續的停格影像相互結合的動態視覺作品，這種視覺與聽覺相結合 的嶄新藝術形式，兩者的關係不管是影像依附在音樂上、或是音樂做為影像的搭 配，都是概括在音樂動畫的領域裡。. 2.1.2. 音樂視覺化 (Music Visualization). 又稱為音樂形象化、音樂可視化或音樂形象，皆是解釋「以視覺來呈現音樂 的意象」之意。一般來說音樂視覺化有兩種可能性，一種是聆聽樂曲的感受，引 發出個人的感覺意象和共鳴，並運用媒材(如畫筆、裝置、文字等)來把所體驗到 的記錄下來，成為一件視覺作品(如畫作、裝置藝術、詩詞等)，這種方式是經過 人體思考和判斷的情感體現，因此是較具有主觀性的特色；而另一種方式則是運 用軟體程式(如模擬示波器)運算出的方式，圖像的變化是隨著音樂播放時同步產 生的，而這些多為迷幻、抽象的視覺圖像皆是代表著音樂響度、音色、頻譜等元 素特性之視覺化表現，如舞廳影像騎師 VJ 操控的影音特效、Music Animation Machine 以 MIDI 音樂產生的序列圖像等。. 11 .
(21) . 2.1.3. 浪漫主義 (Romanticism). 名詞一開始與地域的羅馬(Rome)直接相關，其語源來自古法語 romanz 這個羅馬語族的字根。1650 年英國人貝利(Thomas Baily)首度使用「romantic」 這個形容詞，表示「彷彿小說般」的意思，也就是富於想像、驚險刺激、無 中生有，因此也就貝有「虛構」之意。後來文藝界發展了「浪漫的(Romantisch)」 這個概念，漸漸增添了怪異、離奇、可怕、恐怖、驚懼、多情及感傷的效果， 且意義也更廣泛。. 2.1.4. 意象 (Image). 「意」：抽象的，「象」：具體的。. 將客觀物象 (如畫作、音樂、雕刻…等等) 透過創作者主觀的情感、體 悟創造出來的藝術形象，也就是創作者把心中的「意」轉化為「象」，才能 傳達到觀、聽者。. 或另一種說法是，寓「意」於「象」 ：將外在物象表達內心情意的意思。 例如：詩以意象為主要表達工具，主要是要追求「言不盡意」、「意在言外」 的想像空間，來傳達詩的旨意，並表現詩的境界。因此古人云： 「情景交融」 、 「天人合一」，意象的營造即是要達到這種境界。. 12 .
(22) . 2.1.5. 夏雨. 意指夏天的雨，作家李近珍這麼形容：「夏天，是植物瘋長的季節。夏 天，是激情潑灑的時刻。夏天，有是傾聽蟬鳴的漫漫長夜。夏天，更是個適 合聽雨的季節。」通常發生在夏季午後突然傾盆落下的陣雨，總是讓人挫手 不及，而夏季的雨不像春雨那般纏綿細柔，它是瘋狂又猛烈地如瀉如淹，有 時還會伴隨著雷電的交擊，就像是欲快速地把城市沖刷得乾乾淨淨，如此的 豪爽，就像一篇壯麗的交響樂章一樣，不禁讓人陶醉。. 2.1.6. 視覺音樂 (Visual Music). 一種利用音樂的架構產生在視覺影像作品，例如音樂經過藝術家自己的詮釋 或是由機械運算，然後呈現在電視影片、電影、繪畫上等等的視覺影像。一開始 原來的定義是指包含音樂轉換在繪畫裡的圖形，但這種由音樂或聲音直接轉換成 的視覺形式，因為後來有愈來愈多的數位媒體及科技技術去運用，使得它的定義 更加廣大：. (1)在繪畫藝術領域裡，視覺音樂往往被界定為具有「共感覺」的形態，這 是因聲音或音樂具有抽象性，藝術家是藉由對音樂或聲音產生的情感，再轉換成 影像作品，這些作品以抽象的圖形或意識形態的形式居多，因此視覺音樂也被定 義為一種「中間的形式」。. 13 .
(23) . (2)又稱為「色彩音樂」(Color Music)，早在 18 世紀的就有許多藝術家或發 明家曾利用一種「彩色風琴」(Color Organs)的裝置進行音樂的實驗色彩，並把這 些所顯現的流線色彩和時尚音樂相互媲美。. (3)在影片藝術領域裡，最早是在 1911 到 1912 年之間的電影，由未來主義 藝術家布魯諾．克拉(Bruno Corra)及阿納爾多．吉娜(Arnaldo Ginna)的手繪作品 發展而來，之後陸續出現許多的其他的視覺音樂電影，因此電影也是可視化音樂 的形式之一。. 2.1.7. 共感覺 (Synesthesia). 感覺是一種知覺，能引起另一個的感覺經驗。按韋氏(Webster)大字典 (Third New International Dictory of the English Language Unabridged 1982)將 “synesthesia＂稱之為“a concomitant sensation＂ 2 以視覺及聽覺兩者感官來 說，聲音的感知可以同時有不同感覺來作用，因一種感官的刺激會連帶影響 另一種感官效應，這就是所謂「共感覺」，因此也稱為「副感覺」、「伴生感 覺」、「連帶感覺」、「通感」、「移覺」、「聯覺」。共感覺很難分得清楚是生理 上的或是心理上的，許天治於《藝術感通之研究》一書中，提到他個人的體 認：「生理的元素可以影響心理上的共感覺方向，而心理上的元素也可以影 響生理上的共感覺反應，而投射出來的，是生理與心理相互纏結在一起的一. 2. 許天治 (1987)。《藝術感通之硏究》 。頁 11。. 14 .
(24) . 種共鳴現象。」 3 其認為這種現象是隨著個體之文化背景、生活經驗或審美 認知的不同，及各別的意識層、潛意識、長期累積的潛意意識的催媒和醞釀， 皆影響至各體所投射出的感官現象差異。，透過生理與心理上的共感覺，能 將兩種不相干之個體、事物或理念來串聯在一起，這種聯鎖關係，在詩、繪 畫、文學、音樂等作品及專家研究的實驗報告等等，都顯示出有許多相關值 得去探討的地方，這也代表共感覺是不受時空的限制，在藝術的領域裡，只 要能巧妙運用兩種不同的媒體、傳達主要的內涵，各藝術之間即能自然的契 合。. 3. 許天治 (1987)。 《藝術感通之硏究》 。頁 12。. 15 .
(25) . 2.2. 2.2.1. 從聽覺到視覺的學理. 音樂的情感. 繪畫裡水墨能利用各種皴法及水墨的乾溼濃淡，讓人產生有「山於春如慶， 於夏如競，於秋如病，於冬如定」視覺上的感受，而這些情感來自於藝術家在創 作過程，經過其意象的形成(構思及醞釀)和意象的具體化(製作及執行)的階段 後，作品自然產生隱約如讀詩詞散文一樣，讓人引發共鳴、產生聯想，並不是單 純的技術或材料本身賦予的感覺。. 亦相同的，音樂本身並不帶有感情，它是創作者利用一組織的聲音所構成之 意象或刺激物，以表達感情或激發情緒的藝術。且構成音樂的主要旋律、音高、 力度、節奏等等因素，關係著樂曲風格，可以給人有輕快活潑、遲滯緩慢、緊張 壓迫…這些引發共鳴的情感反應。. 音樂家的藝術不在於直接描繪形象，而在於把心靈置於這些物件能夠在心靈 裡創造的情緒中。 —— 盧梭(Henri Rousseau)，音樂藝術也常以各種樂器的音 質特性表現，去模擬自然環境或生活的聲音，進而讓人聯想到寫實的意象，如鳥 語、花香、湖光景色、降雨、雷電…等；或是利用象徵、比擬的手法表現出種種 的情緒，引發出愉悅、沉悶、煩躁、不安、憤怒、激昂…等感情。. 16 .
(26) . 音樂類型. 音樂情感感受 (形容詞). 古典樂. 氣質、優雅、細緻…. 流行音樂. 潮流、崇拜、精神、活潑…. 重金屬. 不安、激情、雄壯、緊張…. 爵士樂. 輕鬆、慵懶、靈魂的…. 民謠. 天真、質樸、簡單…. 隨機音樂. 即興的、自由、不確定性…. 電腦音樂. 科技、智慧、多元的… 表格 1，各音樂類型及情感感受 (本研究整理). 人對於聲音的直覺反應是非常敏銳，這是因為聲音能刺激聽覺的敏感神經， 直接引發情緒反應，所以音樂是最能表現、傳達和激發感情的藝術。 4. 即便是在讓觀眾欣賞音樂劇、動畫或電影時，背景音樂的應用除了描述動 機、事件外，最主要是使受眾者能更容易融入劇情的情緒，並視劇情的情況，用 以不同的音高或音效來牽動觀眾的情緒的高潮，也同時為影片注入生命力。. 4. 陳朝平 (2000)。《藝術概論》，頁 21。. 17 .
(27) . 2.2.2. 音樂及符碼. 在聲音的領域中，聲音之所以被確認，就是一種被符號化的概念。 5 美國符 號學家郎格(Susanne Langer)將聲音、動作、姿態視為一種符號，並認為把這些內 容傳達給我們知解力的是符號的形式。. 音樂如同語言一樣，是由一長串有特定的結構、規則的符號來構成，且這些 符號是必需是為使用者所知道、所接受的意義，因此人類對於聲音或音樂有所反 應，正是因為聲音與潛在的符號連結著，讓聲音不只是單純的聲音。例如聆聽一 首古典鋼琴音樂，通常一般人會產生優雅、氣質等等的美好感受，這是因為此時 鋼琴的聲音已經與我們內心潛在的圖形或意義(藝術家、美好的記憶…)做了完美 結合，並釋放出情感，若人類再將圖形予以視覺形式化或符號化，即便是達到了 空間表達的概念。. 5. 郭美女 (2000)。《聲音與音樂教育》。. 18 .
(28) . 朗格認為音樂的綿延，是一種被稱為“活的＂、“經驗的＂時間意象，也就 是我們感覺為由期待變為“眼前＂，又從“眼前＂轉變成不可變更的事實的生命 片斷。這個過程只能通過感覺、緊張和情感得以測量、它與實際的、科學的時間 不僅存在著量的不同，而且存在著整體結構的差異。 6. 在音樂的領域中，其類別是相當繁多且性質各異，因此無論聲音或音樂採取 何種形式來表現，其實都是一種「傳遞文化訊息」的一種符號載體，並且人類能 利用符號的形式來轉譯聲音，例如利用繪畫、文字、雕塑等等，就是一種對聲音 作記錄、分析、詮釋或展現。而這種展現的形式則是朗格稱為的「表現符號體系」 ， 也就是把人類情感轉變成可聽或可見形式的一種符號手段。. 因此由符號的觀點來說，傳達的過程也是一種符號的活動，同樣必須藉由各 種符號傳遞訊息去進行溝通的動作。在下圖的模式中，基本上傳送者利用的符碼 來製作或使用符號，稱為編碼，另一接收者，也須利用共通的符碼來對應並進行 解碼，才能得到訊息，完成符碼的傳達。目前現代環境社會的轉變，符號也不再 限定以單一形式去進行，而是朝向多元整合聲音、影像、動作、語言等多種語言 的傳達方式，適時應用才能達到完整及均衡的文化。 傳送者 (編碼) . 訊息 . 6. 蘇珊．朗格著/劉大基譯 (1991)。《情感與形式》。. 19 . 接收者 (解碼) .
(29) . 2.2.3. 從聽覺到視覺的心理傳達過程. 「傳達」意指在不同的個體或元素之間扮演著橋梁的角色，藉由另外也是介 於傳送者及接收者之間的過程，關於聲音傳達的認知及運用，必須藉由符號學相. 關的理論去做探討，幫助針對聲音元素的分析及整體架構上的理解。因此作 者引用語言學家雅克布遜傳達模式： 情境 訊息 傳送者 . 接收者 接觸 符碼 . 從下圖的音樂傳達過程中，我們看到與視覺融合的聽覺感受，會產生個人的 聯覺體驗，這是透過聲音的聆聽，在內心所發生視覺形象，並帶來審美認知。. 20 .
(30) . 圖 1，接收聲音或音樂訊息的基本過程 (本研究整理). 21 .
(31) . 從心理學的角度探討音樂視覺化傳播中的審美因素特點：. (一)直覺性— 視聽直觀與心理直覺： 審美直覺包括感覺與知覺所獲得的形象，也包括表像。 7 音樂視覺化的傳播 是經視聽結合的方式，把音樂的資訊訴諸於大眾的眼睛與耳朵，觀眾需發揮視聽 器官的功能來進行直覺性判斷。. 格式塔心理學認為「直覺」的感受是對情境最直接的把握，這種能力是最能 表現高度發展的人類心理能力。這是由於知識背景、經歷、環境、性格因人而異， 影響到每個人對審美的觀察力、思考性、記憶力，因此每個人的直覺判斷之可靠 性、準確性、領悟能力皆會有所差別。. 所以在視聽審美中，「直覺性」是重要心理特點，聽覺的形象是間接的，而 視覺的形象則是直接的，綜合兩者下，視聽就會產出明顯的直觀性，並且帶來心 理直覺。. (二) 情感性— 情感效應. 人對事物的態度的體驗，且人的需要得到滿足與否的反映，即是情感，音樂 通過聽覺的傳遞， 作用給人的生理和心理機制，並引發受眾情感上的共鳴，在 腦海中將聲音透過聯想轉化為畫面。這種視聽結合的傳播方式把音樂和畫面融合 7. 曹理、何工 (2000)。《音樂學習與教學心理》 。. 22 .
(32) . 為一體，用以加強情感性的表現，使受眾能夠通過畫面的提示，更容易領會音樂 中所呈現的視覺形象。. 因此樂音在轉化為視覺形象，時常可以激發受眾的情感狀態進入一種“此中 有真意，欲辨已妄言”的境界。 8. 8. 申波 (2005)。《審美意識與音樂文化》。. 23 .
(33) . 2.2.4. 共感覺. 林書堯在《色彩學》一書中說明：所謂共感覺，乃任一感覺系統受到刺 激之後，會立即引起該系統的直接反應之外，尚會引起除了直屬系統（第一 次感覺）以外，一連串的其他感覺系統（第二次感覺）的共鳴現象，所以說 共感覺就是在這種狀況下產生的事實 9 。. 從認知的角度來看，共感覺也是一種隱喻，即“運用有關某一感官印象 的詞項描述其它感官的印象＂ 10 。. 美國作曲家約翰．凱吉(John Cage)的音樂作品「4’33”」，在這 4 分 33 秒裡體現了每個聽眾沉默的聲音，且這作品也影響羅伯特．洛斯克柏格 (Robert Rauschenberg1925-2008 ) 的“白色繪畫＂(White Paintings)作品創 作，正如方銘健於《藝術、音樂、情感與意義》一書中提到：“感官的層面 是以一種開放式結尾的連續體出現的，因此與其說以知覺的耳朵來反映一個 結構體，不如說是用感官來體驗 11 ＂。. 9. 林書堯 （1993）。 《色彩學》。. 10. John Simpson, Edmund Weiner (1989)。 《The Oxford English Dictionary (second edition). vol. XVII》p.467。 11. 方銘健 (1997)。《藝術、音樂、情感與意義》 ，頁 84。. 24 .
(34) . 相信看過一部動畫或電影，有時音樂仍繚繞在腦海裡，由聽覺器官接收 訊息後並吸收儲存大腦裡，因此當我們再次聽到一首 Xavier Cugat 的 “Jungle Drums＂就會讓人想起梁朝偉在電影《阿飛正傳》裡，那長達 3 分 鐘的經典畫面；在動畫界裡，日本音樂大師久石讓的作品首當是最有感情的 音樂，當我們聽到其“プロローグ～出会い＂腦海會浮現宮崎駿“天空之城 ＂動畫裡一開始男主角的演奏以小喇叭作為開場,帶出天空之城最初的意 象，又或者，聽見這首耳熟能詳的“となりのトトロ＂，就會想起“龍貓＂ 裡帶來的印象是那麼地歷歷在目。可見聲音的感知及感官的相互作用是非常 微妙且密切的。. 25 .
(35) . 2.3 音樂、造形與色彩關係 音樂與形色分別屬於聽覺及視覺藝術，兩者運用的媒介也大不相同，音樂創 作依賴抽象的聲音，而形色之藝術創作卻能具體地展現其視覺上的形、色、相。 兩者在媒介的憑藉上看似截然不同，但其藝術情感的根基仍是來自於人性的感 情，創作的產生可能是來自於藝術家反映或表現在當下環境心靈的影響，野獸派 巨擘馬蒂斯(Henri Matisse) 曾說： 「畫者所表現於畫面上的在於忠實地描述他自 己，至於畫的什麼那不是重要的。」俄國著名畫家康定斯基 (Wassily Kandinsky,1866~1944)認為“聲音或音樂和繪畫是相通的，只要透過適當的「翻 譯」，可以將音樂形象化且形象音樂化。＂. 而許天治在《音感作畫媒材感通性》提到：繪畫是有韻律的，和音樂的韻律 與節奏完全相同，分別只是一個用音階、旋律來完成，一個用形狀和色彩來表現。 也如同音樂在動畫裡的關係，都是使人能夠得到和諧的滿足。透過下列的音樂元 素與視覺藝術之造型對照表，能較清楚知曉二者間的共同特性：. 26 .
(36) . 音樂元素. 旋律. 視覺造型藝術 級進的旋律線. 溫順的彎曲. 大跳的旋律線. 簡單的線條帶有明顯的角 度對比。. 線條. 旋律中有著裝飾奏. 簡單的線條帶有細節的裝 飾。. 單音音樂：僅由單一聲部的旋 律組成。. 單色調：由單一色調構 成，僅以明暗對比來做色 差。. 和聲( 織 複音音樂：由兩聲部以上或單 色彩 度 ) 一旋律配搭和聲所組成的。. 複色調：由不同的色調構 成，較有對比或協調的運 用空間。. 和聲：調式、調性、無調性或 複調性，均使音樂色彩有截然 不同的感覺 聲樂：獨唱、合唱、重唱、人 聲加伴奏. 媒材. 器樂：獨奏、重奏、合奏、器 樂加伴奏。. 曲式. 音樂所呈現的架構. 媒材. 型式. 建築、雕刻：石頭、木頭、 金屬、玻璃、塑膠等。 繪畫：鉛筆、水彩、油彩 顏料。 藝術品組合成的外觀、架 構，或繪畫中的構圖。. 表格 2，造型藝術與音樂基本要素對照表 12. 從色彩的角度來看，亞里斯多德是最早提出音樂與色彩之間具有類比關係的 學者，他認為各種色彩，就如同音樂之和聲，可以依適合的比例，做出令人愉悅 12. 謝斐紋(2006)。 《現代繪畫與音樂思維的平行性》，頁 21。. 27 .
(37) . 的安排，在近代有關於音樂與其他藝術間的討論中，作者欲藉由牛頓、康丁斯基、 保羅．克利的理論更進一步了解音樂與形狀、色彩三方面關係的探究。. 28 .
(38) . 2.3.1. 音樂與色彩相關研究. 聽覺的視覺化嚴格說起來並沒有一個所謂的標準，每個人聽到音樂後會產生 什麼樣的感覺不盡相同，就像是看畫展同一幅畫不同的人都會有不同的想法一 樣，然而如同色彩學，也有些研究者對於音樂的視覺化做了科學性的研究，不同 的音程也有其對應的顏色。. (A) 情感的音樂色彩：. 音樂與色彩本身並沒有直接的聯繫，二者關係也是透過人的心理感受情感狀 態來決定，所有的感知情感部份還是由人的大腦來作一個判斷，蘇珊．朗格 (Susanne K. Langer)闡述音樂藝術呈現情感中提到音樂能表現一種人類情感的體 現的意味形式。朗格並認為“我們叫音樂的音調結構，與人類的情感形式－增強 與減弱、流動與休止、衝突與解決、以及加速抑制、極度興奮、平緩和微妙的激 發、夢的消失等等形式－在邏輯上有驚人的一致。這種一致恐怕非單純的喜悅與 悲哀，而是與二者或其中一者在深刻程度上，在生命感受到的一切事物的強度、 簡潔和永恆流動中的一致。＂由音樂引起的聯想首先是情感，而色彩正是這個情 感賦予的其中一個形式。同是讓人歡愉的音樂可以產生歡樂的情感，但也可以產 生哀傷的情感。. 29 .
(39) . 在色彩知覺方面，施淑文認為，色彩本身是沒有表情也沒有感情的 13。但是， 人們常把色彩與事物加以聯想，借助色彩感覺經驗、記憶和知識取得，通過色彩 的相貌和表面特徵來賦予人的感情，從而形成了不同的心理效果。因此，從許天 治在繪畫的感通性創作裡得到：色彩在繪畫上能呈現一種韻律感。他認為色彩本 身就是有進退、寒暖、輕重、高低、長短和粗細等不同感受，彼此之間互相關聯， 增減變化，自然會發生一種抑揚頓挫等節奏的效果。例如暖色有高音的感覺，而 寒色則有低音的意味；彩度高的感覺是飛揚的，彩度低則會下降；明度高是爽朗 且歡愉，明度低則有憂鬱沈悶的意味。. 而音樂的色彩感通性早有先例提出，17世紀科學家牛頓(Sir Isaac Newton) 在音樂與色彩的對應上，曾以自己對音樂的主觀感覺將顏色聯想成音階之相對關 係：紅→Do，橙→Re，黃→Mi，黃綠→Fa，青綠→Sol，青紫→La，紅紫→ Si。. 且俄國表現主義大師瓦西里．康丁斯基(Wassily Kandinsky)在其著作《藝術 的精神性 14 》提出色彩與音樂的關係，他認為繪畫和音樂是同構的，如同他的書 中提出色彩與音樂的關係：「色彩是琴鍵，眼睛是錘，心靈是琴弦，藝術家便是. 需要引發心靈變化的這隻手。」. 加上康丁斯基深受音樂家華格納與荀柏格(Arnold Schoenberg,1874-1951)的 音樂影響，他認為黃色像高亢、尖銳的小喇叭聲音；紅色像帶著激情的中調、低. 13. 施淑文（1994） 。《建築環境色彩設計》 。. 14. 康丁斯基/吳瑪俐譯 (1985)。 《藝術的精神性》 。. 30 .
(40) . 調的大提琴聲；橘色則像是提琴拉著慢拍的曲子；深藍色的感覺像大提琴；更深 的藍就像低音提琴，最深的藍像風琴聲，於是將音樂的各種色感覺帶入他的藝術 創作中，創造了他獨特的抽象繪畫藝術風格，如圖 2，色塊和色彩上的變化以及 複雜的律動性筆觸，如同同時期的作曲家荀柏格，在樂曲中刻意處理音樂的變 化，自然吸引、左右著聆賞者。 另一出身音樂家庭的表現主義大師保羅．克利 (Paul Klee,1879-1940) 15 ，曾 說過：「色彩佔據了我的身心…色彩與我融為了一體。我是一個畫家。」在克利 的繪畫中，大膽將理性成份漸漸抽離，加入形而上的元素，以所謂「分光法」 (Divisionism)的技巧，在分割的迷濛色塊上，系統規律地點入色彩，底色和色點 相互滲透，也創造由符號構成的語彙，並超越了抽象與具象的對立，建構出一種 深度的奇幻空間。. 15. 黃淑雅 (2000)。<音樂與形色關係之研究>《2000 色彩應用與色彩科學研討會論文集》 。. 31 .
(41) . 圖 2，Contrasting Sounds ,1923, Kandinsky.. 圖 3，Colour Study- Squares with Concentric Circles，1913，Kandinsky.. 32 .
(42) . 圖 4，Flora On The Sand，1927，Paul Klee.. 圖 5，Halbkreis zu Winkligem，1932，Paul Klee.. 33 .
(43) . (B) 科學的音樂色彩：. 由於音樂本身屬無具體性，因此諸多研究者會以不同的科學方式，客觀嚴僅 地導出音樂與色彩之間的對應關係實驗，作者以音樂的音程為例：根據畢達哥拉 斯（Pythagoras，約-580~約-500）的顏色與音樂理論，其確立七種光譜色與七聲 音階之間存在著可比振動頻率，紅色與中央Do（C）發生共振、橙色與Re（D） 發生共振、黃色與Mi（E）發生共振、綠色與Fa（F 半音階）發生共振、藍色與 Sol（G）發生共振、靛色與La（A）發生共振、紫色與Si（B）發生共振，七種 顏色與鍵盤中的中音八度彼此關聯，低於中八度的音較中八度的顏色深暗，高於 中八度的音較中八度的顏色淺淡而明亮 16 。. 而在這之後陸陸續續還有許多人提出相關的研究，其研究結果如下圖圖 6所 示。. 16. 黃淑雅 (2000)。 <音樂與形色關係之研究>《2000 色彩應用與色彩科學研討會論文集》 。. 34 .
(44) . 圖 6，Color Music Code 來源：http://rhythmiclight.com/archives/ideas/index.html. 從圖 6 中觀察出每個時期的色彩都不盡相同，但在 C 調(中央 Do)的色彩較 多為暖色色調；而愈往高音方向的色相結果就差距愈大，這可能與設備的技術及 功能上的差異有相當大的關係。. 2.3.2. 音樂的形狀意象. 美學泰斗派克(Dewitt. H. Parker)曾說：「我要把繪畫認作以色彩和線條表現. 想像的語言，也就好比詩是以語文來表現想像一樣。」 17 。. 17. 許天治 (1980)。《音感作畫媒材感通性與學生作品評析》，頁 286。. 35 .
(45) . 「形狀的韻：方圓、尖鈍、大小、寬窄及橫直、歪斜等處理得當，不自覺的 就有一種節奏韻律的趣味。」18，並且許天治在書中提到繪畫創作裡形狀、線條 的適當運用，也自然能產生如音樂般的節奏韻律，因為形狀的韻律能藉由其方 圓、寬窄、大小、橫直或歪斜的構成來得到；而線條本身的長短、粗細的變化， 再加上高低、直斜、濃淡、疏密來組合，也能產生音樂性，有升降、緩急及剛柔 等律動感。. (1) 音樂能以相似與對比形狀產生韻律. 進一步來說，音樂是有方向性的時間，單一個線條的走向也能表現音樂的特 性，從下圖圖 7來表示，A 與 B線條形態相仿，因都有筆直的線性元素，有一 種硬質、平和、樸素、嚴肅的感受；而像小草般呈 90 度彎曲的C線條，明顯地 有柔軟的意象，相較前三者，D線條曲度就更大，有柔軟、彈性、活潑帶點可愛 的趣味。單純地使用同一種線條去排列，利用粗細、濃淡、疏密的方式結合，仍 能產生畫面的動感，若將A、D線條同時存在畫面上(如圖 8)，加強了對比性的 視覺效果外同時也多了如音樂那樣的節奏韻律之趣味。兩者同樣能呈現音樂的律 動感，只是差別在一種以相仿的元素排列，另一種則是對比性的差異產生彈性的 視覺感受。. 18. 許天治 (1980)。《音感作畫媒材感通性與學生作品評析》，頁 275。. 36 .
(46) . 圖 7，線條的音樂性 (本研究整理). 圖 8，線條結合之對照 (本研究整理). 37 .
(47) . (2) 音樂旋律是有方向性的形狀. 方向的視覺符號常以「箭頭」來標示，而音樂的旋律也能以同樣的方式 來進行。因每個人對音樂的解讀不同，且各種音樂類型又能產生出不同的方 向性的線條意象，皆是因人而異，作者先以自己對不同類型的主觀感受做出 的音樂的方向概念圖：. 圖 9，音樂類型之旋律線條概念圖 (本研究整理). 38 .
(48) . 康丁斯基利用幾合圖形與具前進性質的線條來證明聲音或音樂與繪畫 的相通性，例如圖 10的圖中，康丁斯基利用貝多芬第五號交響曲做圖像式 的對應，從下方圓點大小可以經易解讀這小節的節奏快慢，曲線中配合音樂 的旋律擺動進行、虛線組合成的折線與音量相互作用著等，讓這些元素符號 賦予了意義，和音樂產生了連結。另外，與康丁斯基作法相近的是Graphic Score， 樂譜同樣使用線條、塊面、圖形等抽象的符號及圖示來呈現音樂的 各種性質。. 作者認為今日視覺藝術能利用電子相關的媒體，並透過精密計算產生出音樂 的圖像，理應上是由康丁斯基相關創作所影響。. 39 .
(49) . 圖 10，Beethoven 第五號交響曲圖像式對照，Kandinsky 來源： http://ehtobi.blog.uol.com.br/images/kandinsky-beethoven01.jpg. 小結：. 無論是具體或是抽象的形象，在藝術創作的概念和技巧如同音樂和形色間 的關係是一樣的，且在當代藝術強調「融和」不同媒材及「多元化」的表現，利 用不同領域滲透在作品中，激盪出的藝術創意火花。. 40 .
(50) . 2.4 音樂的視覺描述 當聆聽一首樂曲時，聽覺的感官受到的刺激傳遞到大腦，而引起一些音樂所 傳達的影像的聯想，而這些影像是對這樂曲的一種主觀性的理解，也因音樂有著 抽象的意象，藝術家們對於想表達音樂的方式，就有各種不同的形態的視覺藝術。. 音樂要明確地將視覺音樂定義清楚是有其困難度的，之所以視覺對於音樂會 撲朔迷離，是因音樂能引起的不止是聽覺反應，還含有某種抽象隱藏的訊息的功 能。從文藝復興時期開始，為解決難以描述的音樂，作曲家或演奏家發展出利用 圖解的方式描述音樂的特性，如圖形式表示的樂譜(Musical Graphic Notation)；另 一種視覺化音樂表現方式，是藝術家將聲音或音樂，透過一些方式或儀器直接轉 換為動態的視覺作品，且大部分的作品為實驗性藝術較多，如視覺音樂(Visual Music)。. 2.4.1 音樂圖像符號標記法. Musical Graphic Notation/ Graphic Score. 以非傳統的音樂符號及使用文字來傳達訊息的音樂表現形式，通常會使用較 特殊的圖像符號，運用於一些難以標準符號標記的狀況下的實驗性音樂，且這些 圖像皆可依循去演奏出來。例如圖像符號即可以以各種形式來呈現：. 41 .
(51) . (A) . 圖形式樂譜Graphic Scores：. 樂譜大多使用線條、色塊、圖形等抽象的符號及圖示來呈現音樂的各種性質。. 圖 11，“Towards...＂，Carl Bergstrom-Nielson. 來源：http://www.notations21.net/neilsen.html. 圖 12，“Paprika King ＂，Joe Pignato. 來源：http://www.notations21.net/pignato.html. 42 .
(52) . 圖 13，- “PAVILION＂，StevenRoden. 來源：http://www.notations21.net/roden.html. 43 .
(53) . 圖 14，“THE EMOTIONAL ORCHESTRA＂，Marina Rosenfeld. 來源：http://www.notations21.net/rosenfeld.html. (B) . 即興樂譜Prose Scores：. 表演者基於描述說明音樂內容或是精神，所編寫的方式帶點主觀概念，如美 國作曲家約翰．凱吉(John Cage, 1912–1992)在他譜寫的曲子「4 分 33 秒 19 」裡， 描述寂靜的聲音，他卻沒有彈奏任何樂器，但讓聽眾自己在這四分 33 秒裡去體 驗當下環境產生的樂音，此曲的樂譜只有標示“第一章＂、“第二章＂及“第三 章＂的文字，因此真正樂譜只是一個隱藏在每人心中的文本而已，它的音符長 短、節奏快樂、旋律皆是由當下每個聽者來決定。. 19. Youtube 網站：http://www.youtube.com/watch?v=gN2zcLBr_VM. 44 .
(54) . 圖 15，John Cage, 《4’33”》 Prose Score，1952. 來源： http://www.medienkunstnetz.de/werke/4-33/bilder/3/. 45 .
(55) . (C) . 五線譜相關表現Line staves showing relative pitch：. 在音樂發展至目前，一種常見且為人熟悉的標記方式，以不同的音高及 拍子等的音符標記在五條平行横線上，又稱「譜表」(Staff or Stave)，如圖 16。. 圖 16，基本五線譜結構 來源：http://upload.wikimedia.org/wikipedia/commons/9/91/Tonyli1212Music.jpg. 當然爾，許多藝術家也創造了些依主題性變化的作品，(如圖 17) 喬治．克 魯伯 (George Crumb，1929-) 以各星座結合音樂，創作出的具突破一貫垂直水平 線性觀念的圖像作品。. 46 .
(56) . 圖 17，“Makrokosmos Vol 1 第 8 號” - (Leo) ，George Crumb. 來源：http://homepage1.nifty.com/iberia/score_crumb.htm. 47 .
(57) . 圖 18，"第 12 號-Spiral Galaxy-(Aquarius)"，George Crumb. 來源：http://homepage1.nifty.com/iberia/score_crumb.htm. (D) . 鋼琴卷譜Piano Roll Notation：. 在早期 1950~1960 年代鋼琴能利用有孔的卷譜來自動彈奏，例如音樂盒裡凸 起的銅片(圖 18 )，這種標記法已延續應用到電腦MIDI音樂的製作，其利用電腦 的排序器來產生音樂：利用Music Animation Machine軟體，將樂譜(圖 20)音符轉 化成為不同長短高低的色條(圖 21)隨著旋律呈現出當下的音符。而另一美國音 樂家Hans Christoph Steiner使用自己圖形標記系統，樂譜隨著音樂的音色、速度、 力度、旋律等元素進行轉化而形成如(圖 22)的圖形。. 48 .
(58) . 圖 19，Roll Notation. 來源：http://www.notations21.net/NewFiles/n1148776649_30354260_4562635.jpg. 49 .
(59) . 圖 20，Music & Sounds. 來源：http://www.musanim.com/all/. 圖 21，Visualization by MAM.. 圖 22，Music Animation Machine Images.. 50 .
(60) . 圖 23，Hans Christoph Steiner's score for“ Solitude＂ created using Pure data's data structures.. 51 .
(61) . 2.4.2. 視覺音樂Visual Music (或彩色音樂Color Music) . 指在運用音樂結構整合於視覺圖像中，最初名詞的釋義是將音樂轉換成畫 作，如俄國藝術家康丁斯基的抽象繪畫等。藝術家透過一些情感方式來描述、或 利用儀器設備等裝置來把聲音或音樂直接地轉換成視覺形式，成為一部影片、電 影或動態電腦圖形，例如實驗動畫、音樂影片、多媒體表演甚至是影像騎師(VJ) 20。. 以實驗光雕塑家(Light Sculptor)保羅．弗瑞蘭德 (Paul Friedlander) 對視覺音 樂有三種定義和了解：. (A) 視覺音樂是種手段，指將音樂利用系統或是一套格式設定轉化為影像， 可以藉由機器或電腦代碼的工具設備來產生，就能在屏幕上「看見」聲音。. 圖 24，visual chord - Paul Friedlander.. 20. 影像騎師：VJ (Video Jockey). 52 .
(62) . (B) 視覺音樂是種手段，但這是由藝術家、設計師或導演來解釋音樂，所表 現的視覺形式即顯得主觀和直接。但許多普遍的視覺音樂表現都是必須融合和涉 及不同的形式，例如舞蹈、戲劇表演極少只有純舞蹈或純表演卻沒有音樂來配 合，因此，「多媒體」亦是視覺音樂的特色，例如 Pink Floyd 的搖滾電影就是典 型的例證。. 圖 25，Pink Floyd The Wall，1982.. (C) 視覺音樂之間沒有關係的方式：此視覺音樂是創造視覺關係，並隨著 時間推移而改變，主要關於形式或顏色的運動和變化。. 許多當代藝術家認為視覺音樂和抽象電影在某些程度上與過程重疊，但視覺 音樂並非全然是抽象的。視覺音樂有各種各樣的定義，在近年的一些藝術的書籍 裡，視覺音樂往往被混淆或是界定為一種「共感覺」 21 ，例如 2004 年洛杉磯當 代美術館舉辦「Visual Music: Synesthesia in Art and Music Since 1900」展覽，標 明：“音樂提供一種基本的雛型，能讓藝術去追崇嚮往：藝術基於抽象形式的語 21. 共感覺 (Synesthesia). 53 .
(63) . 言，來引起無限空間及在短時間發展演變，形成『視覺音樂』＂。. 圖 26，Windows Media Player 界面之 Visual Effect。. 圖 27，Windows Media Player 界面之 Visual Effect。. 圖 28，Windows Media Player 界面之 Visual Effect。. 54 .
(64) . 2.5 音樂與動畫的形式結構 “電影中的聲音有它自己的節奏，有時聲音的節奏會與視覺的節奏相合與對 抗”(Bruce F.Kawin，1992)。音樂與動畫同屬藝術領域的範疇裡，兩者是相輔相 成地，且音樂運用於動畫裡具有畫龍點睛的功用，音樂能暗示影片背景、角色的 情緒、描述事件當下的環境及氛圍感、或是暗示即將發生的事件、更能控制觀者 的內心情感等等。. 一首樂曲裡是由各種複雜多變的音符所組成，本身並無固定的具體形象，但 “音樂，是符碼化的聲音，其中存在著許多我們對音樂認定的共通點或共識。＂ 22. ，東漢經學家馬融(79-166)即有「聽聲類形」(《長笛賦》)之說法，因此實際應. 用在美學審美藝術內「音象性」(Music-Image)在一千多年前早已被適當地運用在 詩的領域內。. 因此仍能從音樂樂曲組成的條件要素和結構去分析，以古典樂為例，找出音 樂元素與動畫之間的共同特質 ：. 2.5.1. 音高. 對音樂而言指的是聲音的高低之變化，高音有著明亮雀躍的感覺，低音則有 悲傷、恐懼、瀕臨死亡的境界，且愈尖銳的高音（如人因害怕的尖叫聲或緊急煞 22. 郭美女 (2000)。《聲音與音樂教育》，頁 216。. 55 .
(65) . 車的輪胎聲等等）往往令人產生緊張的聯想，因此利用在動畫的部分能設計在角 色表演的情緒上。. 2.5.2. 力度. 在音樂裡是指樂的相對強弱，且力度在音樂及動畫表現上扮演著重要的角 色。人們對於音量的大小、輕重、強弱的不同程度，心理上也會產生反應，通常 巨大或沉重的音量使人感受到壓迫及緊張感，而輕盈柔弱、幽微的音量感受就愈 徐緩鬆弛及平靜，正如在白居易的《琵琶行》古詩中“大絃嘈嘈如急雨，小絃切 切如私語；嘈嘈切切錯雜彈，大珠小珠落玉盤。＂描述不同音量能流露多種不同 的態勢。因此轉換在動畫裡，通常依音樂的力度互相調整動作的關鍵動作 Key pose、或特寫的鏡頭展現畫面的最大張力等。. 2.5.3. 旋律. 是由一系列相同或不同音高的音以特定的高低關係及節奏關係組成的一種 音的序列，且幾乎所有音樂都貝有旋律，而在進行的旋律中音高的上下起伏變 化，就會造就出一種特殊的外形或線性走向的「旋律線 23 」，(如圖 29)，仔細觀 察下，旋律線這種波狀起伏的線條如同動畫劇情設計使用的「故事線」，(如圖 30 )，是能體現作品的思想感情的要素之一，因此旋律線能大大地增加聆賞者對 23. 旋律線：將樂譜中的音高位置利用線條連接起來，形成線性的形象。. 56 .
(66) . 於旋律的知覺與享受，故事線也相對地可以清楚掌握情情緒以及故事的高潮的舖 陳。. 圖 29，旋律線. 圖 30，故事線 57 .
(67) . 2.5.4. 調性. 又稱音質，皆是聲音或是曲子的特色，音樂往往由樂器或人聲等等不同聲音 素材和基調所組成。岡德列克他單純以弦樂、木管樂、銅管樂及鋼琴樂做為他的 音色的情感類型實驗，大部分則出現：. 銅管樂. 歡樂的、怪誕的. 木管樂. 鋼琴. 悲哀的、笨拙的、 纖細的、寧靜的、 不安的 感傷的、明快的. 弦樂. 高興的. 表格 3， 《實驗審美心理學》第 121 頁。. 但並非某種樂器就一定被認為是悲傷或歡樂的，如低音管的音色以斷奏或跳 躍式的吹奏則產生了令人愉快的效果，因此單單一種樂器的音色不能決定一首曲 子的風格，仍必須與其他音樂元素來配合，動畫及音樂兩者才能依照彼此的調 性，來呈現故事的核心風格及畫面的 Tone 調、背景環境的氛圍感。. 58 .
(68) . 2.5.5. 節奏. 節奏的要素在於拍子(Beat)及速度(Tempo)，在音樂中將節拍作一種速度上的 快慢變化，利用速度的快慢再加上一些高低的音調就形成了節奏，其中又分為有 規則的節奏及不規則的節奏模式。. 而一首音樂的節奏決定了這首音樂的類型，是快歌還是慢歌，是在午後咖啡 廳裡播放還是夜店裡DJ手中的唱盤所放出的音樂；而同樣地，節奏關係著動畫 呈現的步調，畫面中所陳述事情的速度，是緩和還是緊湊，歡樂還是緊張，也間 接關係到動畫中的動作表演，不一樣的節奏所呈現出的畫面行進步調就不一樣， 而畫面中所呈現的表演自然也就有所不同，在這之中節拍就像是一個動作，一個 最小的結構成分，而一個個的節拍組成節奏如同一個個動作組成一整個表演， “節拍是動作/反應中的一種行為交流。這些變化的行為通過一個又一個的節拍 構築了場景的轉化。＂ 24，如同前述節奏就像動畫的步調，影響畫面的氛圍及表 演的呈現。. 24. 羅伯特麥基 (2001)。 《故事-材質、結構、風格和銀幕劇作的原理》，頁 45。. 59 .
(69) . 2.5.6. 和聲. 呂清夫《造形原理》一書中描述，以造形的美學來說，“「調和」(Harmony) 是一種和諧狀態，它和韻律一樣，原來都屬音樂用語＂，解釋為在兩個元素以上 之間關係的統一關係，在造型藝術上有「形的調和」 、 「色的調和」及非造型藝術 「音的調和」25 。且“這種關係能給予人快感、毫無矛盾、分離之感＂，應用於 動畫的形式上也相同的重要。. 音樂的音高如同《幻想曲》動畫裡的每一個人物彼此關聯著，其中貫穿全場 的核心人物角色米老鼠，就像是音樂的主音是一個焦點；音樂使用什麼樂器彈 奏，如同動畫呈現是以水墨表現、或向量媒體、3D 技術來製作一樣，同樣的故 事表現手法不同，所呈現出來的效果也是有不同的特色；而整首樂曲的旋律也能 比擬成動畫中舖述描寫的「故事線」一樣，有抑、揚、頓、挫的故事點和轉折， 操控整場戲劇的情緒及高低潮走向；另外，音樂的節奏與動畫的節奏一樣，配合 事件或角色情緒會有快慢、緩和緊湊的步調；而和聲如同動畫裡相關的配角，達 成平衡的元素彼此關係有烘托映襯的功用。. 綜合而言，音樂與動畫之間有了調和及平衡的作用，才不會使得動畫與音樂 的關係疏離產生多餘或脫節的感覺，才能進而營造出符合當下環境的情感及氛 圍。. 25. 孫旗 (1987)。《藝術概論》 ，頁 P143。. 60 .
(70) . 2.5.7. 反覆、對比與變奏. 反覆是造就音樂的一致性，也是西方藝術形式表現裡的基本原則之一；而避 免對於一直不斷重覆的形式感到厭煩，對比就能扮演提供變化的角色；在反覆及 對比之間的中庸之道則是變奏，也是連接反覆與對比之間的橋梁。. 2.5.8. 形式. 樂曲的形式與動畫劇情段落的用法形式是相似雷同的，我們以A、B元素代 表段落來套用，在二段體 26 裡能得到AAB(或稱為小節的基本形式)、AA’B、ABB， ABB’，AABB或AA’BB’；在三段體 27 也能得到ABA及ABA’的方式來表現。而ABA 的段落形式在流行樂、藝術歌曲、輕歌劇、三重奏、搖滾樂……中極為常見，這 種均衡特性的三段體也如同Flash動畫中「Loop」(重覆)的設定。. 26. 二段體：Binary Form，在音樂作品中由兩個主要部分構成來稱之，在這概念能發展出多. 種可能性。 27. 三段體：Ternary Form，以呈示部(A)→發展部(B)→返回至(A)(再現部)的形式。. 61 .
(71) . 2.5.9. 序曲. 一般音樂中的序曲通常是做為作品的開頭部分，這種做為序幕及開場白之 用，好比動畫進入主題前的一小段欲引起動機的段落；另外，在音樂及動畫裡的 引言亦能做為結局結尾的簡短段落，除了交代故事最後的發展，讓結論及尾聲能 得以完整。. 綜合以上動畫與音樂形式結構的關係，經歸納及對應後大致如下圖所示： 音樂結構. 動畫表現形式. 音高. 角色之情緒. 力度. 角色之關鍵動作(Key pose) 鏡頭畫面張力. 旋律 旋律線. 角色的情緒 故事線. 音色. 呈現故事核心風格 (決定畫面 Tone 調、背景環境的氛圍感). 拍子 節奏. 動畫影格 Frame 表演步調. 和聲. 元素整合與平衡. 反覆、對比、變調的段落形式. 鏡頭 SCENE、Loop(重覆)設定. 序曲. 片頭動畫、轉場、結局 表格 4，動畫與音樂形式結構關係圖 (本研究整理). 62 .
相關文件
In Pre-Qin and Han era, the theories of heaven mind and Tao mind had a different level from human mind: an individual can conduct the human mind by means of self-cultivation and
Promote project learning, mathematical modeling, and problem-based learning to strengthen the ability to integrate and apply knowledge and skills, and make. calculated
(1) Western musical terms and names of composers commonly used in the teaching of Music are included in this glossary.. (2) The Western musical terms and names of composers
This thesis mainly focuses on how Master Shandao’s ideology develops in Japan from the perspective of the Three Minds (the utterly sincere mind, the profound mind, and the
Microphone and 600 ohm line conduits shall be mechanically and electrically connected to receptacle boxes and electrically grounded to the audio system ground point.. Lines in
The second question in this paper is raised from the first question – the relationship between constructing Fo Guang Pure Land and the perspective of management beginning
interactions between Europe and Asia in Medieval Times—3: Developments in trade and civilisation of Islam from the 7th to 15th centuries
Forming the initial ideas as the base of the composition activity, as well as the fundamental
