2009年5月8日 星期五

音樂對應顏色

這學期的Meeting課,工設系的喬斐同學也有修,她想利用這門課來完成一個project,就是可以用音樂來作畫,或者反過來,用作畫來作曲。約三週前她便上台報告過有關「音符」對應「顏色」的關係,她對色彩學比較熟,但跟音樂不熟,因此便找了篇論文來說明一下別人是怎麼做的。

該篇論文(Visual music and musical vision)的作法是,將image做DWT(Digital Wavelet Transform),再針對不同的band去做histogram統計;另一方面,audio 則是做 MFCC (MelFrequency Cepstral Coefficients),兩邊其實都轉成 freqency-like domain 後,再用DTW (Dynamic Time Warping, not DWT …) 比對,比對完後相似度越高代表越像。

我跟色彩學不熟,但這個作法聽起來就很有問題,難道一樣是C和絃,不同音域的聽起來感覺會不同嗎?即使高音域的聽起來會較明亮或刺耳,但若依這論文的作法,那對應到的顏色會完全不同。論文拿了三首曲子當例子,剛剛好都是我有聽過的 (我聽過的古典樂說真的我都沒在記名字。。。):Rhapsody in Blue, For Alice, Turkey March。尤其Rhapsody in Blue是我看完交響情人夢後就超愛的歌曲,但論文比對出來的圖一整個很怪。第一次喬斐報告完後我跟DNA就有討論過,相較於頻率這個純物理的量,「和絃」這個樂理的量似乎比較直觀些。

這禮拜,喬斐同學自己也提出說覺得這種比對方式怪怪的,我便提出些我的看法,這裡我整理一下想法好囉。

我之所以會提出用和絃對應顏色的看法,是因為人們對於和絃的感受會比絃律強烈,我舉即興演奏為例子,許多即興演奏都是背景一直在run同一組四和絃,而絃律則是有樂手自行發揮,雖然每個樂手都有自己的style,卻必須繞著這個四和絃主題。這句話蘇小鈺不認同,或許我應該舉例說,四和絃就像一個背景顏色,而樂手們可依自己的風格在這個背景色上著色,但除非你是走前衛風,否則通常你的著色會是與背景色搭配的。另一方面,和絃的組和遠比絃律少,這在實作上才有機會。

至於對應於顏色的難道只有和絃?當然不,我覺得還有「音色」,不同樂器所演奏出來的C和絃感覺不一樣,而樂器的音色其實是看partials能量的相對關係,看!這在實作上又接得上線了。最後,「節奏」也會跟顏色有關,例如正常的C和絃跟各種不同的分解和絃感覺是有差異的。

最後,想問問大家,你覺得C和絃是什麼顏色呢?哪些樂器的C和絃屬於比較明亮或混濁的顏色呢?

Reference:

有人提出和絃與色環的關係:http://www.chjhs.tp.edu.tw/~area-j8/chords01.htmhttp://www.chjhs.tp.edu.tw/~area-j8/chords01.htm

和絃表 (吉他),有興趣的可以拿我放在lab的吉他去彈看看:http://gita.pixnet.net/blog/post/17894035

7 則留言:

87showmin 提到...

新的心得:

雖然我問了三個人答案都一樣,但那也不代表這就是正確答案,只是剛好在生活環境相差不遠的情況下,大家所受的training很接近,例如調性是大調就是開心,開心就想到亮色或淺色,但卻不能否認有人開心時會想到暗色。

音樂系的同學說,音樂跟色彩都是主觀的,兩個主觀的印象在大腦中的聯覺,其排列組合應該會很多種才是。

所以聯覺的研究可能需要統計,現階段我只能說因為我是普通人,所以我的答案也許恰巧會是多數人的答案罷了。

匿名 提到...

確實是有文獻提到大調是歡樂的、小調是較悲傷的....。看到自己的的名字出現在上面...我想我真的不能幹壞事,否則應該會殺到工設系找我吧!!呵呵~~我想也許在音樂與色彩這條路上,對於跨領域這件事,共通的語言很重要~所以閒暇之餘我正在努力的K和聲學中,也許這樣會對溝通比較有幫助,或許真能找到一個方向吧~~~~不過最近我火燒屁股,暫時先把這件事先擱下了!!你也加油了^^
os.似乎合弦本身就已經被分成T.S.D三大類...或許是個可能的思考方向= =

87showmin 提到...

你找到這裡還翻出這篇文章我才嚇一跳。

我剛爬了一下google,找到有趣而且還滿完整的東西。
TSD 和聲代換

但我會建議你先看這篇。和絃基礎
和絃基礎講的是和絃標記的意義,TSD則是介紹和絃譜曲的公式,當然最好是手邊有keyboard or guitar可以拿起來彈看看,或許會比較要fu。

至於之前我提到"直接拿Cepstrum來轉換顏色"是完全不合理的原因,關係和絃可以給你參考,這是標準的反例。

匿名 提到...

喔喔~喝!那是因為我有一天無聊google自己的名字,才發現的。^^。(我也很"驚"~)
那些資料我會研究一下,謝謝你了!!我和我們老闆談過這個研究主題,我們老闆建議我可以先找會作詞作曲的人或音樂系的人先談談,或許可以以他們的邏輯來思考這個題目,還建議我去台南大學修修音樂課>_<。總之目前還是一片混沌中= =

87showmin 提到...

Google真的滿強的,以前我google自己的名字還沒幾筆,現在多了一堆有的沒的,然後google圖片還會出現蘇小鈺的照片 XD。

你老闆說得沒錯,我跟DNA充其量只是半仙,也許能提供些意見但不見得符合音樂人的邏輯,如果有機會找音樂人喝咖啡的話記得找我!

其實,我好像也可以找到一兩個師大音樂所的來聊聊 ...

匿名 提到...

呵呵~~老實說我也還不知道要找誰~如果你可以幫忙就真的是太好囉^^先謝謝你囉

87showmin 提到...

等之後我們lab的某專案進行到一個階段時,我們便會邀請一個師大的同學來幫忙,屆時我再向他提起好囉。