這學期的Meeting課，工設系的喬斐同學也有修，她想利用這門課來完成一個project，就是可以用音樂來作畫，或者反過來，用作畫來作曲。約三週前她便上台報告過有關「音符」對應「顏色」的關係，她對色彩學比較熟，但跟音樂不熟，因此便找了篇論文來說明一下別人是怎麼做的。
該篇論文(Visual music and musical vision)的作法是，將image做DWT(Digital Wavelet Transform)，再針對不同的band去做histogram統計；另一方面，audio 則是做 MFCC (MelFrequency Cepstral Coefficients)，兩邊其實都轉成 freqency-like domain 後，再用DTW (Dynamic Time Warping, not DWT …) 比對，比對完後相似度越高代表越像。
我跟色彩學不熟，但這個作法聽起來就很有問題，難道一樣是C和絃，不同音域的聽起來感覺會不同嗎？即使高音域的聽起來會較明亮或刺耳，但若依這論文的作法，那對應到的顏色會完全不同。論文拿了三首曲子當例子，剛剛好都是我有聽過的 (我聽過的古典樂說真的我都沒在記名字。。。)：Rhapsody in Blue, For Alice, Turkey March。尤其Rhapsody in Blue是我看完交響情人夢後就超愛的歌曲，但論文比對出來的圖一整個很怪。第一次喬斐報告完後我跟DNA就有討論過，相較於頻率這個純物理的量，「和絃」這個樂理的量似乎比較直觀些。
這禮拜，喬斐同學自己也提出說覺得這種比對方式怪怪的，我便提出些我的看法，這裡我整理一下想法好囉。
我之所以會提出用和絃對應顏色的看法，是因為人們對於和絃的感受會比絃律強烈，我舉即興演奏為例子，許多即興演奏都是背景一直在run同一組四和絃，而絃律則是有樂手自行發揮，雖然每個樂手都有自己的style，卻必須繞著這個四和絃主題。這句話蘇小鈺不認同，或許我應該舉例說，四和絃就像一個背景顏色，而樂手們可依自己的風格在這個背景色上著色，但除非你是走前衛風，否則通常你的著色會是與背景色搭配的。另一方面，和絃的組和遠比絃律少，這在實作上才有機會。
至於對應於顏色的難道只有和絃？當然不，我覺得還有「音色」，不同樂器所演奏出來的C和絃感覺不一樣，而樂器的音色其實是看partials能量的相對關係，看！這在實作上又接得上線了。最後，「節奏」也會跟顏色有關，例如正常的C和絃跟各種不同的分解和絃感覺是有差異的。
最後，想問問大家，你覺得C和絃是什麼顏色呢？哪些樂器的C和絃屬於比較明亮或混濁的顏色呢？
Reference:
有人提出和絃與色環的關係：http://www.chjhs.tp.edu.tw/~area-j8/chords01.htmhttp://www.chjhs.tp.edu.tw/~area-j8/chords01.htm
和絃表 (吉他)，有興趣的可以拿我放在lab的吉他去彈看看：http://gita.pixnet.net/blog/post/17894035
7 則留言:
新的心得：
雖然我問了三個人答案都一樣，但那也不代表這就是正確答案，只是剛好在生活環境相差不遠的情況下，大家所受的training很接近，例如調性是大調就是開心，開心就想到亮色或淺色，但卻不能否認有人開心時會想到暗色。
音樂系的同學說，音樂跟色彩都是主觀的，兩個主觀的印象在大腦中的聯覺，其排列組合應該會很多種才是。
所以聯覺的研究可能需要統計，現階段我只能說因為我是普通人，所以我的答案也許恰巧會是多數人的答案罷了。
確實是有文獻提到大調是歡樂的、小調是較悲傷的....。看到自己的的名字出現在上面...我想我真的不能幹壞事，否則應該會殺到工設系找我吧!!呵呵~~我想也許在音樂與色彩這條路上，對於跨領域這件事，共通的語言很重要~所以閒暇之餘我正在努力的K和聲學中，也許這樣會對溝通比較有幫助，或許真能找到一個方向吧~~~~不過最近我火燒屁股，暫時先把這件事先擱下了!!你也加油了^^
os.似乎合弦本身就已經被分成T.S.D三大類...或許是個可能的思考方向= =
你找到這裡還翻出這篇文章我才嚇一跳。
我剛爬了一下google，找到有趣而且還滿完整的東西。
TSD 和聲代換
但我會建議你先看這篇。和絃基礎
和絃基礎講的是和絃標記的意義，TSD則是介紹和絃譜曲的公式，當然最好是手邊有keyboard or guitar可以拿起來彈看看，或許會比較要fu。
至於之前我提到"直接拿Cepstrum來轉換顏色"是完全不合理的原因，關係和絃可以給你參考，這是標準的反例。
喔喔~喝!那是因為我有一天無聊google自己的名字，才發現的。^^。(我也很"驚"~)
那些資料我會研究一下，謝謝你了!!我和我們老闆談過這個研究主題，我們老闆建議我可以先找會作詞作曲的人或音樂系的人先談談，或許可以以他們的邏輯來思考這個題目，還建議我去台南大學修修音樂課>_<。總之目前還是一片混沌中= =
Google真的滿強的，以前我google自己的名字還沒幾筆，現在多了一堆有的沒的，然後google圖片還會出現蘇小鈺的照片 XD。
你老闆說得沒錯，我跟DNA充其量只是半仙，也許能提供些意見但不見得符合音樂人的邏輯，如果有機會找音樂人喝咖啡的話記得找我！
其實，我好像也可以找到一兩個師大音樂所的來聊聊 ...
呵呵~~老實說我也還不知道要找誰~如果你可以幫忙就真的是太好囉^^先謝謝你囉
等之後我們lab的某專案進行到一個階段時，我們便會邀請一個師大的同學來幫忙，屆時我再向他提起好囉。
張貼留言