Wii 的連接 Max/MSP 與 Wii 的 Laptop 樂團

在 Youtube 上可以找到不少 拿Wii 拿來控制 Max/MSP 所產生的音樂或聲音，原先是由日本人研發的物件，不過目前 Virginia Tech 音樂系 http://disis.music.vt.edu/main/faculty.html 任教的 Ivica Ico Bukvic 將它再度更新。利用藍牙傳輸，目前僅有 Mac 的物件。下載處在此：

http://ico.bukvic.net/Max/

Ivica Ico Bukvic (b.1976)http://ico.bukvic.net/ 是我在美國看到的一位非常傑出的年輕作曲家，器樂作品已經好得無話說，有一次在 SEAMUS 會議中聽到，已經非常令我訝異，但後來知道原來他還是位程式設計高手。目前他手邊改寫完成的 Max/MSP 物件還包括 Unity 與 Max/MSP/Jitter 結合的物件。

以下是他帶學生做的 Wii 的電子樂團：



Wii 的 infrated camera 用處也頗多，以下這個連結是不可錯過的：
http://johnnylee.net/projects/wii/

舊版 wii 的 Max 物件：
http://www.iamas.ac.jp/~aka/max/

Wii 與影音軟體的溝通：
http://www.osculator.net/

舞蹈與影像、音樂之結合

最近在構想舞蹈與影像、音樂結合的可能性，預錄電子音樂的演出很難被多數人接受，但如果加上視覺效果，就很不一樣。我以為最佳的組合，便是同時結合視訊與舞者。以下這幾個是網路上找到的其他相關範例：

下面這個例子看來是使用類似像是紅外線的偵測技術？粒子化或流體的特效在 jitter 中雖然很難做到那麼漂亮，但倒還是值得嘗試。


time and space, motion and physics - augmenting the dance (in realtime) from noisepoetry on Vimeo.


底下這個範例，在 max/msp/jitter 就應該很容易做了，只是單純的延遲特效之控制而已。但其實視覺效果也不差，音樂、舞蹈反而因為單純的視訊特效，而成為焦點：

Samsara《輪迴》影音作品 （2004-2005)

Title: Samsara (electroacoustic music with video) 《輪迴》

Date: finished on August 12, 2004

Duration: ca. 6 min.

Program Notes:

Samsara means “cycle of existence” (cycle of life and death) in Buddhism and Hinduism, where life is nothing but an illusion (maya), and the material world is a place fragmented and constantly changing through the repeated process of formation, existence, destruction, and emptiness.

In the accompanying video, the same footage of flowers is repeatedly used through the distortion, reposition, and rotation of the pixels sampled from the original images. This helps to achieve visual coherence. The different scenes are arranged in a special order to represent the repeated life and death of flowers, symbolizing the endless cycle of birth, age, illness, and the death of all creatures.

In the music, sound samples of water drops, the traditional Chinese bamboo flute, and the Chinese zither are used mainly through the techniques of convolution and granular synthesis to create a dreamy ambiance and to symbolize the fleeting and illusionary life. Besides, pentatonic scales are also intentionally applied to create the mysterious impression of oriental religion and philosophical thinking.

影像與音樂結合之數位作品Samsara，以藝術的手法呈現佛教「輪迴」的概念，以花開花落、夕陽西下、烈火、灰燼、水波等意象，表達凡人眼中所能感受或觸摸的萬事萬物，其實都逃不了「成、住、壞、空」的過程，而此生或許曾有過絕美的一刻或叱吒風雲的一時，也不過如幻象一般，疾逝如旋開旋滅、方生方死的水波。

在影片的處理上，主要使用花開花落的影片片段為軸心素材，運用各種數位影像特效的處理，將其透過扭曲（distortion）、重置（reposition）、旋轉（rotation）及光影的特殊處理來重新呈現，以期達到藝術的集中性（coherence）。每個場景也經過特別的順序安排與連接表達生、老、病、死無盡的循環。

在音樂處理上，則將水滴、中國笛、古箏等聲音，透過音色互融（convolution）、粒子化合成（granular synthesis）等技術，來營造夢幻般的氣氛及表達生命的虛幻短暫。五聲音階也被刻意運用其中，以營造東方宗教哲學之神秘色彩。

隻手之聲互動影實驗架構圖

其實不需要依賴硬體感應器，max/msp/jitter 就可以玩這種魔術遊戲。這個實驗，是利用影像畫格色差的數值，來觸發軟體音訊合成，包含FM, RM, Harmonizer, Reverb 等。為了考慮效果，所以我也加了幾個預置聲音檔案，以強化聲音藝術本身的結構性。以上實驗，純粹教學用途，談不上偉大的表演，我個人還是偏好以互動技術結合器樂演出與電子音樂來創作音樂作品。