腦波科學與 Pink Floyd 音樂 —— 英國沉浸式 Frameless 體驗展

by DigiLog 作者群

2024.07.16

號稱史上最大的英國倫敦巨型沉浸式藝術體驗展 Frameless Immersive Art Experience，將於 2024 年 6 月的週五和週六晚上推出「Brainstorms: A Great Gig In The Sky」（頭腦風暴：一場偉大的空中演出），使用倫敦大理石拱門中心佔地三萬平方英尺的指標性場館，召集科學家、藝術家、音樂家、程式設計師與展覽製作專業人士們跨域共同打造，融合音樂、視覺、藝術以及與神經科學技術，試圖將人腦對於音樂的反應視覺化，為人們帶來前所未有的沉浸式視聽體驗。

「Brainstorms」是舊金山創意工作室 Pollen Music Group 與 Richard Wright Music Limited 的合作項目，擔任策展人兼藝術總監的 Gala Wright 正是 Pink Floyd 創始成員 Richard Wright 的女兒，「讓人們看見音樂對人類大腦的影響，同時也能讓人們更加認識父親的音樂。」製作團隊以 Pink Floyd 在 1973 年《The Dark Side Of The Moon》專輯內的經典歌曲〈The Great Gig in the Sky〉為主題概念。觀眾將來到四個空間，每個空間都以「天空」為主題，畫面呈現極光到鳥群的飛行，再到日食，將這些現象以人類大腦對音樂反應的驚人視覺化呈現。

而這些數據從何而來呢？整個展覽可分為幾個階段：

第一階段：大腦數據收集
2023 年 10 月，策展團隊召集了 125 名來自公眾的自願參與者，並在倫敦市中心的 Dolby Studios 內，使志願者在受控條件中聆聽 Dolby Atmos 格式的〈The Great Gig In The Sky〉，這首歌由 Richard Wright 創作，並以 Clare Torry 的聲音為主軸；志願者聆聽期間，使用生物資訊學公司 Emotiv 提供的 14 通道腦電圖(EEG) 頭戴式裝置記錄大腦數據，在大腦電壓的變化經過數據處理後，以興奮、放鬆、緊繃、專注等認知狀態的等標籤形式輸出，再進一步處理成最適合視覺視覺化參數的指標。

第二階段：以數據驅動視覺敘事
最初，「Brainstorms」的目標是將大腦數據進行單一體驗的視覺化，隨著項目持續推薦，團隊發現有機會探索更廣泛的主題，策展人 Gala Wright 便建議將「Great Gigs In The Sky」擴展成兩個藝廊空間，並使用另一個展示空間，讓參觀者直接看到大腦數據收集與視覺化的過程。無論是使用複雜化的算法來描繪認知狀態、抑或使用創新的腦電圖數據轉換，每個空間的視覺與動態都依照大腦的信號數據作為關鍵驅動引擎，團隊使用一系列工具處理這些材料，並與 Frameless 團隊密切合作，將技術與場館的播放系統整合。

第三階段：現場音訊與即時互動
Frameless London 利用 Flux Spat Revolution 和 Sound Particles 等先進技術，並讓聲音環繞於觀眾四周，創造出沉浸式的聲音體驗。為使觀眾更深入地與藝術作品互動，Pollen Music Group 與 Frameless 的系統工程師則透過精密的設計，讓每一位進入空間的觀眾所發出的聲響，能夠成為展覽藝術中的一部分，創造出難忘的感官旅程。

第四階段：與音樂人合作（Richard Wright、 Imogen Heap）
除了 Pink Floyd 代表歌曲〈The Great Gig in the Sky〉，團隊也與英國著名音樂人 Imogen Heap 合作。其中一個展覽空間將她 2009 年創作的單曲〈Cumulus〉重新混音作為展場配樂，並將其延伸視覺。更有趣的是，Imogen Heap 同意讓團隊蒐集她與她的女兒聆聽這首歌曲，並以母女倆的數據編織成視覺化圖形。

參觀者互動體驗方式
VIP 名額的觀眾可以額外付費加購紀錄大腦活動的服務，在聆聽 Pink Floyd 專輯《The Dark Side of the Moon》時，透過 AMD 和 Emotiv 的技術捕獲 15 分鐘的大腦活動。同時，觀眾的大腦活動會成為大規模雲層，投射到 Frameless 的雲端畫廊中，並在幾天後一份紀念品（包含大腦 α、β、θ、δ 波及其心境狀態的科學解釋，以及客製化的個人視覺化圖形。）

「Brainstorms: A Great Gig In The Sky」不僅僅是一場視覺和音樂的饗宴，更是一場關於音樂與大腦互動的科學探索。這個項目展示了音樂如何深刻影響我們的心靈，並通過先進的技術將這種影響視覺化，為觀眾帶來難忘的體驗。隨著這場展覽在倫敦的成功上演，預計未來將在其他城市和沉浸式場館中進行巡展，為更多人帶來這場科學與藝術交織的奇幻旅程。