想象一下這樣一個畫面：你最喜歡的歌星正在表演，然后你注意到不僅只是歌迷在為音樂搖擺，舞臺背景同樣在伴隨著節奏起舞。這正是參加新西蘭Pharos音樂節的樂迷們的體驗。這場為期三天的活動糅合了動感十足的節拍，炫酷的高科技，以及身臨其境的效果。

于2018年11月在奧克蘭舉行的Pharos音樂節期間，格萊美獎得主唐納德·格洛沃（歌手藝名幼稚岡比諾；Childish Gambino）一共開唱三場。

演唱會是在一個160英尺高的圓頂舞臺。視覺效果以360度視角投影，而幼稚岡比諾則在中心舞臺演出。當抬起頭時，粉絲可以看到不同的角色朝音樂方向移動，而五彩繽紛的圖像照亮了整個舞臺。

對于這個大型項目，紐約工作室2n Design與維塔數碼（Weta Digital）進行了合作，并將交互式圖形集成到演唱會之中。

完整的系統由五臺機器組成，各自負責相應的圓頂區域。具體來說，2n和維塔數碼利用強大的NVIDIA Quadro P6000顯卡將五臺機器布置成一個無縫的圓形渲染裝置。

為了確保為所有視點和角度帶來最優秀的視覺效果，兩家公司在虛擬現實里面進行內容開發，而這允許他們在設置系統之前檢查并迭代設計。

維塔數碼的視覺特效總監基思·米勒（Keith Miller）表示：“創建可以響應唐納德的表演，以及響應觀眾的情緒情感的交互式敘事體驗是一個絕佳的機會。我們能夠在圓頂內進行藝術指導，給予每個最佳視點一種特別的感覺，而且我們能夠通過實時VR工作空間預覽這個環境。”

2n Design的Pharos音樂節創意總監亞歷贊德羅·克勞福德（Alejandro Crawford）回答道：“VR幫助我們圍繞360度進行設計。我們可以判斷一棵樹是否過于靠近攝影機，或者一個數字生物是否需要以不同的方式移動。VR使得我們能夠以我們想要的方式設計鏡頭和表演。”

當視覺效果準備就緒后，團隊必須同步圖形和表演，并確保整個系統可以同時地渲染。他們通過Unreal引擎開發了系統框架，其中圖像能夠通過英偉達圖形引擎的nDisplay技術實時渲染圖像。

克勞福德解釋說：“我們希望實現一個世界島另一個世界的無縫過渡，而不是淡入淡出。等待加載不是一種選擇。我們的策略是將所有內容加載到內存中，而Quadro GPU提供了足夠的視頻紋理內存，可以做到這一點。”

然后，團隊構建了一個自定義引擎并用來接收Unreal引擎的內容，同時實時拼接各個視頻源，最終以超過5K的分辨率生成了令人驚嘆的360度投影效果。

他們同時設計了音頻響應參數并將其映射至系統，因此視覺效果可以根據幼稚岡比諾的表演進行回應。結果：一場栩栩如生的音樂盛會，炫美的圖形投影至圓頂，并且能夠實時地響應歌手演唱過程中的表演。

Unreal引擎的總經理馬克·珀蒂特（Marc Petit）指出：“實時技術正在改變內容的消費和創造方式。Epic和英偉達正在開創最新的技術，幫助藝術工作者能夠處理大型項目并構建非凡的視覺環境。借助Unreal引擎中的渲染系統和Quadro GPU的強大功能，設計人員可以創建前所未有的沉浸式交互式體驗。”

值得一提的是，在上月舉行的第17屆年度VES大獎中，2n Design和Weta憑借這個項目獲得了Special Venue Project類別的杰出視覺效果獎（Outstanding Visual Effects ）。