早在二十年前，流行音樂明星就有許多成熟的渠道培養(yǎng)聽眾群，例如：銷售唱片、電臺播放、音樂視頻和現(xiàn)場演出。如今，歌手和歌迷之間又有了一條激動(dòng)人心的新紐帶——虛擬世界。具有開拓精神的流行音樂明星正在擁抱數(shù)字領(lǐng)域，這不僅讓現(xiàn)有的支持者感到欣喜，也使明星能夠接觸到全新的歌迷群體。

Aya Nakamura正是這樣一位革新者。最近，在《堡壘之夜》Soundwave系列演唱會（由世界各地歌手主打獻(xiàn)唱的一系列音樂體驗(yàn)）中，這位稱霸音樂排行榜的法國籍馬里裔歌手擔(dān)任了主唱。

最近，《堡壘之夜》的玩家受邀參加一場完全使用《堡壘之夜》創(chuàng)意模式工具集構(gòu)建的活動(dòng)。在這次活動(dòng)中，法國歌手首次在《堡壘之夜》中傾情獻(xiàn)唱，帶來了一場開創(chuàng)性的音樂體驗(yàn)。

Aya和她的唱片公司Rec. 118（隸屬于法國華納音樂）與XR工作室MADO XR合作，在MetaHuman Creator的幫助下創(chuàng)造了這位明星的數(shù)字替身，與此同時(shí)，他們還使用虛幻引擎5，為將在體驗(yàn)內(nèi)播放的音樂視頻構(gòu)建了虛擬環(huán)境。

使用MetaHuman創(chuàng)造逼真的虛擬化身

“當(dāng)我聽到這個(gè)項(xiàng)目時(shí)，我立即意識到，它具有巨大的突破性意義。”MADO XR的創(chuàng)始人、首席執(zhí)行官兼創(chuàng)意總監(jiān)Louis de Castro說。

對De Castro來說，Aya Nakamura在Soundwave系列演唱會中的演出完美地詮釋了數(shù)字世界如何成為歌手的舞臺。“我將它想象成一個(gè)巨大的游樂場，它不僅可以激發(fā)我們的想象力，也能夠讓我們從不同角度看待演出。”他解釋說，“能夠參與一個(gè)展現(xiàn)元宇宙所有力量的巨型項(xiàng)目，我感覺自己成了一名開拓者。難道還有比這更讓人興奮的事嗎？”

對Aya Nakamura和法國樂壇來說，這場虛擬體驗(yàn)代表了一座里程碑——Aya本人也深知這一點(diǎn)。“這次合作讓我有機(jī)會向世界各地的新老歌迷獻(xiàn)上我迄今為止最大規(guī)模的演出，”她在活動(dòng)前這樣說，“我迫不及待地想與大家分享我的音樂，成為第一個(gè)與《堡壘之夜》合作的法國歌手！”

法國華納音樂的總裁Alain Veille解釋說，通過在《堡壘之夜》這樣的虛擬世界中舉辦音樂體驗(yàn)，歌手取得了難得的機(jī)會，讓他們能夠在歌迷所熟悉的地方與歌迷們相聚。“通過進(jìn)入《堡壘之夜》這類備受玩家喜愛的游戲，歌手將直接與擁有共同興趣的歌迷們緊密聯(lián)系在一起。”他說，“我們從歌迷那里聽到，他們對自己喜愛的歌手所做出的一種常見正面評價(jià)就是‘我竟然不知道他/她是《堡壘之夜》的粉絲’。”

除了以激動(dòng)人心的新方式讓歌手與歌迷建立聯(lián)系外，虛擬體驗(yàn)也為繁忙的歌手們提供了一種切實(shí)可行的途徑，使他們能夠一次接觸到數(shù)百萬人。“現(xiàn)場巡演需要跨州越郡，前往多個(gè)城市和場館，相比之下，這種方式為我們帶來了更大的靈活性，我們可以隨機(jī)應(yīng)變地安排歌手的日程，處理好各種任務(wù)。”Veille說。

Aya的團(tuán)隊(duì)能夠在項(xiàng)目時(shí)間表中將這場活動(dòng)納入考量，這甚至啟發(fā)了團(tuán)隊(duì)想到利用MetaHuman Creator創(chuàng)造歌手的虛擬化身，在活動(dòng)過程中使用。“與現(xiàn)場演唱會或巡演中需要真人演出的要求相比，虛擬演唱會的制作工作更加靈活。”Veille解釋說。

虛擬世界是樂壇的新前沿。從唱片公司、歌手到歌迷，所有人都在共同探究，這些數(shù)字空間將對歌手和歌迷間的關(guān)系產(chǎn)生何種意義。

正如華納音樂集團(tuán)首席數(shù)字官Oana Ruxandra所解釋的那樣，這意味著他們將與歌手、其團(tuán)隊(duì)、其歌迷以及平臺一起，攜手學(xué)習(xí)。“在這個(gè)與Aya共同完成的項(xiàng)目中，我們試驗(yàn)了新工具，使她能夠更全面地為自己建立愿景。”她說。

“例如，這是我們第一次在虛幻引擎5環(huán)境中使用MetaHuman工具。無論是動(dòng)畫保真度，還是在虛擬空間中捕捉Aya真實(shí)動(dòng)作的能力，都使我們大開眼界，我們所有人都感到無比激動(dòng)和振奮。”

使用虛幻引擎5創(chuàng)造虛擬世界

MADO XR與音樂及數(shù)字行業(yè)的優(yōu)秀資深人士合作，設(shè)計(jì)了視覺概念、劇本和歌手的虛擬化身。

該團(tuán)隊(duì)與導(dǎo)演二人組The Quiffs聯(lián)手打磨了音樂視頻的劇本。巴黎3D掃描工作室Scan Engine負(fù)責(zé)掃描Aya，獲得數(shù)字?jǐn)?shù)據(jù)，然后，創(chuàng)意數(shù)字工作室Shape Shifters將利用這些數(shù)據(jù)為她制作虛擬化身。Komet Xperience的法國美術(shù)師團(tuán)隊(duì)也參與了合作，為將在體驗(yàn)屏幕上播放的音樂視頻開發(fā)虛擬環(huán)境。

開發(fā)過程的第一步就是掃描。團(tuán)隊(duì)拍攝了150多張Aya臉部和身體的照片，用于創(chuàng)建高保真掃描，然后他們將掃描數(shù)據(jù)傳送到了MetaHuman Creator中。通過虛幻引擎最新MetaHuman插件的“網(wǎng)格體轉(zhuǎn)MetaHuman”功能，現(xiàn)在，任何人都可以完成這一流程。“在這個(gè)過程中，最具挑戰(zhàn)性的部分就是刻畫出使她有‘人味’的細(xì)節(jié)——調(diào)整唇色、膚色和臉部陰影，而我們可以在MetaHuman Creator中重現(xiàn)這一切。”De Castro說，“下一步是重新裝配面部綁定，讓她能夠表露情緒。之后，我們會通過動(dòng)作捕捉制作動(dòng)畫。”

上面提到的面部綁定重新裝配過程現(xiàn)在可以自動(dòng)完成。De Castro認(rèn)為，在創(chuàng)造數(shù)字人類方面，MetaHuman Creator引領(lǐng)了一場變革。“最妙的部分是，無論是熟練的3D美術(shù)師，還是初學(xué)者，任何類型的創(chuàng)作者都可以利用它參與到虛擬化身的創(chuàng)作中。”他說，“它容易使用，界面直觀，即使是以前對技術(shù)一無所知的人，也能夠通過它提供的指南塑造一個(gè)相當(dāng)不錯(cuò)的虛擬化身。”

在傳統(tǒng)管線中，要模仿真實(shí)人類的面部表情，就必須重新制作面部綁定、動(dòng)畫和骨骼。De Castro很早就接受了數(shù)字人類技術(shù)，他見證了這項(xiàng)技術(shù)已在多大程度上超越了傳統(tǒng)管線。“從這種意義上說，MetaHuman Creator確實(shí)是一款‘一次性’工具。”他說。

歌手本人的反應(yīng)是檢驗(yàn)團(tuán)隊(duì)成功與否的最佳試金石。“當(dāng)我看到我的虛擬化身時(shí)，我真的很驚訝。”Aya說，“看起來如此真實(shí)——尤其是動(dòng)作和姿態(tài)。我立刻就認(rèn)出了那是我自己，這給我留下了深刻的印象！”

Aya的演出已在《堡壘之夜》內(nèi)的虛擬環(huán)境中通過屏幕公映。經(jīng)過Atlas Creative Studios的開發(fā)，玩家能夠在探索這個(gè)虛擬世界的同時(shí)體驗(yàn)Aya的音樂。

Atlas的團(tuán)隊(duì)盡心竭力，在玩家穿行的虛擬世界中重現(xiàn)了音樂視頻CG畫面的外觀和感覺。見過音樂視頻中的數(shù)字Aya以及由UE5構(gòu)建的環(huán)境后，通常來說，玩家會期待在《堡壘之夜》中看到的更加逼真的外觀，因此，團(tuán)隊(duì)必須深入研究《堡壘之夜》創(chuàng)意模式的工具集，將兩者更好地匹配起來。

“我們制作的很多東西看起來不一定像典型的《堡壘之夜》地圖，因?yàn)槲覀儽仨毚罅空{(diào)整光照以及各種不同的東西，使它們的外觀與視頻中相符。”工作室聯(lián)合創(chuàng)始人兼首席執(zhí)行官M(fèi)ichael Herriger解釋說，“這就是最酷的地方——你在《堡壘之夜》中，但同時(shí)又感受到了不同于《堡壘之夜》的體驗(yàn)，這真讓人興奮。”

音樂體驗(yàn)的未來

Ruxandra稱，華納音樂認(rèn)為，未來將出現(xiàn)基于超薄頭盔設(shè)備的超真實(shí)元宇宙體驗(yàn)。“這些元宇宙體驗(yàn)將具有持久性、同步性和實(shí)時(shí)性。”她說，“它們將跨越數(shù)字世界和物理世界，提供前所未有的互操作性，充滿由廣泛內(nèi)容貢獻(xiàn)者所提供的內(nèi)容，并具備功能齊全的獨(dú)立經(jīng)濟(jì)機(jī)制。”

Ruxandra繼續(xù)說，在這些元宇宙體驗(yàn)中，音樂將成為互動(dòng)、交流和消費(fèi)的主要形式。“對我們的歌手來說，能夠在身臨其境的環(huán)境中以可定制的實(shí)時(shí)方式與歌迷互動(dòng)，將創(chuàng)造無窮的可能性。”她解釋說，“此時(shí)此刻，能夠在這些未來體驗(yàn)的開始階段對其進(jìn)行挖掘研究，我們感到萬分激動(dòng)。這將確保我們?yōu)楦枋痔峁┍匦璧墓ぞ撸顾麄兂蔀檫@些虛擬空間中的權(quán)威人物。”

對De Castro來說，《堡壘之夜》完美地詮釋了Ruxandra所描述的虛擬音樂體驗(yàn)。“承認(rèn)吧，沒有誰能超越《堡壘之夜》團(tuán)隊(duì)，推出更精彩的虛擬表演。”他說，“沒有什么派對能與《堡壘之夜》的派對相媲美，當(dāng)提及制作最出色的游戲內(nèi)演唱會時(shí)，Epic Games也借此樹立了‘具有前瞻思維的主辦方’這一形象。

“這個(gè)平臺向我們證明了，如果想將游戲玩家、歌手、美術(shù)師和設(shè)計(jì)師聚集在一起，它將是首要選擇。元宇宙已逐漸成為熱門話題，而這正是展示數(shù)字化現(xiàn)實(shí)運(yùn)作方式的最佳范例。”

本文轉(zhuǎn)自虛幻引擎官網(wǎng)~