21?Pilots’樂隊(duì)曾在格萊美,、溫布利競技場和雷丁音樂節(jié)上進(jìn)行過演出,,但他們從未經(jīng)歷過3500萬觀眾同時(shí)在Roblox中觀看他們的虛擬音樂會。在當(dāng)下媒體和科技行業(yè)試圖尋找他們自己的元宇宙時(shí),,Roblox的數(shù)字世界為他們提供了一個(gè)窗口,讓人們了解音樂會體驗(yàn)在互聯(lián)網(wǎng)的下一個(gè)階段將會發(fā)展成何等形態(tài),。
虛擬音樂會其實(shí)并不是新鮮的代名詞,,其最大的障礙是如何在數(shù)字世界中實(shí)現(xiàn)現(xiàn)場演出的氛圍。盡管如此,,對于21?Pilots’來說,,他們激情的表演已經(jīng)超越了虛擬空間的束縛。為了創(chuàng)造出更真實(shí)的虛擬人物動(dòng)作表現(xiàn)來烘托現(xiàn)場氣氛Actor Capture和GSU的CMII工作室找到了Xsens,,并將其基于慣性的動(dòng)作捕捉技術(shù)帶入本次音樂會體驗(yàn)中,。
Actor Capture的技術(shù)總監(jiān)詹姆斯·馬丁為我們講述了這個(gè)項(xiàng)目是如何產(chǎn)生的,,他指出Xsens的動(dòng)作捕捉技術(shù)在捕捉21?Pilots’演唱會的現(xiàn)場表現(xiàn)了方面至關(guān)重要。
“對于鼓手來說,,尤其是對于音樂表演來說,,利用慣性動(dòng)捕是至關(guān)重要的因?yàn)楣氖值膭?dòng)作非常快而且經(jīng)常會由于鼓架遮擋動(dòng)作從而不能進(jìn)行光學(xué)動(dòng)捕,,此外,,手部動(dòng)捕解決方案也可以讓鍵盤手的動(dòng)作更加真實(shí)。這非常重要,。Xsens的所有技術(shù)對本次演出都非常有幫助,。”
Xsens的作用
Lil Nas X的Roblox?演出為Symbol Zero帶來了難以置信的成功,,但隨著他們下一場虛擬音樂會的籌辦 ,,他們希望將項(xiàng)目推向下一個(gè)階段,并以前所未有的表現(xiàn)力吸引線上觀眾,。通過對Xsens過去項(xiàng)目(Suicide Squad 2和Cardi B’s ‘Cardi Tries’)的研究,,他們對Xsens有了更深入的了解,詹姆斯很清楚的認(rèn)識到Xsens的技術(shù)是解決21 Pilots’虛擬演唱會可能帶來挑戰(zhàn)的最佳方式,。
“我們知道這部作品會有超過15分鐘的動(dòng)畫,。因此我們對面部動(dòng)作捕捉和手部動(dòng)作捕捉非常感興趣,因?yàn)檫@些動(dòng)作會涉及到樂隊(duì)使用的樂器,。他們(Symbol Zero)不僅僅尋找精通Xsens工作流程的人,,還在尋找能夠利用像Manus手套這樣的產(chǎn)品的人,Manus手套現(xiàn)在可以攜帶時(shí)間碼,,這對手指動(dòng)作的清晰度非常重要,。當(dāng)然,他們還需要一個(gè)足夠強(qiáng)大的面部捕捉解決方案,,以獲得虛擬角色所有面部表情的表現(xiàn),。”
捕捉表演中的高清晰度動(dòng)作是Roblox和21 Pilots面臨的難題,。樂隊(duì)希望將音樂會的氣氛傳達(dá)到虛擬空間中,,因此選擇合適的工具和方法變得十分重要。樂隊(duì)表演時(shí)穿著MVN?Link動(dòng)捕服,,而Xsens Gloves by Manus手套也能夠確保準(zhǔn)確的捕捉手部動(dòng)作,。除此之外,詹姆斯還利用iPhone的ARkit追蹤了樂隊(duì)隊(duì)員的面部動(dòng)作,。
關(guān)于元宇宙
在構(gòu)成元宇宙的虛擬空間中,,用戶希望尋求個(gè)性,使自己脫穎而出,。就目前而言,,這些都是以數(shù)字服裝或NFT藝術(shù)的形式在元宇宙中展開的,,但隨著用戶群的增長,他們對在虛擬空間中模擬現(xiàn)實(shí)的需求也在增長,。此次在Roblox上的音樂會就成為了Xsens在元宇宙中發(fā)揮自身優(yōu)勢的地方,。對演奏者來說,鼓或吉他的演奏方式必須與樂隊(duì)的演奏方式相匹配,。毫無疑問有了動(dòng)作捕捉技術(shù)元宇宙中的虛擬化身將會更加真實(shí),,動(dòng)作也更加獨(dú)特且多樣化。
錄制表演
21 Pilots’一直尋求與他們忠實(shí)的粉絲建立聯(lián)系,。正如樂隊(duì)的創(chuàng)意總監(jiān)馬克·埃什曼所說“他們想要向樂隊(duì)的粉絲,、全新的技術(shù)和歷史致敬,以確保這種體驗(yàn)符合人們對一場演出的期望,?!?/p>
如今的問題不再是能否為虛擬空間做出動(dòng)捕表演,更重要的是,,虛擬音樂會能否捕捉到真人表演帶來的情感與氛圍,?使用Xsens基于慣性的解決方案,詹姆斯能夠輕松解決這些問題,,這使得21 Pilots’能夠在世界各地的任何舞臺上進(jìn)行表演,。
元宇宙的成功將取決于使用的難易程度。這項(xiàng)技術(shù)允許詹姆斯和演員捕捉記錄表演的基本,、復(fù)雜細(xì)節(jié),。
吸引觀眾
在Roblox的世界里舉辦一場音樂會,讓21 Pilots’有了新的機(jī)會,,以一種只有在虛擬空間才有可能的方式與觀眾互動(dòng),。對于Symbol Zero來說,有互動(dòng)的觀眾們?nèi)匀皇潜硌葑钪匾囊徊糠帧?/p>
“想象一下在演唱會開始你只是一個(gè)觀看演出的普通的觀眾,,通過Roblox提供的交互性你現(xiàn)在可以與現(xiàn)場的樂隊(duì)進(jìn)行互動(dòng),。在他們的第一首曲目中,,其中一個(gè)選項(xiàng)是,,觀眾們會沿著歌曲的副歌部分上下移動(dòng),如果泰勒唱到“向上”時(shí)觀眾們沒有跳起來,,那么他們就會掉到地板上,。正是這些細(xì)小的交互性讓游戲玩家對表演有了更多的互動(dòng)體驗(yàn)?!闭材匪拐f道,。
有了慣性動(dòng)作捕捉技術(shù),用戶將踏入元宇宙的虛擬世界,,獲得更好的現(xiàn)實(shí)體驗(yàn),,而也這不僅僅是對現(xiàn)實(shí)的一比一刻畫,。Roblox在21 Pilots’音樂會中加入了任務(wù)、獎(jiǎng)勵(lì)和虛擬商品等元素,,這不僅僅是為了宣傳和推廣演唱會,,同時(shí)也是為了讓觀眾以不同于面對面體驗(yàn)的方式參與到虛擬演唱會之中。