xR制作開啟展演技術(shù)新時(shí)代
說(shuō)到VR（Virtual Reality/虛擬現(xiàn)實(shí)），很多人并不陌生，它因虛擬現(xiàn)實(shí)游戲而廣為人知。但其實(shí)除了VR，在這個(gè)新技術(shù)層出不窮的時(shí)代，其實(shí)還誕生了AR（Augmented Reality/增強(qiáng)現(xiàn)實(shí)）和MR（Mediated Reality/混合實(shí)境）技術(shù)。而近年新興的xR，則是指所有由計(jì)算機(jī)技術(shù)和穿戴設(shè)備配合生成的虛實(shí)結(jié)合的環(huán)境，也是當(dāng)今舞臺(tái)上藝術(shù)呈現(xiàn)方式的新標(biāo)準(zhǔn)。 xR（全稱Extended Reality）擴(kuò)展現(xiàn)實(shí)，這里的“x”既代表了“extended（擴(kuò)展，又作Xtended）”，又代表了未知變量 (x) 。[1] VR、AR、MR三者視覺交互技術(shù)相融合，幫助實(shí)現(xiàn)了虛擬世界與現(xiàn)實(shí)世界之間無(wú)縫轉(zhuǎn)換的沉浸感體驗(yàn)。[1] 《環(huán)球科學(xué)》2020年11月12日刊
0
1
喝了這杯《mojito》
2021年央視春晚中，周杰倫為全國(guó)觀眾帶來(lái)單曲《mojito》，一起帶來(lái)的，還有舞臺(tái)上濃濃哈瓦那風(fēng)情、神奇變換的奇異世界。
低肌理、大色塊的拼接和二維手繪動(dòng)畫的加持，讓整體背景風(fēng)格看上去明快、鮮艷、活潑，同時(shí)也為畫面的實(shí)時(shí)渲染打好了“底色”。xR舞臺(tái)通過(guò)使用相關(guān)技術(shù)讓表演者置身于虛實(shí)結(jié)合的場(chǎng)景中，在三維空間內(nèi)，既有前景，也有后景，在第三視角看來(lái)，表演者可以在這個(gè)三維空間內(nèi)自由自在地穿梭、游走。
由于疫情原因，周杰倫無(wú)法現(xiàn)身春晚現(xiàn)場(chǎng)，所以其實(shí)該節(jié)目使用到的xR制作技術(shù)，主要依仗了電影工業(yè)流程中常用的Motion Control System（高科技交互式攝影控制系統(tǒng)*），可將拍攝中機(jī)器人攝影師的運(yùn)動(dòng)軌跡從北京拍完后發(fā)送給臺(tái)灣制作團(tuán)隊(duì)進(jìn)行表演拍攝，最后在北京實(shí)現(xiàn)所有素材的合成和美化。
*簡(jiǎn)稱MoCo系統(tǒng)，可以同時(shí)同步控制攝影機(jī)、拍攝物、燈光等運(yùn)動(dòng)動(dòng)線及拍攝底片速度的交互式攝影控制系統(tǒng)（星球大戰(zhàn)特效總監(jiān)John Dykstra對(duì)MoCo所定義）。 ——百度百科
臺(tái)北GETOP 特效攝影棚排演
Credit: WORLDSHOW傳媒
xR制作技術(shù)讓許多創(chuàng)意想法與藝術(shù)靈感能夠充分在舞臺(tái)上實(shí)時(shí)呈現(xiàn)出來(lái)，舞臺(tái)策劃在藝術(shù)層面變得更加肆意和大膽。
0
2
技術(shù)淺析
在實(shí)際應(yīng)用領(lǐng)域，xR指的是由LED屏幕、攝像機(jī)跟蹤系統(tǒng)和強(qiáng)大的圖形引擎組成的工作流程。
《mojito》這個(gè)節(jié)目是由Motion Control技術(shù)為主導(dǎo)、結(jié)合xR擴(kuò)展現(xiàn)實(shí)及實(shí)時(shí)渲染技術(shù)而實(shí)現(xiàn)的，極具挑戰(zhàn)性，但藝術(shù)成果令人耳目一新。綠幕摳像+影視后期的方式雖可以呈現(xiàn)表演者異地表演，但需要提前錄制、后期摳像合成，并使用如C4D/MAYA/3DMAX等軟件進(jìn)行渲染。不過(guò)，如果需要攝像機(jī)搖臂按照舞臺(tái)設(shè)計(jì)運(yùn)動(dòng)起來(lái)，并得到實(shí)時(shí)的運(yùn)動(dòng)反饋，則需用到近幾年影視制作行業(yè)大熱的虛擬制作技術(shù)（Virtual Production）。
Credit: Mels Studios et Postproduction
虛擬制作中，LED屏幕可實(shí)現(xiàn)大部分背景顯示，通過(guò)合理的顯示設(shè)備分配，技術(shù)人員能在有限的空間內(nèi)搭建出沉浸式場(chǎng)景。通過(guò)虛擬制作技術(shù)呈現(xiàn)出的作品由于使用了運(yùn)動(dòng)捕捉技術(shù)進(jìn)行攝像機(jī)追蹤，整套光學(xué)運(yùn)動(dòng)捕捉系統(tǒng)可以通過(guò)實(shí)時(shí)攝像機(jī)的空間定位，在電腦中呈現(xiàn)出相應(yīng)運(yùn)動(dòng)軌跡，虛擬內(nèi)容才能夠根據(jù)攝像機(jī)的位置而時(shí)刻變化，攝像機(jī)位置所拍攝的實(shí)體（真人或?qū)嵨铮┡c三維背景畫面也才能呈現(xiàn)出正確的空間位置關(guān)系。
Credit: hecoos
Credit: hecoos
在虛擬制作中，由于需要實(shí)現(xiàn)實(shí)時(shí)渲染，渲染引擎也需更換為更加強(qiáng)大的渲染引擎（如NOTCH、UE4等），才有可能最終實(shí)現(xiàn)有限時(shí)間內(nèi)大量的視頻畫面渲染，達(dá)到實(shí)時(shí)渲染的目的，適應(yīng)時(shí)刻變化的攝像機(jī)位置。
Credit: Tigrelab
簡(jiǎn)單來(lái)說(shuō)，使用到虛擬制作技術(shù)的xR制作流程需要使用到的主要系統(tǒng)分別為攝像機(jī)追蹤系統(tǒng)（光學(xué)運(yùn)動(dòng)捕捉系統(tǒng)）、實(shí)時(shí)渲染系統(tǒng)（實(shí)時(shí)渲染引擎）和顯示系統(tǒng)（LED/投影機(jī)）。在整個(gè)工作流中，媒體服務(wù)器負(fù)責(zé)將數(shù)據(jù)信息進(jìn)行收發(fā)、解包、修整、對(duì)齊，該過(guò)程可以讓攝像機(jī)在正確的時(shí)間點(diǎn)拍到正確的畫面，呈現(xiàn)出觀眾看到的成果。[3]
[3] bilibili.com @hecoos全域創(chuàng)作
0
3
多樣應(yīng)用
同樣使用了xR制作技術(shù)的還有美國(guó)熱門劇集《黑袍糾察隊(duì)》的幕后揭秘節(jié)目《走進(jìn)黑袍糾察隊(duì)（Inside The Boys）》（搭建了xR演播廳）、Kate Perry在美國(guó)偶像中演唱《Daisies》的精彩表演、《Jax Jones x Miller Genuine Draft》線上音樂會(huì)，以及西班牙商業(yè)廣告《Pienso, luego actúo》[4] 等等。
[4] 信息來(lái)源：disguise中國(guó)
《走進(jìn)黑袍糾察隊(duì)（Inside The Boys）》xR演播廳
Credit: Tigrelab
xR制作過(guò)程中，創(chuàng)意人員和技術(shù)人員仍會(huì)在極盡可能發(fā)揮創(chuàng)意的同時(shí)，觸及xR和虛擬制作技術(shù)的邊界。但是我們相信，在科技不斷發(fā)展的今天，業(yè)界人員的不斷挖掘探索將會(huì)推動(dòng)xR制作展演技術(shù)實(shí)現(xiàn)更多突破，為大家?guī)?lái)更豐富、更豐滿、與藝術(shù)結(jié)合更加緊密的極致視覺體驗(yàn)。
推荐
-
-
QQ空间
-
新浪微博
-
人人网
-
豆瓣
