周杰倫和鄧麗君如何同臺競技?
[核心提示] 如何實現(xiàn)周杰倫和鄧麗君同臺合唱?運用好萊塢電影中常見的 3D 虛擬形象建模技術(shù)和名為 Pepper’s Ghost 的光學(xué)現(xiàn)象,可以實現(xiàn)以假亂真的虛擬演出。
編輯注記:9 月 6 日,周杰倫“摩天倫”世界巡演臺北站現(xiàn)場實現(xiàn)了“虛擬鄧麗君”與周杰倫同臺對唱的表演。極客公園根據(jù)知乎的兩位作者的相關(guān)回答以及南方都市報對此的報道整理出這篇文章。
幕后公司和技術(shù)挑戰(zhàn)
實現(xiàn)虛擬鄧麗君形象的幕后公司名叫?Digital Domain,近期熱門科幻大片的特效制作都可以看到它的身影。而其在去年就完成了過世的美國說唱歌手?2Pac 的虛擬演唱。
對知乎上周杰倫演唱會中和鄧麗君的合唱是如何做到的?這個問題得票最多的作者關(guān)雅荻表示虛擬 3D 投影技術(shù)已經(jīng)是獲得廣泛使用的技術(shù),但要虛擬鄧麗君這樣的真人,最大的挑戰(zhàn)在于“在于對人面部形象和肢體的完美還原呈現(xiàn),其中最難的還是面部表情”。然而他由于也是負(fù)責(zé) Digital Domain(北京)相關(guān)事務(wù),并沒有吐露具體的實現(xiàn)技術(shù)。
逼真的虛擬鄧麗君
南都的采訪則為我們帶來還原鄧麗君形象的一些細(xì)節(jié)。
虛擬鄧麗君是由 45 名特技師工作 3 個月的結(jié)果。對這些外國特技師而言,陌生的中文給虛擬人物的嘴形同步和對照帶來挑戰(zhàn)。而對鄧麗君的臉部建模,需要參考相關(guān)的老照片、演出 DVD、不全面的身體數(shù)據(jù)等。由于鄧麗君還是上個世紀(jì)的人物,照片質(zhì)量也會成為障礙。
這些都還只是復(fù)原表面工作。要讓虛擬鄧麗君傳神,特效師們還反復(fù)觀察鄧麗君演唱的細(xì)節(jié),比如演唱時常常露出美麗的牙齒,唱到高音時喉嚨會有顫動等。
制作虛擬人物的頭發(fā)也是一個挑戰(zhàn),尤其是頭發(fā)還要模仿人物的動態(tài)。而為了讓這個上個世紀(jì)的著名歌手貼近現(xiàn)代觀眾,虛擬鄧麗君的妝發(fā)改得更貼近現(xiàn)在流行的風(fēng)潮,但又通過其演出常穿的旗袍來傳達(dá)人物古典韻味。
至于虛擬鄧麗君的聲音,雖然 Digital Domain 作為商業(yè)機密不愿透露,但現(xiàn)在語音合成不算什么新花樣。
對于 Digital Domain 而言,這次虛擬鄧麗君和周杰倫的同臺演出,只是為明年鄧麗君個人虛擬演唱會做鋪墊??梢云诖髂陼懈咏嫒说男Ч?。
虛擬投影的原理
上面的內(nèi)容只解釋了鄧麗君的虛擬形象是如何制作的,還沒有解釋如何將其搬上舞臺。
尤雨溪對這個問題的回答則解釋了讓虛擬鄧麗君登臺演出的投影技術(shù)原理,利用了?佩珀爾幻象(Pepper’s Ghost)?的光學(xué)現(xiàn)象。
概括來說,就是當(dāng)光線在 45 度角的透光平面反射后進入人眼,而反射面的背景相對昏暗的情況下,會形成一種光源和背景疊加的錯覺。如果光源是純黑背景的人像投影,就會產(chǎn)生人站立在背景前的錯覺。也可以是真人站在暗處,然后打強光反射。因為光源一般的情況下最后成像有一種模糊飄渺的感覺,所以這個 trick 在鬼屋中常常用到。
YouTube 上有許多關(guān)于 Pepper’s Ghost 的教學(xué)視頻,自己制作出這種效果并不是什么難事。但具體到舞臺上就有了技術(shù)門檻:
需要高亮度、高色彩還原的投影儀一臺,嚴(yán)格控制的舞臺光源(背景要足夠暗),地面反射毯一塊,以及最關(guān)鍵的特制透光反射膜一塊。這塊反射膜需要完美地拉伸到平整,讓肉眼看不出它的存在。在大舞臺上安裝有相當(dāng)?shù)碾y度,同時這膜的制作方法以及整套設(shè)置是申請了專利的,總的來說還是有一定的技術(shù)壁壘。
虛擬2Pac和Snoop Dogg同臺演出說明圖
虛擬人物和虛擬投影的運用未來
使用Musion Eyeliner投影屏的舞臺,配圖:http://www.endelrivers.com/scarab1a.html
雖然現(xiàn)在這些舞臺上的 3D 投影和真正的全息投影還存在差距,更別提《Star Trek》中全息甲板了,但還是存在廣泛的商業(yè)用途。為虛擬 2Pac 演出布景的?Musion?公司就將基于 Pepper’s Ghost 的舞臺投影技術(shù)運用到許多商業(yè)領(lǐng)域。這種虛擬投影技術(shù)可以為演講提供 3D 幻燈片,實現(xiàn)跨地域同步演出,或者通過虛擬 3D 模型教學(xué)。
使過世的藝人能再次復(fù)活演出,是一件足夠使其粉絲興奮的事。由于畢竟是假人,我們也不必?fù)?dān)心會貶低真人演出的價值。而像《黑鏡》中那樣通過人們留在社交網(wǎng)絡(luò)以及其它數(shù)字資料復(fù)活仿生人的技術(shù),現(xiàn)在還并沒有實現(xiàn),我們也不必過多擔(dān)憂。
新的科技使電影散發(fā)光彩,也許這種 3D 虛擬投影的廣泛運用也會使舞臺表演更加奪目。
文章來源:極客公園
原文鏈接:http://www.geekpark.net/read/view/189619
比較牛,要正真能還原出人來,該多好!那樣就可以把逝去的人用來還原了?。?!