影/突破傳統!靠 NTT 最新影像技術 讓初音未來與真人「同台演出」歌舞伎

影/突破傳統!靠 NTT 最新影像技術 讓初音未來與真人「同台演出」歌舞伎
▲靠 NTT 最新影像技術,讓初音未來與真人「同台演出」歌舞伎。(圖/翻攝自ファミ通,下同)

吳佳臻/綜合報導

日本最大影音平台 Niconico,於日前(4/28、29)舉辦一年一度超大型活動「NicoNico 超會議」,吸引逾 16 萬人到場支持,直播觀覽人數更超過 612 萬人。其中最受矚目的便是─超歌舞伎,利用最新影像技術,讓虛擬角色與真人「同台演出」。

▲「積思花顔競 -祝春超歌舞伎賑-」。(圖/翻攝自超會議 2018)

根據日媒報導,超歌舞伎是結合真人演員與虛擬角色的新形態歌舞伎,在 2016 年「NicoNico 超會議」初次上演,今年邁入第三個年頭,由知名演員中村獅童與初音未來挑大樑演繹「積思花顔競 -祝春超歌舞伎賑-」,該劇改編自歌舞伎名作「積戀雪關扉」。

▲超歌舞伎 2018 介紹。(影片/取自Niconico,若遭移除請見諒)

這次除了將 3D 初音未來投影在半透明螢幕上,實現同台演出的基本技術外,NTT 還使用了最新分身技術「Kirari!」,以及首次讓初音搭山車(日本祭典的轎子)亮相。

▲首次讓初音搭山車亮相。(圖/翻攝自ファミ通)

過去兩次表演中,初音未來多會在舞台中央的螢幕中登場,但是這次相當特別,是乘著山車從螢幕外走到舞台。更驚人的是,即使山車背對觀眾,也是可以看到初音的背影,並且下車後還能站在舞台上。

實現此場景的關鍵技術在於,安裝了「兩面通過型多層空中像顯示裝置」,透過多個顯示裝置控制光路長度,能夠在正面、背面同時觀看 3 層的空中影像。

▲▼可以看到初音的正、背面。(圖/翻攝自 itmedia)

山車下面的顯示器表現初音形體,而上方的顯示器則是展現背景;而裝置內還設置了半透鏡,藉此反射出自然的初音正、背面,不僅如此連背景的櫻吹雪也都如實呈現,抓不到破綻。

▲「被攝體抽離技術」再進化。(圖/翻攝自ファミ通,下同)

另外過去被用在分身術等場面的「被攝體抽離技術」,今年也再進化。據悉,這回以機器學習方式,讓它學習被攝體和背景數據,因此能夠精確分辨出誰才是主角,並且複製影像、動作,投影在其他地方。

NTT 相關開發人員表示,過去背景多為深色或黑色,就算稍微出錯也不明顯,但是這次的明亮背景是一大挑戰,光靠原先的技術可能無法完美抽離主體,因此靠機器學習來解決。

此外,AR 技術、最新音響處理技術也運用於其中,讓聞名世界的日本傳統藝術,在最新技術的加持下,展現與眾不同的一面,也吸引年輕族群的關注。

▲超歌舞伎 2017 NTT 技術運用。(影片/取自 YouTube,若遭移除請見諒)

留言

延伸閱讀