影/動起來了!新 AI 技術讓畫中角色「奪框而出」

影/動起來了!新 AI 技術讓畫中角色「奪框而出」
▲就連畢卡索畫中的抽象人物,也在 AI 的力量下走出畫框。(圖/翻攝自 Youtube,下同)

陳建鈞/綜合報導

透過深度學習技術,令圖畫、照片中的角色「活起來」也不再是幻想!美國華盛頓大學的研究人員,開發出一項僅僅透過一張圖片,就能為之中角色建立 3D 模組的神奇技術。

這項技術稱作「Photo Wake-Up」,彷彿能為圖片中的角色賦予生命般的神奇力量,令人不禁聯想起《哈利波特》中,那些會動的相片。

不過,Photo Wake-Up 的適用範圍不侷限於相片,根據《Gizmodo》報導,研究人員從網路上下載了 70 張不同的圖片測試該系統,範圍從 NBA 選手史蒂芬.柯瑞、《七龍珠》主角悟空到畢卡索繪畫等無所不包。

▲從照片、動漫角色到抽象畫,Photo Wake-Up 能令各種圖片中的角色「活起來」。(影片/取自 YouTube,若遭移除請見諒)

最厲害的是,從僅僅一張圖片中,我們只能看見人物的一面,但機器學習技術卻能推測出我們看不見的部份,為它建立一個立體的 3D 模組。研究人員利用名為「SMPL」的系統,以及深度學習技術,從圖片中「剪下」人物,並賦予他們立體模型。

外媒《麻省理工科技評論》指出,這項系統的演算法還能偵測觀看者的角度,進而對立體模型進行調整,確保我們看見的角色不會突兀、失真,維持真實感。

另一方面,他們還在使用者介面上增加了一個調整功能,如果 AI 呈現的方式有誤,使用者也能親自動手修正,提高模組準確度。


不過,目前這項技術還有不少缺陷,例如當包含光影、反射等要素時,沒有辦法很好地建立 3D 模組;角色動作也有侷限,好比說盤腿這個姿勢就是 AI 的罩門。

在娛樂、藝術領域,這項技術都擁有非常大的潛力,當這項技術與 AR 結合使用時,能夠建立起前所未有的藝術形式,我們能看見人物從畫裡「奪框而出」,帶來與直接用肉眼觀看時,不一樣的趣味性,讓人們能如字面意思上,從「不同角度」欣賞原先 2D 的平面藝術品。

留言

延伸閱讀