深色戲袍,手搖摺扇……京劇大師梅蘭芳先生向觀眾“走”來

“親愛的觀眾朋友們,距離我上一次登臺已經有60多年了,沒想到在這裡我們又重逢了。”近日,京劇大師梅蘭芳先生在舞臺上驚豔亮相,26歲模樣的“他”身著深色戲袍,手搖摺扇,似真人般緩緩向觀眾“走”來。

深色戲袍,手搖摺扇……京劇大師梅蘭芳先生向觀眾“走”來

科研團隊正在使用高逼真表情光場採集系統採集真實演員毫米級精度的三維資料,實現對演員的高復原度重建,然後透過先進的實時渲染技術,將高逼真數字人呈現給使用者。梅蘭芳大師的”孿生數字人“也是透過這一技術實現的。

這是由北京理工大學等多個單位及團隊共同發起的“虛擬數字人”專案,以梅蘭芳先生為原型,利用資訊科技與圖形學技術將其全身及肢體動作進行全方位數字化、視覺化的復現,打造在外貌、形體、語音、表演等多個方面都接近真實的“梅蘭芳孿生數字人”。

深色戲袍,手搖摺扇……京劇大師梅蘭芳先生向觀眾“走”來

課題組成員對目前已經初步成型的梅蘭芳“孿生數字人”形象進行討論,準備後續進一步完善和改進。

在北京理工大學實驗室內,由36臺相機和156個可控LED燈組成的球形裝置格外引人注目。專案技術負責人、光電學院研究員翁鼕鼕介紹,這是團隊用來捕捉三維表情的光場採集系統,精度可達毫米級。“為了還原大師的一顰一笑,模特需要進入球形採集器,在相機前擺出50至60個極限表情,比如閉眼、皺眉、噘嘴等。”團隊運用光場採集技術採集模特的三維表情資料,透過光學計算構建人物面板紋理,實現對模特面部表情的高度復原重建,未來還將以真人為藍本構建大師的動態表情。

深色戲袍,手搖摺扇……京劇大師梅蘭芳先生向觀眾“走”來

團隊將梅蘭芳“孿生數字人”與老照片進行合成,生成更具立體感、真實感的梅蘭芳形象。

由於無法收集到梅蘭芳先生的真人三維資料來源,團隊從網路及梅家親友處大量收集照片作為參照,並邀請到中央美術學院的師生以歷史照片為依據打造梅蘭芳先生的頭部雕塑,構建其靜態表情模型,隨後又透過數字化雕刻對模型的骨像、面板、毛髮、眼神光等細節進行處理,幾乎做到梅蘭芳表情的“神還原”。

深色戲袍,手搖摺扇……京劇大師梅蘭芳先生向觀眾“走”來

借用VR等方式,梅蘭芳“孿生數字人”也將可以與真實使用者進行實時互動,讓使用者真切感受到這位京劇大師的音容笑貌。

此外,為了讓“孿生數字人”在各方面都接近真實,團隊除了高度還原梅蘭芳先生的面部表情,還將精力傾注在人物動作及服飾細節的打磨上。翁鼕鼕表示:“我們以民國留存布樣為範本模擬服飾材質,透過真實立體剪裁打磨服飾動態細節。此外,為了獲得逼真的動作形態,中央戲劇學院的老師還再現了梅派藝術。”

深色戲袍,手搖摺扇……京劇大師梅蘭芳先生向觀眾“走”來

團隊成員正在對梅蘭芳先生的實體肖像進行三維掃描,藉此方式完成數字化。

“這得感謝科技的進步,期待我們今後的見面會有更多的形式。”大螢幕上的“梅蘭芳孿生數字人”栩栩如生,背後是創作團隊對其外貌表情、動作形態、服飾等細節之處的深耕與鑽研。翁鼕鼕透露,未來“虛擬數字人”技術將不斷進行模型實時化升級,並在文物保護、教育科普、文化娛樂等多個重要行業及領域場景中應用落地。

流程編輯:u010