《千年之約·入畫屏》數(shù)字光影展：以AI為徑，激活傳統(tǒng)文化

1882年，張園出現(xiàn)上海第一盞電燈，讓上海成為世界上最早使用電能照明的三大城市之一。140多年后，首屆上海國(guó)際光影節(jié)于近期拉開(kāi)帷幕，建筑投影秀、光影秀、光影藝術(shù)裝置展、燈光音樂(lè)會(huì)等超百場(chǎng)活動(dòng)，讓上海的夜晚更加流光溢彩。

光影節(jié)期間，“靜安光影奇妙夜”系列活動(dòng)——《千年之約·入畫屏》數(shù)字光影展，以其獨(dú)樹(shù)一幟的“AI換臉入畫”體驗(yàn)，吸引了眾多觀眾前來(lái)探索。來(lái)自阿根廷的游客吳飛得連連稱贊：“能把AI技術(shù)、中國(guó)傳統(tǒng)文化，以及光影這些不同的元素結(jié)合在一起，我覺(jué)得是一個(gè)非常棒的體驗(yàn)。”

《千年之約·入畫屏》由上海廣播電視臺(tái)商業(yè)創(chuàng)新中心攜手上海圖書館歷經(jīng)半年打造，深度挖掘宋朝生活風(fēng)貌與民俗特色，并依托SMG生成式人工智能媒體融合創(chuàng)新工作室的尖端技術(shù)，以超高清和AI技術(shù)還原宋畫場(chǎng)景。

“融合現(xiàn)代科技與宋式文化，希望這一沉浸式展覽能以‘場(chǎng)景化’的創(chuàng)新方式，讓典籍中的傳統(tǒng)文化煥發(fā)出新的生命力?！鄙虾V播電視臺(tái)商業(yè)創(chuàng)新中心總經(jīng)理潘偉說(shuō)。

作為全球首個(gè)將實(shí)時(shí)互動(dòng)視頻生成技術(shù)應(yīng)用于線下展覽的案例，《千年之約·入畫屏》實(shí)現(xiàn)了AI即時(shí)互動(dòng)的突破。

據(jù)介紹，由SMG人工智能專家顧問(wèn)、上海交通大學(xué)教授倪冰冰領(lǐng)銜的技術(shù)團(tuán)隊(duì)，采用AI面部特征編輯、生成與驅(qū)動(dòng)技術(shù)，通過(guò)高精度攝像頭捕捉觀眾靜態(tài)面部特征，并采用人臉編輯和生成技術(shù)，將這些特征融入古畫中隨機(jī)選取的人物形象之中，最后借助表情驅(qū)動(dòng)技術(shù)，模擬出栩栩如生的面部動(dòng)作，使得科技與藝術(shù)在光影交錯(cuò)間實(shí)現(xiàn)了完美的融合。

“千年之約”項(xiàng)目技術(shù)負(fù)責(zé)人、交大文創(chuàng)學(xué)院元宇宙創(chuàng)新中心首席科學(xué)家陳炫宏博士告訴記者，該算法模型是目前業(yè)界最為知名的換臉?biāo)惴ㄖ?，基于simswap++/simswap技術(shù)，以其卓越的實(shí)時(shí)性、保真效果出眾以及人臉身份一致性高度穩(wěn)定為顯著特點(diǎn)，高度契合消費(fèi)級(jí)市場(chǎng)對(duì)于高效時(shí)效性的迫切需求，這也是用戶能在短短幾十秒甚至十幾秒實(shí)現(xiàn)入畫穿越的核心技術(shù)保障?！拔磥?lái)，系統(tǒng)還將實(shí)現(xiàn)多模態(tài)的用戶輸入交互，以聲光電、屏顯等多模態(tài)的輸出方式，為用戶提供更高度的沉浸式中華文化體驗(yàn)?！?/p>

除了對(duì)前沿技術(shù)的革新展示，《千年之約·入畫屏》還有致敬宋朝文化的藝術(shù)實(shí)踐，即采用4K超高清視頻技術(shù)，結(jié)合數(shù)字藝術(shù)家的精妙筆觸，對(duì)宋徽宗《聽(tīng)琴圖》等傳世名畫進(jìn)行深度二次創(chuàng)作。

在這一過(guò)程中，創(chuàng)作團(tuán)隊(duì)首先從碑帖、宋畫中提煉出背景元素，按比例復(fù)原宋代妝容、服飾及民俗場(chǎng)景，并通過(guò)特效演員的情景實(shí)拍和數(shù)字圖像的精準(zhǔn)擬合，借助超高清4K分辨率，將古畫中記錄的一千多年前的真實(shí)場(chǎng)景栩栩如生地展現(xiàn)在觀眾面前。

值得一提的是，AI換臉技術(shù)的巧妙運(yùn)用，讓每位觀眾都能成為畫中人，不少觀眾更身穿應(yīng)季漢服前來(lái)，體驗(yàn)“一秒魂穿回宋朝”。

傳統(tǒng)文化推廣者徐悅爾與20多位外國(guó)友人一起參觀了展覽。“amazing”“beautiful”……外國(guó)友人體驗(yàn)了穿漢服、看國(guó)風(fēng)光影展后，紛紛表示被中國(guó)文化和文字吸引。

在徐悅爾看來(lái)，“千年之約”促成了古今中外在這里的相交和融合，讓現(xiàn)代人用視聽(tīng)手段“遇見(jiàn)”宋代，也讓不同國(guó)家不同民族不同文化的小伙伴，都能被宋式美學(xué)深深震撼和感動(dòng)，與那個(gè)久遠(yuǎn)的年代產(chǎn)生獨(dú)屬于自己的連接點(diǎn)，構(gòu)建起個(gè)人與傳統(tǒng)文化之間獨(dú)特的情感紐帶。

作為聯(lián)合出品方，上海圖書館也為《千年之約·入畫屏》提供了豐富的文化支持與資料保障。由館長(zhǎng)陳超領(lǐng)銜，上圖團(tuán)隊(duì)深入挖掘宋朝文人雅士的日常生活與民俗特色，通過(guò)引入現(xiàn)場(chǎng)語(yǔ)音導(dǎo)覽系統(tǒng)、復(fù)原宋朝韻味的香氛設(shè)計(jì)，以及體驗(yàn)空間的精心布置，全方位調(diào)動(dòng)觀眾的感官體驗(yàn)，使展覽成為一場(chǎng)可觀、可感、可觸的文化盛宴。

“《千年之約·入畫屏》展覽既是SMG從為播出服務(wù)向?yàn)閭鞑シ?wù)的重要實(shí)踐，也是SMG在媒體數(shù)字化轉(zhuǎn)型道路上的一次大膽嘗試與創(chuàng)新展示，充分發(fā)揮了媒體在城市美好建設(shè)和流量創(chuàng)造中的獨(dú)特價(jià)值?！迸藗ハＭ?，未來(lái)超高清與AI技術(shù)能應(yīng)用于更多文化場(chǎng)景，搭建起連接過(guò)去與未來(lái)、藝術(shù)與科技的橋梁，為市民游客提供更多沉浸式的文化體驗(yàn)。