“數(shù)字人”虛實共生、“跨時空”視聽多維、傳統(tǒng)文化“數(shù)字永生”——
數(shù)字媒體如何豐富人類視聽體驗?
超寫實數(shù)字人小諍成為全球首位數(shù)字航天員,在航天新聞報道、知識科普等領(lǐng)域和年輕人群建立了溝通;“故宮最大裸眼3D文物”實現(xiàn)了22倍高清放大文物,讓觀眾在千里之外也可體驗到實物展也難以感受的豐富細(xì)節(jié);“光影煥新智能修復(fù)引擎”技術(shù)讓張國榮“跨時空”舉行了高清演唱會……數(shù)字媒體領(lǐng)域正處在快速發(fā)展和變革之中。
未來,隨著技術(shù)的不斷創(chuàng)新和發(fā)展,數(shù)字媒體領(lǐng)域?qū)尸F(xiàn)出更為多元、豐富、創(chuàng)新的發(fā)展態(tài)勢,給人類帶來更加豐富的視聽體驗和商業(yè)機會。騰訊研究院發(fā)布報告認(rèn)為,2022年,文化科技的應(yīng)用整體呈現(xiàn)虛實共生、視聽多維、跨界應(yīng)用等新的趨勢。
亮點1
AI作畫領(lǐng)域被引爆
生成式AI技術(shù)為AIGC(人工智能生成內(nèi)容)注入新動能,變革了大眾內(nèi)容生產(chǎn)與交互范式。
AIGC即“人工智能生成內(nèi)容”(AI-generatedContent),代表著AI技術(shù)向創(chuàng)造力的躍遷。2022年無疑是生成式AI的“高光時刻”:例如,AI生成內(nèi)容的質(zhì)量、類型的豐富性得到了極大提升,并且進一步提升了AIGC內(nèi)容的多樣性,文字轉(zhuǎn)圖像、文字轉(zhuǎn)視頻、靜態(tài)圖片轉(zhuǎn)3D動態(tài)場景、3D內(nèi)容創(chuàng)建等應(yīng)用類型不斷涌現(xiàn)。例如,OpenAI的DALL-E2、StableDiffusion、MidJourney等可以生成圖片的AIGC模型引爆了AI作畫領(lǐng)域,讓AIGC加速進入公眾視野,各主流互聯(lián)網(wǎng)公司也紛紛推出自己的圖片、視頻生成模型。
同時,AI大模型的發(fā)展能夠給大眾內(nèi)容生產(chǎn)“提質(zhì)增效”,AIGC應(yīng)用為文化藝術(shù)創(chuàng)作提供了創(chuàng)意輔助工具,甚至降低了文化藝術(shù)創(chuàng)作門檻,或?qū)⒋偈刮幕a(chǎn)與消費進一步“大眾化”。游戲設(shè)計師杰森·艾倫使用Midjourney模型生成的《太空歌劇院》就成為首個獲獎的AI生成藝術(shù)。
亮點2
綜藝、晚會廣泛應(yīng)用虛擬制作技術(shù)
2019年上線的美劇《曼達洛人》在拍攝過程中采用了突破性的虛擬制作方法,為內(nèi)容制作領(lǐng)域帶來了革命性的影響。虛擬制作主要借助LED和游戲引擎打造虛擬場景,并與拍攝現(xiàn)場的真實人物實時融合。
2022年,隨著虛擬制作硬件成本下降、技術(shù)成熟,虛擬制作在國內(nèi)的應(yīng)用提速,尤其在綜藝、晚會等領(lǐng)域?qū)崿F(xiàn)了廣泛的應(yīng)用。例如,2022年,河南衛(wèi)視“奇妙游”系列節(jié)目通過“5G+XR”技術(shù)實現(xiàn)舞臺與虛擬場景特效的結(jié)合,將河南歷史文化中最耀眼的元素與精彩的歌舞、戲曲、武術(shù)等藝術(shù)表演結(jié)合起來。
另一方面,虛擬制作技術(shù)增強了實時交互體驗,塑造了“虛擬化在場+實時互動”的內(nèi)容直播效果。2022年騰訊冬奧會節(jié)目《贏戰(zhàn)冰雪》邀請了數(shù)字人“星瞳”在演播室參與賽事解說,借助遠(yuǎn)程動捕技術(shù)和自研的“交互連線系統(tǒng)”,使“星瞳”與真人嘉賓同臺互動長達8小時,豐富了傳統(tǒng)的演播室內(nèi)容效果。
亮點3
數(shù)字人社會服務(wù)場景廣泛拓展
伴隨數(shù)字人生產(chǎn)效能的提升,2022年高保真數(shù)字人、超寫實數(shù)字人、AI數(shù)字人在多方向的應(yīng)用進一步成熟,為行業(yè)效率提升、服務(wù)升級提供人性化的工具,引發(fā)了數(shù)字人社會應(yīng)用的新爆發(fā)。
2022年,伴隨數(shù)字人生產(chǎn)效能的提升,社會生活與服務(wù)場景下的“數(shù)字人含量”實現(xiàn)爆發(fā)式增長。
一方面,高保真數(shù)字人、超寫實數(shù)字人提升了信息交互的沉浸感,為新聞報道、直播、綜藝等領(lǐng)域提供了創(chuàng)新業(yè)務(wù)形態(tài)、吸引年輕人的突破口。例如新華社聯(lián)手NExTStudios打造的全球首位數(shù)字航天員小諍,作為超寫實數(shù)字人實現(xiàn)了逼真、細(xì)膩的外形塑造,在航天新聞報道、知識科普等領(lǐng)域和年輕人群建立溝通,成為數(shù)字人助力媒體融合的典型案例。
另一方面,AI驅(qū)動的數(shù)字人能夠在各類場景提供接近真人的服務(wù),成為傳媒、文旅、金融等行業(yè)數(shù)字化轉(zhuǎn)型的“加速器”。2022年,數(shù)字人整合語音交互、自然語言理解、圖像識別等AI能力,成為“數(shù)字員工”,進入傳媒、文旅、金融、電子商務(wù)等領(lǐng)域,承擔(dān)資訊播報、文旅導(dǎo)覽、坐席客服等多元角色。例如,央視頻AI手語主播“聆語”參與國際冰雪賽事,首次實現(xiàn)了AI手語解說賽事直播,可以用手語表達超過160萬個詞匯和短語。在企業(yè)服務(wù)領(lǐng)域,結(jié)合行業(yè)知識圖譜,數(shù)字人能夠通過不斷的自學(xué)習(xí)、自適應(yīng)提升服務(wù)能力,助力企業(yè)數(shù)字化轉(zhuǎn)型力,越來越多的“數(shù)字員工”開始走進千行百業(yè)。
亮點4
3D數(shù)字建模助力傳統(tǒng)文化“數(shù)字永生”
通過3D數(shù)字建模對文化遺產(chǎn)進行數(shù)字化生成,真實再現(xiàn)或者還原已經(jīng)消失在歷史長河中的遺跡,這種文化數(shù)字化的路徑在2022年步入應(yīng)用爆發(fā)期。文化遺產(chǎn)的3D還原走向更加精細(xì)、逼真,具有沉浸感,開辟了傳統(tǒng)文化“數(shù)字永生”的新路徑,也進一步拉近大眾與文化遺產(chǎn)之間的距離。
故宮和騰訊聯(lián)合主辦的沉浸式數(shù)字體驗展,向大眾展示了“故宮最大裸眼3D文物”,讓文物實現(xiàn)22倍高清放大,使觀眾體驗到實物展也難以感受的豐富細(xì)節(jié),同時打破物理空間限制,將故宮文物展覽“搬運”到距離故宮博物院兩千余公里外的廣東深圳,以數(shù)字技術(shù)助力文化遺產(chǎn)煥發(fā)新的活力。
亮點5
超高清視頻實現(xiàn)“經(jīng)典重生”
2022年,演唱會在“云模式”下重新構(gòu)建了內(nèi)容的供給與分發(fā)方式,探索出相對成熟的市場模式。其中,“超高清視頻技術(shù)+社交推薦技術(shù)”的結(jié)合,還原了線下演出的沉浸感、實時性、社交性三大優(yōu)勢,也引發(fā)了演出市場的現(xiàn)象級熱點。
一方面,超高清視頻技術(shù)的成熟,保障了線上演唱會的高質(zhì)量內(nèi)容供給,為用戶提供了接近現(xiàn)場般的觀看體驗。同時,智能超高清視頻修復(fù)技術(shù)進一步豐富了超高清內(nèi)容的供給。在超高清內(nèi)容生產(chǎn)端,長期存在著超高清內(nèi)容制作、經(jīng)典老片及視頻轉(zhuǎn)高清的成本高、效率低等痛點,通過AI視頻修復(fù)技術(shù),能夠使大量畫質(zhì)欠佳的經(jīng)典文化作品“經(jīng)典重生”。
例如,2022年微信視頻號聯(lián)合騰訊多媒體實驗室、TMElive推出的張國榮《熱·情》演唱會,采用多媒體實驗室研發(fā)的“光影煥新智能修復(fù)引擎”,利用該引擎的智能分析、畫質(zhì)修復(fù)、畫質(zhì)增強、智能編碼四大模塊,修復(fù)了因時間跨度大帶來的劃痕、噪點、失真、色彩等問題,使演唱會內(nèi)容的分辨率提升了6倍。
另一方面,直播技術(shù)與社交推薦技術(shù)的結(jié)合,提升了演唱會的線上分發(fā)效率,進一步還原線下演出的實時性、社交性等優(yōu)勢。直播能通過實時的表演賦予受眾“參與感”和“共享感”。
亮點6
游戲引擎成長為“新型工業(yè)軟件”
2022年,游戲產(chǎn)業(yè)在硬件和軟件突破的加持下,向?qū)崿F(xiàn)更大規(guī)模、更流暢、更逼真的實時3D體驗進發(fā),也推動游戲引擎實現(xiàn)了更廣泛的跨界應(yīng)用。
一方面,游戲引擎能支持文化創(chuàng)意活動,豐富沉浸式體驗,并有望打造文化領(lǐng)域通用、開放的技術(shù)能力。例如,2022年北京冬奧會開幕式的表演創(chuàng)意先在游戲引擎中進行模擬呈現(xiàn)、預(yù)覽調(diào)整,然后才落地真實世界,有效提升了內(nèi)容制作、表演協(xié)同的效率。
文保場景中,敦煌研究院聯(lián)合騰訊推出“數(shù)字敦煌”項目,通過數(shù)字照掃、游戲引擎、云游戲等游戲技術(shù),毫米級高精度復(fù)現(xiàn)了敦煌藏經(jīng)洞及其百年前室藏6萬余卷珍貴文物的盛況,生動演繹藏經(jīng)洞及文物背后的千年文化故事。北京文物局發(fā)起的“數(shù)字中軸”項目,通過高清數(shù)字照掃及多種游戲技術(shù)的結(jié)合,還原了北京中軸線文化遺產(chǎn)的風(fēng)貌。“數(shù)字中軸·小宇宙”產(chǎn)品將于2024年6月上線,打造全新的沉浸式觀展體驗,讓大眾足不出戶就能體驗北京中軸線背后豐富的歷史文化。
2023年,由國家文物局指導(dǎo)、敦煌研究院和騰訊聯(lián)合打造的“數(shù)字藏經(jīng)洞”,運用游戲技術(shù)首次毫米級高精度數(shù)字化還原莫高窟藏經(jīng)洞及其文物、壁畫細(xì)節(jié),打造風(fēng)格化沉浸式深度互動體驗,讓用戶一鍵“穿越”到晚唐、北宋、清末等歷史時期的敦煌,親身“參與”藏經(jīng)洞從洞窟開鑿、室藏萬卷、重現(xiàn)于世、文物流散到再次聚首的整個歷程。(記者陳斯)
(責(zé)任編輯:張云文)