“數字人”虛實(shí)共生、“跨時(shí)空”視聽(tīng)多維、傳統文化“數字永生”——
數字媒體如何豐富人類(lèi)視聽(tīng)體驗?
超寫(xiě)實(shí)數字人小諍成為全球首位數字航天員,在航天新聞報道、知識科普等領(lǐng)域和年輕人群建立了溝通;“故宮最大裸眼3D文物”實(shí)現了22倍高清放大文物,讓觀(guān)眾在千里之外也可體驗到實(shí)物展也難以感受的豐富細節;“光影煥新智能修復引擎”技術(shù)讓張國榮“跨時(shí)空”舉行了高清演唱會(huì )……數字媒體領(lǐng)域正處在快速發(fā)展和變革之中。
未來(lái),隨著(zhù)技術(shù)的不斷創(chuàng )新和發(fā)展,數字媒體領(lǐng)域將會(huì )呈現出更為多元、豐富、創(chuàng )新的發(fā)展態(tài)勢,給人類(lèi)帶來(lái)更加豐富的視聽(tīng)體驗和商業(yè)機會(huì )。騰訊研究院發(fā)布報告認為,2022年,文化科技的應用整體呈現虛實(shí)共生、視聽(tīng)多維、跨界應用等新的趨勢。
亮點(diǎn)1
AI作畫(huà)領(lǐng)域被引爆
生成式AI技術(shù)為AIGC(人工智能生成內容)注入新動(dòng)能,變革了大眾內容生產(chǎn)與交互范式。
AIGC即“人工智能生成內容”(AI-generatedContent),代表著(zhù)AI技術(shù)向創(chuàng )造力的躍遷。2022年無(wú)疑是生成式AI的“高光時(shí)刻”:例如,AI生成內容的質(zhì)量、類(lèi)型的豐富性得到了極大提升,并且進(jìn)一步提升了AIGC內容的多樣性,文字轉圖像、文字轉視頻、靜態(tài)圖片轉3D動(dòng)態(tài)場(chǎng)景、3D內容創(chuàng )建等應用類(lèi)型不斷涌現。例如,OpenAI的DALL-E2、StableDiffusion、MidJourney等可以生成圖片的AIGC模型引爆了AI作畫(huà)領(lǐng)域,讓AIGC加速進(jìn)入公眾視野,各主流互聯(lián)網(wǎng)公司也紛紛推出自己的圖片、視頻生成模型。
同時(shí),AI大模型的發(fā)展能夠給大眾內容生產(chǎn)“提質(zhì)增效”,AIGC應用為文化藝術(shù)創(chuàng )作提供了創(chuàng )意輔助工具,甚至降低了文化藝術(shù)創(chuàng )作門(mén)檻,或將促使文化生產(chǎn)與消費進(jìn)一步“大眾化”。游戲設計師杰森·艾倫使用Midjourney模型生成的《太空歌劇院》就成為首個(gè)獲獎的AI生成藝術(shù)。
亮點(diǎn)2
綜藝、晚會(huì )廣泛應用虛擬制作技術(shù)
2019年上線(xiàn)的美劇《曼達洛人》在拍攝過(guò)程中采用了突破性的虛擬制作方法,為內容制作領(lǐng)域帶來(lái)了革命性的影響。虛擬制作主要借助LED和游戲引擎打造虛擬場(chǎng)景,并與拍攝現場(chǎng)的真實(shí)人物實(shí)時(shí)融合。
2022年,隨著(zhù)虛擬制作硬件成本下降、技術(shù)成熟,虛擬制作在國內的應用提速,尤其在綜藝、晚會(huì )等領(lǐng)域實(shí)現了廣泛的應用。例如,2022年,河南衛視“奇妙游”系列節目通過(guò)“5G+XR”技術(shù)實(shí)現舞臺與虛擬場(chǎng)景特效的結合,將河南歷史文化中最耀眼的元素與精彩的歌舞、戲曲、武術(shù)等藝術(shù)表演結合起來(lái)。
另一方面,虛擬制作技術(shù)增強了實(shí)時(shí)交互體驗,塑造了“虛擬化在場(chǎng)+實(shí)時(shí)互動(dòng)”的內容直播效果。2022年騰訊冬奧會(huì )節目《贏(yíng)戰冰雪》邀請了數字人“星瞳”在演播室參與賽事解說(shuō),借助遠程動(dòng)捕技術(shù)和自研的“交互連線(xiàn)系統”,使“星瞳”與真人嘉賓同臺互動(dòng)長(cháng)達8小時(shí),豐富了傳統的演播室內容效果。
亮點(diǎn)3
數字人社會(huì )服務(wù)場(chǎng)景廣泛拓展
伴隨數字人生產(chǎn)效能的提升,2022年高保真數字人、超寫(xiě)實(shí)數字人、AI數字人在多方向的應用進(jìn)一步成熟,為行業(yè)效率提升、服務(wù)升級提供人性化的工具,引發(fā)了數字人社會(huì )應用的新爆發(fā)。
2022年,伴隨數字人生產(chǎn)效能的提升,社會(huì )生活與服務(wù)場(chǎng)景下的“數字人含量”實(shí)現爆發(fā)式增長(cháng)。
一方面,高保真數字人、超寫(xiě)實(shí)數字人提升了信息交互的沉浸感,為新聞報道、直播、綜藝等領(lǐng)域提供了創(chuàng )新業(yè)務(wù)形態(tài)、吸引年輕人的突破口。例如新華社聯(lián)手NExTStudios打造的全球首位數字航天員小諍,作為超寫(xiě)實(shí)數字人實(shí)現了逼真、細膩的外形塑造,在航天新聞報道、知識科普等領(lǐng)域和年輕人群建立溝通,成為數字人助力媒體融合的典型案例。
另一方面,AI驅動(dòng)的數字人能夠在各類(lèi)場(chǎng)景提供接近真人的服務(wù),成為傳媒、文旅、金融等行業(yè)數字化轉型的“加速器”。2022年,數字人整合語(yǔ)音交互、自然語(yǔ)言理解、圖像識別等AI能力,成為“數字員工”,進(jìn)入傳媒、文旅、金融、電子商務(wù)等領(lǐng)域,承擔資訊播報、文旅導覽、坐席客服等多元角色。例如,央視頻AI手語(yǔ)主播“聆語(yǔ)”參與國際冰雪賽事,首次實(shí)現了AI手語(yǔ)解說(shuō)賽事直播,可以用手語(yǔ)表達超過(guò)160萬(wàn)個(gè)詞匯和短語(yǔ)。在企業(yè)服務(wù)領(lǐng)域,結合行業(yè)知識圖譜,數字人能夠通過(guò)不斷的自學(xué)習、自適應提升服務(wù)能力,助力企業(yè)數字化轉型力,越來(lái)越多的“數字員工”開(kāi)始走進(jìn)千行百業(yè)。
亮點(diǎn)4
3D數字建模助力傳統文化“數字永生”
通過(guò)3D數字建模對文化遺產(chǎn)進(jìn)行數字化生成,真實(shí)再現或者還原已經(jīng)消失在歷史長(cháng)河中的遺跡,這種文化數字化的路徑在2022年步入應用爆發(fā)期。文化遺產(chǎn)的3D還原走向更加精細、逼真,具有沉浸感,開(kāi)辟了傳統文化“數字永生”的新路徑,也進(jìn)一步拉近大眾與文化遺產(chǎn)之間的距離。
故宮和騰訊聯(lián)合主辦的沉浸式數字體驗展,向大眾展示了“故宮最大裸眼3D文物”,讓文物實(shí)現22倍高清放大,使觀(guān)眾體驗到實(shí)物展也難以感受的豐富細節,同時(shí)打破物理空間限制,將故宮文物展覽“搬運”到距離故宮博物院兩千余公里外的廣東深圳,以數字技術(shù)助力文化遺產(chǎn)煥發(fā)新的活力。
亮點(diǎn)5
超高清視頻實(shí)現“經(jīng)典重生”
2022年,演唱會(huì )在“云模式”下重新構建了內容的供給與分發(fā)方式,探索出相對成熟的市場(chǎng)模式。其中,“超高清視頻技術(shù)+社交推薦技術(shù)”的結合,還原了線(xiàn)下演出的沉浸感、實(shí)時(shí)性、社交性三大優(yōu)勢,也引發(fā)了演出市場(chǎng)的現象級熱點(diǎn)。
一方面,超高清視頻技術(shù)的成熟,保障了線(xiàn)上演唱會(huì )的高質(zhì)量?jì)热莨┙o,為用戶(hù)提供了接近現場(chǎng)般的觀(guān)看體驗。同時(shí),智能超高清視頻修復技術(shù)進(jìn)一步豐富了超高清內容的供給。在超高清內容生產(chǎn)端,長(cháng)期存在著(zhù)超高清內容制作、經(jīng)典老片及視頻轉高清的成本高、效率低等痛點(diǎn),通過(guò)AI視頻修復技術(shù),能夠使大量畫(huà)質(zhì)欠佳的經(jīng)典文化作品“經(jīng)典重生”。
例如,2022年微信視頻號聯(lián)合騰訊多媒體實(shí)驗室、TMElive推出的張國榮《熱·情》演唱會(huì ),采用多媒體實(shí)驗室研發(fā)的“光影煥新智能修復引擎”,利用該引擎的智能分析、畫(huà)質(zhì)修復、畫(huà)質(zhì)增強、智能編碼四大模塊,修復了因時(shí)間跨度大帶來(lái)的劃痕、噪點(diǎn)、失真、色彩等問(wèn)題,使演唱會(huì )內容的分辨率提升了6倍。
另一方面,直播技術(shù)與社交推薦技術(shù)的結合,提升了演唱會(huì )的線(xiàn)上分發(fā)效率,進(jìn)一步還原線(xiàn)下演出的實(shí)時(shí)性、社交性等優(yōu)勢。直播能通過(guò)實(shí)時(shí)的表演賦予受眾“參與感”和“共享感”。
亮點(diǎn)6
游戲引擎成長(cháng)為“新型工業(yè)軟件”
2022年,游戲產(chǎn)業(yè)在硬件和軟件突破的加持下,向實(shí)現更大規模、更流暢、更逼真的實(shí)時(shí)3D體驗進(jìn)發(fā),也推動(dòng)游戲引擎實(shí)現了更廣泛的跨界應用。
一方面,游戲引擎能支持文化創(chuàng )意活動(dòng),豐富沉浸式體驗,并有望打造文化領(lǐng)域通用、開(kāi)放的技術(shù)能力。例如,2022年北京冬奧會(huì )開(kāi)幕式的表演創(chuàng )意先在游戲引擎中進(jìn)行模擬呈現、預覽調整,然后才落地真實(shí)世界,有效提升了內容制作、表演協(xié)同的效率。
文保場(chǎng)景中,敦煌研究院聯(lián)合騰訊推出“數字敦煌”項目,通過(guò)數字照掃、游戲引擎、云游戲等游戲技術(shù),毫米級高精度復現了敦煌藏經(jīng)洞及其百年前室藏6萬(wàn)余卷珍貴文物的盛況,生動(dòng)演繹藏經(jīng)洞及文物背后的千年文化故事。北京文物局發(fā)起的“數字中軸”項目,通過(guò)高清數字照掃及多種游戲技術(shù)的結合,還原了北京中軸線(xiàn)文化遺產(chǎn)的風(fēng)貌。“數字中軸·小宇宙”產(chǎn)品將于2024年6月上線(xiàn),打造全新的沉浸式觀(guān)展體驗,讓大眾足不出戶(hù)就能體驗北京中軸線(xiàn)背后豐富的歷史文化。
2023年,由國家文物局指導、敦煌研究院和騰訊聯(lián)合打造的“數字藏經(jīng)洞”,運用游戲技術(shù)首次毫米級高精度數字化還原莫高窟藏經(jīng)洞及其文物、壁畫(huà)細節,打造風(fēng)格化沉浸式深度互動(dòng)體驗,讓用戶(hù)一鍵“穿越”到晚唐、北宋、清末等歷史時(shí)期的敦煌,親身“參與”藏經(jīng)洞從洞窟開(kāi)鑿、室藏萬(wàn)卷、重現于世、文物流散到再次聚首的整個(gè)歷程。(記者陳斯)
(責任編輯:張云文)