AI藝術(shù)表達(dá) 修復(fù)解鎖經(jīng)典與視聽(tīng)生活 張國(guó)榮《熱·情》演唱會(huì)再現(xiàn)

每年的4月1日，都會(huì)有千萬(wàn)人自發(fā)地去追思張國(guó)榮?；蛑販赜耙暺?，或聽(tīng)經(jīng)典曲目，在哥哥生前傾注的心血中持續(xù)不斷獲得動(dòng)力與力量。

熟悉張國(guó)榮的粉絲，可能都了解哥哥生前最后的一場(chǎng)演唱會(huì)——《熱·情》。這場(chǎng)演唱會(huì)由其親自擔(dān)任藝術(shù)總監(jiān)，從藝術(shù)構(gòu)思到劇情式的曲目編排，承載著他對(duì)華語(yǔ)歌壇的滿(mǎn)腔熱忱。在張國(guó)榮闊別19年后，塵封的《熱·情》演唱會(huì)母帶，在AI技術(shù)的修復(fù)下，與粉絲重逢。

4月1日 ，由騰訊云多媒體實(shí)驗(yàn)室領(lǐng)先算法團(tuán)隊(duì)修復(fù)、騰訊音樂(lè)娛樂(lè)集團(tuán)攜手環(huán)球音樂(lè)旗下廠牌寶麗金，并聯(lián)合騰訊云、微信視頻號(hào)、騰訊視頻等多個(gè)團(tuán)隊(duì)聯(lián)合呈現(xiàn)的“張國(guó)榮2000年《熱·情》演唱會(huì)超清修復(fù)版”全球首播。數(shù)千萬(wàn)粉絲共同見(jiàn)證了AI技術(shù)加持下的這場(chǎng)風(fēng)華絕代的演唱會(huì)。

視頻修復(fù)并不是新鮮的事物，相信大部分讀者之前在社交平臺(tái)中都刷到過(guò)用AI修復(fù)百年前老北京影片的新聞。許多經(jīng)典老片、大熒幕電影都經(jīng)過(guò)AI技術(shù)的修復(fù)，被重新搬上了熒幕。AI技術(shù)修復(fù)視頻影像資料此前大都集中在影視領(lǐng)域，對(duì)于演唱會(huì)這類(lèi)視頻資料的修復(fù)較少見(jiàn)。雖然都是修復(fù)視頻，但演唱會(huì)和影視類(lèi)的視頻修復(fù)還是有著較大的區(qū)別。

視頻修復(fù)中的“長(zhǎng)尾”困境

視頻修復(fù)包含物理修復(fù)和數(shù)字修復(fù)，前者指對(duì)于膠片本身的修復(fù)，包括去除雜質(zhì)、形變、劃痕等流程，后者則主要集中在基于機(jī)器學(xué)習(xí)、深度學(xué)習(xí)這方面的全自動(dòng)修復(fù)，AI技術(shù)的引入，在修復(fù)領(lǐng)域的核心價(jià)值就是盡可能用技術(shù)覆蓋以前堆砌人力的方式，去減少人力與修復(fù)成本。

視頻修復(fù)解決的是老舊影視資料中，畫(huà)面雪花、劃痕等造成視頻素材清晰度、畫(huà)面、色彩等造成的感官損失度感受。影視劇視頻的修復(fù)，相對(duì)演唱會(huì)而言場(chǎng)景比較固定，鏡頭的運(yùn)作以及整個(gè)畫(huà)面比較穩(wěn)定，從頭到尾的藝術(shù)表達(dá)形式、整體的色彩風(fēng)格比較統(tǒng)一。

但演唱會(huì)不一樣，演唱會(huì)里面的燈光與畫(huà)面鏡頭會(huì)有特別多的切換，尤其是在人臉修復(fù)方面，光影效果在現(xiàn)場(chǎng)看是助燃劑，但對(duì)于修復(fù)來(lái)說(shuō)，就是復(fù)雜的“災(zāi)難”，對(duì)于修復(fù)的效果會(huì)造成特別大的影響。

腦極體跟此次《熱·情》演唱會(huì)背后的修復(fù)技術(shù)專(zhuān)家也聊了下，有關(guān)演唱會(huì)修復(fù)背后的一些技術(shù)與故事。

騰訊多媒體實(shí)驗(yàn)室專(zhuān)家研究員夏珍介紹道，現(xiàn)在業(yè)界基本上很難找到基于視頻的人臉修復(fù)，大部分的人臉修復(fù)只是基于圖片或者單張照片，如果要用到視頻上會(huì)遇到更多復(fù)雜的問(wèn)題。比如每一幀中臉的角度不一樣，如果是側(cè)臉或者很小的臉以及很大的臉，各種角度和姿態(tài)的臉都需要在算法處理里面能夠解決這些問(wèn)題。

在演唱會(huì)修復(fù)中，不僅需要面對(duì)人臉本身的修復(fù)問(wèn)題，還疊加了光影的影響。演唱會(huì)不僅有燈光并且顏色多變，打在人臉上后，如何運(yùn)用智能算法，解決這些問(wèn)題，是一項(xiàng)不小的挑戰(zhàn)，并且在這其中，也會(huì)有技術(shù)不能解決的問(wèn)題。

我們知道，在視頻修復(fù)中，劃痕和雪花點(diǎn)的數(shù)量越多，觀賞的體驗(yàn)也就越差。修復(fù)領(lǐng)域，劃痕的修復(fù)成本高昂，并且多數(shù)的劃痕修復(fù)不可逆。并且業(yè)界也缺乏龐大的劃痕公開(kāi)數(shù)據(jù)庫(kù)，這也使得算法難以調(diào)優(yōu)，而搭建數(shù)據(jù)庫(kù)的話(huà)，成本也非常昂貴。

演唱會(huì)這類(lèi)視頻的修復(fù)有著許多長(zhǎng)尾問(wèn)題，除了運(yùn)用純算法模型的方式之外，也需要一些人工參數(shù)的調(diào)整，比較費(fèi)心思。

據(jù)騰訊多媒體實(shí)驗(yàn)室方面介紹，此次演唱會(huì)的修復(fù)工作用到的是實(shí)驗(yàn)室旗下的“超清沉浸感修復(fù)引擎”，這是面向老片修復(fù)場(chǎng)景的技術(shù)解決方案。整個(gè)演唱會(huì)的修復(fù)包括智能分析、畫(huà)質(zhì)修復(fù)、畫(huà)質(zhì)增強(qiáng)、智能編碼四個(gè)步驟。通過(guò)多種AI評(píng)估算法對(duì)視頻內(nèi)容進(jìn)行幀級(jí)別、場(chǎng)景級(jí)別和視頻級(jí)別等多維度的智能分析。利用多種人工智能修復(fù)算法，針對(duì)老片場(chǎng)景下進(jìn)行訓(xùn)練和優(yōu)化，修復(fù)老片中常見(jiàn)的豎線、雪花點(diǎn)、噪聲、壓縮失真、抖動(dòng)等問(wèn)題。

從整體畫(huà)面的主觀感受上來(lái)看，修復(fù)后比以前的畫(huà)面更清晰、更真實(shí)。這種真實(shí)感來(lái)自畫(huà)質(zhì)整體的增強(qiáng)，包括分辨率、色彩、幀率等方面的提升。在張國(guó)榮近景特寫(xiě)中，我們能夠明顯感受到他臉部的輪廓、毛孔、胡子都比老版要清晰很多。用數(shù)據(jù)來(lái)表示效果也十分明顯，之前母帶分辨率只有720×480的分辨率，修復(fù)以后接近4K高清畫(huà)質(zhì)，分辨率提升了6倍，整個(gè)畫(huà)面的流暢度也有所優(yōu)化。

除了騰訊外，不少技術(shù)團(tuán)隊(duì)也在加碼高清視頻修復(fù)技術(shù)，給老舊影視資料帶來(lái)視聽(tīng)效果效率與體驗(yàn)的多維優(yōu)化。

老影像里的新生意

高清視頻修復(fù)經(jīng)典作品，近兩年是許多流媒體開(kāi)始投入去做的事情，如愛(ài)奇藝、優(yōu)酷、西瓜視頻等，這些平臺(tái)都將AI技術(shù)修復(fù)視頻作為新的增長(zhǎng)領(lǐng)域開(kāi)拓。

愛(ài)奇藝自主研發(fā)了 ZoomAI 視頻增強(qiáng)技術(shù)，可以基于多個(gè)算法模型實(shí)現(xiàn)去劃痕污漬、超分辨率、去噪銳化、智能插幀，并支持4K高清的沉浸式觀影效果。

我們熟悉的老片《三毛流浪記》、紅色電影《小兵張嘎》、《東方紅》等140部經(jīng)典影視也被愛(ài)奇藝重新修復(fù)為4K，搬上熒幕。為更好地推動(dòng)經(jīng)典修復(fù)的進(jìn)程，愛(ài)奇藝也將高清視頻修復(fù)作為未來(lái)發(fā)展的重點(diǎn)，啟動(dòng)了多個(gè)數(shù)字修復(fù)工程，聯(lián)合產(chǎn)業(yè)與多個(gè)機(jī)構(gòu)等，持續(xù)延續(xù)高清視頻修復(fù)的公益與商業(yè)價(jià)值。

中影數(shù)字制作基地和中國(guó)科技大學(xué)，共同研發(fā)了一個(gè)基于 AI 的圖像處理系統(tǒng)“中影·神思”。借助“中影·神思”系統(tǒng)，中影基地已經(jīng)成功修復(fù)了《厲害了，我的國(guó)》《馬路天使》《血色浪漫》和《亮劍》等多部影視劇。

中影數(shù)字制作基地修復(fù)中心主任對(duì)外披露，利用AI神思系統(tǒng)，修復(fù)一部電影的時(shí)間可以縮短四分之三，成本可以減少一半。

優(yōu)酷也用阿里云的“畫(huà)質(zhì)重生”技術(shù)來(lái)修復(fù)老片。在優(yōu)酷平臺(tái)，修復(fù)的經(jīng)典影視內(nèi)容播放量增長(zhǎng)迅速，蘇有朋版本的《倚天屠龍記》一經(jīng)修復(fù)，在優(yōu)酷的播放量增長(zhǎng)了450%。其他諸如《尋秦記》《士兵突擊》《亮劍》等經(jīng)典電視劇，經(jīng)過(guò)AI視頻修復(fù)后，都活躍在各大視頻平臺(tái)的榜單前列。

經(jīng)典作品自帶持久的生命力，許多經(jīng)典影視，如金庸武俠劇、老港片、經(jīng)典TVB劇等都有著巨量的翻新需求，這些經(jīng)典影視的粉絲群體龐大，懷舊經(jīng)典是許多人的愛(ài)好，誰(shuí)還沒(méi)個(gè)循環(huán)十來(lái)遍的愛(ài)劇呢？

修復(fù)老片不只是一種情懷，對(duì)于泛娛樂(lè)、流媒體領(lǐng)域來(lái)說(shuō)也能夠產(chǎn)生新的商業(yè)價(jià)值和新的商業(yè)模式。《超高清視頻產(chǎn)業(yè)發(fā)展行動(dòng)計(jì)劃》顯示，到2022年，超高清視頻產(chǎn)業(yè)總規(guī)模要超4萬(wàn)億元。超高清視頻修復(fù)市場(chǎng)蘊(yùn)藏著巨大潛力，讓視聽(tīng)行業(yè)嗅到了藏在老影像里的新生意。目前它雖是一個(gè)公益市場(chǎng)，但也是個(gè)不能忽視的商業(yè)市場(chǎng)。

優(yōu)質(zhì)內(nèi)容是各家視頻網(wǎng)站角逐的核心，而經(jīng)典老片如果可以低成本地大批量進(jìn)行高清修復(fù)，意味著盤(pán)活了視頻網(wǎng)站的資源庫(kù)，可以吸引更多新用戶(hù)的留存與會(huì)員付費(fèi)的可能。

高清視頻修復(fù)的技術(shù)與資源也會(huì)成為各家差異化的優(yōu)勢(shì)，AI技術(shù)能夠?qū)⒊杀敬蠓档?，效率和效果大幅提升，通過(guò)技術(shù)手段可以彌補(bǔ)需求和供給之間的鴻溝。AI修復(fù)的背后，經(jīng)典作品畫(huà)質(zhì)的改善，與新的智能設(shè)備、觀看需求的匹配，會(huì)使得平臺(tái)品牌與流量互相正向循環(huán)促進(jìn)。

不止技術(shù)，更是藝術(shù)表達(dá)

高清視頻的修復(fù)，不僅僅是在傳媒、流媒體、泛娛樂(lè)等領(lǐng)域具備創(chuàng)造價(jià)值，其與普通大眾之間，也逐漸縮短了距離。

西瓜視頻將自己的AI修復(fù)技術(shù)，后臺(tái)開(kāi)放高清修復(fù)的功能給每一位普通用戶(hù)，用戶(hù)可以還原那些對(duì)自己有特殊意義的瞬間。如父母輩的一些結(jié)婚錄像，小時(shí)候家庭聚餐的錄影，咿咿呀呀學(xué)習(xí)說(shuō)話(huà)的影像，十年前大學(xué)畢業(yè)的聚會(huì)視頻等。這些多年前的模糊影像，都會(huì)在AI技術(shù)的加持下，重新鮮活起來(lái)。

AI技術(shù)修復(fù)老片，也并不是萬(wàn)能的，并不是可以解決所有的老片問(wèn)題。據(jù)光明日?qǐng)?bào)報(bào)道，中國(guó)電影資料館對(duì)于老電影修復(fù)，有兩組人員，一組是藝術(shù)專(zhuān)家組，另一組是技術(shù)專(zhuān)家組，兩組人員缺一不可。

（百年前的北京城AI修復(fù)前后效果對(duì)比，via大谷）

老電影的色彩，風(fēng)俗等場(chǎng)景比較專(zhuān)業(yè)，需要藝術(shù)專(zhuān)業(yè)人員的把控。對(duì)老片的修復(fù)，并不是單純地把色彩修得好看，需要講究修舊如舊的氛圍感。這方面的把握，AI 還很難做到令人滿(mǎn)意。中影基地此前在修復(fù)彩色片《梁祝》時(shí)表示，其色調(diào)的濃稠就很難界定，需要多方專(zhuān)家一起來(lái)定奪。

在高清視頻的修復(fù)中，“修舊如舊”也并沒(méi)有什么行業(yè)參數(shù)之類(lèi)的標(biāo)準(zhǔn)存在，對(duì)于“如舊”的把控，需要結(jié)合所修復(fù)資料的具體場(chǎng)景、具體藝術(shù)表達(dá)來(lái)界定。這個(gè)界定就比較主觀，考察的是技術(shù)團(tuán)隊(duì)與版權(quán)合作方等對(duì)于藝術(shù)氛圍的感覺(jué)。

在經(jīng)典老片的修復(fù)過(guò)程中，不只是技術(shù)能力的釋放，也是一門(mén)藝術(shù)行為的表達(dá)。毫無(wú)疑問(wèn)，AI 會(huì)加速高清視頻的修復(fù)，但也存在局限，無(wú)法取代專(zhuān)業(yè)電影修復(fù)師。

對(duì)于高清視頻修復(fù)的未來(lái)，除了算法模型的打磨外，全息投影，VR360都是可能的發(fā)展方向。隨著5G、高清智能設(shè)備端的普及，對(duì)于經(jīng)典系列的畫(huà)質(zhì)與清晰度的適配，用戶(hù)的要求也會(huì)越來(lái)越高，初階的480p、1080p到4K，已經(jīng)是標(biāo)配，未來(lái)4 K 到8K，適配VR 設(shè)備的3D影像內(nèi)容修復(fù)，會(huì)是廠商們發(fā)力的方向。

傳媒、泛娛樂(lè)、AI技術(shù)只要如常青樹(shù)一般發(fā)展，交叉領(lǐng)域的視頻修復(fù)就會(huì)乘著這股東風(fēng)飛向遠(yuǎn)方。無(wú)論是珍貴的經(jīng)典、還是我們普通人曾經(jīng)閃亮的瞬間，視頻修復(fù)都會(huì)點(diǎn)亮這些曾經(jīng)褪色的記憶，讓舊時(shí)光重新鮮活起來(lái)，充實(shí)我們的生活。