22年前，張國榮在香港紅磡舉辦了《熱·情》演唱會，這場演唱會是他生前的經(jīng)典絕唱，由其親自擔任藝術(shù)總監(jiān)，知名時尚設(shè)計師Jean Paul Gaultier負責服裝設(shè)計。

從藝術(shù)構(gòu)思、到劇情式曲目編排、再到“天使到魔鬼”的系列造型，皆為彼時首創(chuàng)。演唱會以《我》為壓軸曲目，他想表達的主題之一是，“人要懂得怎樣去愛人之外，最重要的是懂得去欣賞你自己。”

4月1日，是粉絲們集體懷念張國榮的日子，如今，他已經(jīng)闊別世間19載。榮迷們或重溫影視片段，或再播放一首經(jīng)典歌曲，或翻開在相冊里保存了很久的照片，去懷念心目中的哥哥。

這一天，這場22年前的演唱會通過AI修復，以更清晰的“面貌”在騰訊云、微信視頻號、騰訊視頻共同呈現(xiàn)，僅寶麗金唱片微信視頻號觀看人次就超千萬，并刷屏社交網(wǎng)絡(luò)平臺。

“從《共同渡過》就已經(jīng)繃不住了”、“這是一個感動的夜晚”、“風繼續(xù)吹，我們繼續(xù)想念你”……無數(shù)留言不斷刷屏著演唱會直播間。

修復塵封22年的演唱會母帶

2000年《熱·情》演唱會母帶由唱片公司寶麗金珍藏，分辨率是720×480，加之歲月帶來的劃痕、噪點等問題，都讓這張唱片無法呈現(xiàn)較好的播放效果，也更無法適用于當下4K等智能設(shè)備。

在一次偶然的機會下，騰訊云多媒體實驗室接觸到環(huán)球音樂旗下廠牌寶麗金，后者正好有對演唱會一些片段做修復的意愿，雙方很快達成共識——希望在4月1日這天，以這場修復版的演唱會，緬懷張國榮。

騰訊云多媒體實驗室專家研究員夏珍是張國榮的粉絲，參與到這次修復工作，他感到很榮幸。從初中開始，他就在聽哥哥的作品，只不過之前都是CD版本，他特別喜歡兩首歌，一首是《風繼續(xù)吹》，另一首是《春夏秋冬》，其中一句是——春天該很好，你若尚在場。

在修復過程中，他無數(shù)次觀看著這場演唱會，有了更多感受。“從舞臺設(shè)計、服裝到整個人的狀態(tài)，他（張國榮）投入特別多心血，是一個特別有魅力的人。希望修復版能讓這個經(jīng)典作品更好地展現(xiàn)在大眾面前。”

依托于騰訊云多媒體實驗室的智能影像修復技術(shù)，修復工作從三月初開始。盡管實驗室此前有過修復《康熙王朝》《天下人家》等影視劇的經(jīng)驗，但接到這個項目時依舊很忐忑。

騰訊多媒體實驗室總監(jiān)李松南介紹，電視劇和電影場景相對固定，人物運動比較穩(wěn)定，整部影片從頭至尾所表達的藝術(shù)風格、畫面色彩都一脈相承。但演唱會不同，燈光切換、鏡頭旋轉(zhuǎn)和遠景、近景及特寫切換等等，場景更加復雜，帶給團隊諸多挑戰(zhàn)。

圖注：騰訊多媒體實驗室專家研究員夏珍在做演唱會修復工作 來源：騰訊

演唱會修復工作流程包括“智能分析—畫質(zhì)修復—畫質(zhì)增強—智能編碼”四個步驟。

智能分析是指利用多種人工智能評估算法，對視頻內(nèi)容進行幀級別、場景級別和視頻級別等多維度的智能分析。比如分析視頻的質(zhì)量、失幀的類型、失幀的程度以及人臉的位置等等。

根據(jù)分析結(jié)果，畫質(zhì)修復則是利用多種人工智能修復算法，針對老片場景下進行訓練和優(yōu)化，可修復多種破壞畫質(zhì)內(nèi)容的因素，主要針對老片中常見的豎線、雪花點、噪聲、壓縮失真、抖動等問題進行修復。

人臉修復是畫質(zhì)修復的難點之一。因為視頻中動態(tài)人臉遇到場景更復雜，比如《熱·情》演唱會有紅色、藍色和綠色等不同色彩，不同的燈光打到張國榮臉上時，他面部顏色和正常面部顏色不一樣，修復結(jié)果會出現(xiàn)不太好的效果，就需團隊去不斷做優(yōu)化。

圖注：張國榮《熱·情》演唱會修復前后對比 來源：騰訊

再比如，臉的角度不一樣，側(cè)臉、正臉以及面部表情等，都需要優(yōu)化算法去解決這些問題。

騰訊相關(guān)負責人進一步補充道，可以理解為演唱會有很多的長尾“場景”，比如影視劇中演員與觀眾并無互動，但演唱會現(xiàn)場感更強一些，舞臺切到近景時，張國榮跟粉絲有眼神交流。“因此，除了純算法跑之外，也會有一些人工參數(shù)調(diào)整，費了許多心思。”

圖注：張國榮《熱·情》演唱會修復前后對比 來源：騰訊

在畫質(zhì)增強上，對騰訊云多媒體實驗室而言，需要更好地駕馭和平衡CNN(卷積神經(jīng)網(wǎng)絡(luò))和GAN(生成對抗網(wǎng)絡(luò))兩種智能算法。

其中，CNN是經(jīng)過大量圖像數(shù)據(jù)訓練而成的“熟練工"，它修復的結(jié)果比較真實，但有時細節(jié)會不夠豐富；而GAN經(jīng)過自我博弈成長而來，它修復的結(jié)果更為豐富細膩，但有時會顯得不太真實。

李松南介紹，比如演唱會有很多遠景比較模糊，會用GAN去做修復，清晰度、紋理都會變得特別清晰。

“修舊如舊”

對于老片修復來講，包含物理修復和數(shù)字修復，前者是指對于膠片的修復，包括去除雜質(zhì)等流程。后者則主要集中在基于機器學習、深度學習這方面的全自動修復，希望盡可能去減少人力介入，減少修復成本。

騰訊多媒體實驗室隸屬于騰訊的CSIG事業(yè)群。本次演唱會用到的是實驗室旗下的“超清沉浸感修復引擎”，這是其面向老片修復場景的技術(shù)解決方案，包含多種自研人工智能算法，在智能模式驅(qū)動下自動為老電影匹配最佳的算法組合和參數(shù)。

“人工修復比較依賴修復者的經(jīng)驗和其對于畫面的理解度，不同人修復的同一個畫面可能會存在較大差別。”騰訊云多媒體實驗室專家研究員夏珍介紹，超清沉浸感修復引擎則可以很好地規(guī)避這個問題，在尊重歷史和原版的基礎(chǔ)上，保證畫質(zhì)的提升。

夏珍表示，單純的算法修復環(huán)節(jié)耗時并不長，大概只用了2天，“但演唱會所體現(xiàn)的藝術(shù)價值很高，要在算法與藝術(shù)性之間去做一些平衡，盡量做到‘修舊如舊’的宗旨。”

他進一步闡述道，比如舞臺想表達的氛圍，盡量去在算法方面進行調(diào)整，修復過程中會不斷跟原片做對比，從藝術(shù)和感官上，看能否達到當時那個“舊”的感覺。

據(jù)悉，針對整體效果和特殊場景，騰訊多媒體實驗室進行了十多次的算法升級和優(yōu)化，為技術(shù)應(yīng)用提供了穩(wěn)定性和魯棒性更強、跟蹤速度更快的技術(shù)支撐。

在一些復雜的情況下，也會由人工介入，比如演唱會場景比較暗的時候，需要手工進行一些修復以及算法參數(shù)的調(diào)整。

圖注：張國榮《熱·情》演唱會修復前后對比 來源：騰訊

從畫面角度來看，修復完的人臉清晰度非常高，尤其在一些近景特寫切換時，更為明顯，比如臉上的皮膚、皺紋、毛發(fā)甚至胡渣，比如偶爾略顯憂郁的眼神，比如眼睛里泛的淚光。

據(jù)悉，為了給人營造一種“面對面”的效果，實驗室團隊還對張國榮演唱會的眼神細節(jié)做了特別算法調(diào)優(yōu)。從修復后視頻中截取一幀張國榮在舞臺中央的靜態(tài)畫面，放大后仿佛可以透過其眼眸看到舞臺折射的影像輪廓。

從視頻角度來看，當時團隊拿到的母帶是720×480分辨率，修復后的分辨率提升了6倍，接近4K的分辨率。

據(jù)悉，寶麗金對修復的效果很滿意，并對騰訊多媒體實驗室表達了后續(xù)和其他IP合作的訴求。

更多的懷念方式

近幾年，利用互聯(lián)網(wǎng)技術(shù)，公眾與逝去的偶像及他們的作品，有了更多形式的接觸，比如當下火熱的3D全息投影技術(shù)，去重現(xiàn)他們的昔日音容。

也得益于技術(shù)的發(fā)展迭代，公眾的懷念有了更多可以實現(xiàn)的形式，思念情緒也有更多輸出渠道。

“每年的4月1日，榮粉們都會發(fā)自內(nèi)心地去回顧以前哥哥的一些片段或者記錄他之前的諸多小事，這給了我們團隊很大的鼓勵和動力。”夏珍說，在這樣的需求之下，加之騰訊多媒體實驗室的技術(shù)不斷迭代，演唱會修復工作是一件水到渠成的事情。

據(jù)悉，后續(xù)騰訊多媒體實驗室會把“超清沉浸感修復引擎”的能力，去跟更多的合作伙伴合作，助力經(jīng)典影視劇、電影以及演唱會，還有一些珍貴的歷史影像，更好地傳承下去。

這也踐行著騰訊科技向善的理念，以及可持續(xù)社會價值創(chuàng)新戰(zhàn)略。

圖注：騰訊多媒體實驗室專家研究員夏珍在做演唱會修復工作 來源：騰訊

《超高清視頻產(chǎn)業(yè)發(fā)展行動計劃》顯示，到2022年，超高清視頻產(chǎn)業(yè)總規(guī)模要超4萬億元。超高清視頻修復市場也蘊藏巨大潛力。

據(jù)悉，未來智能影像修復技術(shù)在廣電或者傳媒行業(yè)也將有很大的應(yīng)用市場，比如對老舊影片進行重新上映的需求，或者讓其適配到現(xiàn)在的4K或者8K電視上，都需要做智能影像的修復，才能達到更好的感官體驗。

夏珍認為，老片修復是一個長遠的工作，“比如現(xiàn)在質(zhì)量還不錯的視頻，放到三五年之后，質(zhì)量肯定又不行了。亦或者觀看設(shè)備升級，比如未來用VR顯示器等，展現(xiàn)方式又要進行新的更新?lián)Q代。”

據(jù)悉，騰訊多媒體實驗室跟寶麗金這場合作是基于對張國榮先生的緬懷，沒有任何的商業(yè)元素。“對于我們來說，有基礎(chǔ)的服務(wù)器成本加人力投入，還有所有直播的渠道，以往可能對于一些還在世的明星會有一些打賞功能等等，但是對于張國榮這場演唱會完全沒有。”夏珍說。