紀念張國榮，以更“清晰”的方式
22年前，張國榮在香港紅磡舉辦了《熱·情》演唱會，這場演唱會是他生前的經典絕唱，由其親自擔任藝術總監，知名時尚設計師Jean Paul Gaultier負責服裝設計。
從藝術構思、到劇情式曲目編排、再到“天使到魔鬼”的系列造型，皆為彼時首創。演唱會以《我》為壓軸曲目，他想表達的主題之一是，“人要懂得怎樣去愛人之外，最重要的是懂得去欣賞你自己。”
4月1日，是粉絲們集體懷念張國榮的日子，如今，他已經闊別世間19載。榮迷們或重溫影視片段，或再播放一首經典歌曲，或翻開在相冊里保存了很久的照片，去懷念心目中的哥哥。
這一天，這場22年前的演唱會通過AI修復，以更清晰的“面貌”在騰訊云、微信視頻號、騰訊視頻共同呈現，僅寶麗金唱片微信視頻號觀看人次就超千萬，并刷屏社交網絡平臺。
“從《共同渡過》就已經繃不住了”、“這是一個感動的夜晚”、“風繼續吹，我們繼續想念你”……無數留言不斷刷屏著演唱會直播間。
修復塵封22年的演唱會母帶
2000年《熱·情》演唱會母帶由唱片公司寶麗金珍藏，分辨率是720×480，加之歲月帶來的劃痕、噪點等問題，都讓這張唱片無法呈現較好的播放效果，也更無法適用于當下4K等智能設備。
在一次偶然的機會下，騰訊云多媒體實驗室接觸到環球音樂旗下廠牌寶麗金，后者正好有對演唱會一些片段做修復的意愿，雙方很快達成共識——希望在4月1日這天，以這場修復版的演唱會，緬懷張國榮。
騰訊云多媒體實驗室專家研究員夏珍是張國榮的粉絲，參與到這次修復工作，他感到很榮幸。從初中開始，他就在聽哥哥的作品，只不過之前都是CD版本，他特別喜歡兩首歌，一首是《風繼續吹》，另一首是《春夏秋冬》，其中一句是——春天該很好，你若尚在場。
在修復過程中，他無數次觀看著這場演唱會，有了更多感受。“從舞臺設計、服裝到整個人的狀態，他（張國榮）投入特別多心血，是一個特別有魅力的人。希望修復版能讓這個經典作品更好地展現在大眾面前。”
依托于騰訊云多媒體實驗室的智能影像修復技術，修復工作從三月初開始。盡管實驗室此前有過修復《康熙王朝》《天下人家》等影視劇的經驗，但接到這個項目時依舊很忐忑。
騰訊多媒體實驗室總監李松南介紹，電視劇和電影場景相對固定，人物運動比較穩定，整部影片從頭至尾所表達的藝術風格、畫面色彩都一脈相承。但演唱會不同，燈光切換、鏡頭旋轉和遠景、近景及特寫切換等等，場景更加復雜，帶給團隊諸多挑戰。
圖注：騰訊多媒體實驗室專家研究員夏珍在做演唱會修復工作 來源：騰訊
演唱會修復工作流程包括“智能分析—畫質修復—畫質增強—智能編碼”四個步驟。
智能分析是指利用多種人工智能評估算法，對視頻內容進行幀級別、場景級別和視頻級別等多維度的智能分析。比如分析視頻的質量、失幀的類型、失幀的程度以及人臉的位置等等。
根據分析結果，畫質修復則是利用多種人工智能修復算法，針對老片場景下進行訓練和優化，可修復多種破壞畫質內容的因素，主要針對老片中常見的豎線、雪花點、噪聲、壓縮失真、抖動等問題進行修復。
人臉修復是畫質修復的難點之一。因為視頻中動態人臉遇到場景更復雜，比如《熱·情》演唱會有紅色、藍色和綠色等不同色彩，不同的燈光打到張國榮臉上時，他面部顏色和正常面部顏色不一樣，修復結果會出現不太好的效果，就需團隊去不斷做優化。
圖注：張國榮《熱·情》演唱會修復前后對比 來源：騰訊
再比如，臉的角度不一樣，側臉、正臉以及面部表情等，都需要優化算法去解決這些問題。
騰訊相關負責人進一步補充道，可以理解為演唱會有很多的長尾“場景”，比如影視劇中演員與觀眾并無互動，但演唱會現場感更強一些，舞臺切到近景時，張國榮跟粉絲有眼神交流。“因此，除了純算法跑之外，也會有一些人工參數調整，費了許多心思。”
圖注：張國榮《熱·情》演唱會修復前后對比 來源：騰訊
在畫質增強上，對騰訊云多媒體實驗室而言，需要更好地駕馭和平衡CNN(卷積神經網絡)和GAN(生成對抗網絡)兩種智能算法。
其中，CNN是經過大量圖像數據訓練而成的“熟練工"，它修復的結果比較真實，但有時細節會不夠豐富；而GAN經過自我博弈成長而來，它修復的結果更為豐富細膩，但有時會顯得不太真實。
李松南介紹，比如演唱會有很多遠景比較模糊，會用GAN去做修復，清晰度、紋理都會變得特別清晰。
“修舊如舊”
對于老片修復來講，包含物理修復和數字修復，前者是指對于膠片的修復，包括去除雜質等流程。后者則主要集中在基于機器學習、深度學習這方面的全自動修復，希望盡可能去減少人力介入，減少修復成本。
騰訊多媒體實驗室隸屬于騰訊的CSIG事業群。本次演唱會用到的是實驗室旗下的“超清沉浸感修復引擎”，這是其面向老片修復場景的技術解決方案，包含多種自研人工智能算法，在智能模式驅動下自動為老電影匹配最佳的算法組合和參數。
“人工修復比較依賴修復者的經驗和其對于畫面的理解度，不同人修復的同一個畫面可能會存在較大差別。”騰訊云多媒體實驗室專家研究員夏珍介紹，超清沉浸感修復引擎則可以很好地規避這個問題，在尊重歷史和原版的基礎上，保證畫質的提升。
夏珍表示，單純的算法修復環節耗時并不長，大概只用了2天，“但演唱會所體現的藝術價值很高，要在算法與藝術性之間去做一些平衡，盡量做到‘修舊如舊’的宗旨。”
他進一步闡述道，比如舞臺想表達的氛圍，盡量去在算法方面進行調整，修復過程中會不斷跟原片做對比，從藝術和感官上，看能否達到當時那個“舊”的感覺。
據悉，針對整體效果和特殊場景，騰訊多媒體實驗室進行了十多次的算法升級和優化，為技術應用提供了穩定性和魯棒性更強、跟蹤速度更快的技術支撐。
在一些復雜的情況下，也會由人工介入，比如演唱會場景比較暗的時候，需要手工進行一些修復以及算法參數的調整。
圖注：張國榮《熱·情》演唱會修復前后對比 來源：騰訊
從畫面角度來看，修復完的人臉清晰度非常高，尤其在一些近景特寫切換時，更為明顯，比如臉上的皮膚、皺紋、毛發甚至胡渣，比如偶爾略顯憂郁的眼神，比如眼睛里泛的淚光。
據悉，為了給人營造一種“面對面”的效果，實驗室團隊還對張國榮演唱會的眼神細節做了特別算法調優。從修復后視頻中截取一幀張國榮在舞臺中央的靜態畫面，放大后仿佛可以透過其眼眸看到舞臺折射的影像輪廓。
從視頻角度來看，當時團隊拿到的母帶是720×480分辨率，修復后的分辨率提升了6倍，接近4K的分辨率。
據悉，寶麗金對修復的效果很滿意，并對騰訊多媒體實驗室表達了后續和其他IP合作的訴求。
更多的懷念方式
近幾年，利用互聯網技術，公眾與逝去的偶像及他們的作品，有了更多形式的接觸，比如當下火熱的3D全息投影技術，去重現他們的昔日音容。
也得益于技術的發展迭代，公眾的懷念有了更多可以實現的形式，思念情緒也有更多輸出渠道。
“每年的4月1日，榮粉們都會發自內心地去回顧以前哥哥的一些片段或者記錄他之前的諸多小事，這給了我們團隊很大的鼓勵和動力。”夏珍說，在這樣的需求之下，加之騰訊多媒體實驗室的技術不斷迭代，演唱會修復工作是一件水到渠成的事情。
據悉，后續騰訊多媒體實驗室會把“超清沉浸感修復引擎”的能力，去跟更多的合作伙伴合作，助力經典影視劇、電影以及演唱會，還有一些珍貴的歷史影像，更好地傳承下去。
這也踐行著騰訊科技向善的理念，以及可持續社會價值創新戰略。
圖注：騰訊多媒體實驗室專家研究員夏珍在做演唱會修復工作 來源：騰訊
《超高清視頻產業發展行動計劃》顯示，到2022年，超高清視頻產業總規模要超4萬億元。超高清視頻修復市場也蘊藏巨大潛力。
據悉，未來智能影像修復技術在廣電或者傳媒行業也將有很大的應用市場，比如對老舊影片進行重新上映的需求，或者讓其適配到現在的4K或者8K電視上，都需要做智能影像的修復，才能達到更好的感官體驗。
夏珍認為，老片修復是一個長遠的工作，“比如現在質量還不錯的視頻，放到三五年之后，質量肯定又不行了。亦或者觀看設備升級，比如未來用VR顯示器等，展現方式又要進行新的更新換代。”
據悉，騰訊多媒體實驗室跟寶麗金這場合作是基于對張國榮先生的緬懷，沒有任何的商業元素。“對于我們來說，有基礎的服務器成本加人力投入，還有所有直播的渠道，以往可能對于一些還在世的明星會有一些打賞功能等等，但是對于張國榮這場演唱會完全沒有。”夏珍說。
獵云網
