7月4日消息,昨日晚間,在火山引擎技術(shù)支持下,抖音攜手環(huán)球音樂旗下廠牌寶麗金,超清修
復(fù)“Beyond Live 1991生命接觸演唱會”及紀(jì)念音樂會精選內(nèi)容被超清修復(fù)并重映。直播在
抖音、西瓜視頻、今日頭條、鮮時光TV同步進行,當(dāng)晚累計觀看人次超1.4億。
火山引擎多媒體實驗室介紹,早期軟硬件設(shè)備落后,導(dǎo)致影片在制作、壓縮、傳輸?shù)冗^程中存
在畫面模糊、紋理丟失和噪聲瑕疵等問題。如何處理成因復(fù)雜的質(zhì)量退化同時恢復(fù)盡可能多的
細節(jié),修復(fù)老舊視頻的褪色并保留復(fù)古感,以及調(diào)節(jié)不同大小、姿態(tài)人像的修復(fù)效果,是本次
修復(fù)的難點。
“我們的目標(biāo)是從畫面整體清晰度、人像五官復(fù)原度、色彩亮度、流暢度、美觀度等方面對畫
質(zhì)進行提升。”畫質(zhì)上,本次修復(fù)通過清晰度增強和瑕疵修復(fù)、分區(qū)域色彩亮度增強等算法,
處理早期軟硬件設(shè)備落后導(dǎo)致的問題。視頻分辨率從不足540p提升到接近4K水平,幀率從25f
ps提升到60fps。
此外,火山引擎多媒體實驗室還自研自適應(yīng)人像增強算法,針對人臉壓縮損傷、模糊、低分辨
率等問題,進行修復(fù)增強。該技術(shù)基于深度學(xué)習(xí),在消除人臉整體的模糊和壓縮損傷的同時,
進一步對人臉關(guān)鍵的五官進行細節(jié)重建。修復(fù)后,人物面部的胡須、毛孔清晰可見。
在音質(zhì)修復(fù)方面,火山引擎音頻技術(shù)團隊通過音頻降噪、音頻超分和響度算法,消除噪聲提升
音質(zhì),解決響度、噪聲干擾、帶寬不足等問題。
與傳統(tǒng)降噪方案不同,本次降噪算法針對音樂場景和人聲場景,實現(xiàn)了兼容AI降噪算法,在保
留音樂和人聲的前提下,抑制周圍噪聲。音頻超分算法則對演唱會中的人聲部分進行頻帶拓展
,豐富高頻信息,使人聲更加清晰。
演唱會的拾音情況不同,會導(dǎo)致唱歌的聲音有時候相對樂器聲和環(huán)境音過小,火山引擎音頻技
術(shù)團隊利用響度算法首先單獨提取唱歌部分,再調(diào)整唱歌部分的響度,最后混合,使得整體的
人聲更加舒適。
據(jù)了解,2021年10月,西瓜視頻及火山引擎推出“經(jīng)典視頻4K修復(fù)計劃”,通過技術(shù)手段,
一年內(nèi)修復(fù)百部經(jīng)典動畫片,目前已完成71部。同時,對擁有珍貴歷史影像的版權(quán)方,西瓜視
頻還開放免費修復(fù)合作。
抖音相關(guān)負責(zé)人表示,修復(fù)經(jīng)典,是傳承,也是用數(shù)字技術(shù)最大化還原作品,帶來視聽新感受
。“未來,我們會聯(lián)合火山引擎超清修復(fù)更多經(jīng)典影像,讓經(jīng)典煥發(fā)新生。”