騰訊多媒體實(shí)驗(yàn)室助力科學(xué)WE大會(huì):揭秘超清修復(fù)技術(shù)背后的故事

騰訊多媒體實(shí)驗(yàn)室在最近的2023騰訊科學(xué)WE大會(huì)上展現(xiàn)了其前沿的光影煥新技術(shù),聚焦修復(fù)安德烈·海姆早期研究的視頻。這項(xiàng)技術(shù)利用高清修復(fù)技術(shù),讓觀眾沉浸式領(lǐng)略科學(xué)的神奇。

這一技術(shù)實(shí)踐背后得益于騰訊多媒體實(shí)驗(yàn)室多年來在視頻處理領(lǐng)域的深厚積累。他們自研了多種針對(duì)舊影像的修復(fù)技術(shù),包括去失真生成、超分、細(xì)節(jié)增強(qiáng)和色彩增強(qiáng)等,從而極大地提升了視頻主觀質(zhì)量。

超清修復(fù)后的版本,實(shí)驗(yàn)對(duì)象噪聲被去除,邊緣清晰可見

專注于多媒體技術(shù)領(lǐng)域的騰訊多媒體實(shí)驗(yàn)室包含音視頻編解碼、網(wǎng)絡(luò)傳輸和實(shí)時(shí)通信等領(lǐng)域,同時(shí)在老片修復(fù)方面也有深厚技術(shù)積累。他們曾參與《國慶閱兵》彩色修復(fù)、《七一中國香港回歸》高清修復(fù)、張國榮《熱·情》演唱會(huì),以及《康熙王朝》、《天下人家》等多部經(jīng)典影視劇高清修復(fù)工作,展現(xiàn)出了在修復(fù)歷史影像方面的豐富經(jīng)驗(yàn)。

這次對(duì)安德烈·海姆早期研究視頻的修復(fù),不僅僅是技術(shù)層面上的挑戰(zhàn),更是要達(dá)到觀眾沉浸式的觀影體驗(yàn)。騰訊多媒體實(shí)驗(yàn)室專家研究員夏珍和他的團(tuán)隊(duì)制定了嚴(yán)格的標(biāo)準(zhǔn),希望修復(fù)后的視頻能夠帶給觀眾全新的沉浸感。

光影煥新修復(fù)引擎是這次修復(fù)工作的關(guān)鍵所在。它涵蓋了智能分析、畫質(zhì)修復(fù)、畫質(zhì)增強(qiáng)和智能編碼等模塊,利用多種智能算法來修復(fù)各類破壞畫質(zhì)的主要因素,并提升畫面的清晰度和色彩豐富度。

本次修復(fù)版視頻的超大視頻尺寸能在大屏幕上得以高質(zhì)、流暢地現(xiàn)場播放,背后還有一項(xiàng)超能技術(shù)不得不提:視頻編解碼。這是一項(xiàng)容易被忽視的技術(shù),但卻是引領(lǐng)和驅(qū)動(dòng)音視頻技術(shù)發(fā)展的關(guān)鍵技術(shù)。它所解決的問題可以用一句話總結(jié):在不改變視頻主觀質(zhì)量的前提下,壓縮視頻的大小,以更順暢、高質(zhì)地在各個(gè)平臺(tái)播放。

超高清技術(shù)的發(fā)展極大提升了視頻的清晰度,但同時(shí)也讓文件大小成倍增長。壓縮之前的原視頻極占存儲(chǔ)空間,雖然分辨率是480p的,但碼率高達(dá)50M/s,如果修復(fù)后的4K高清版本按高碼率輸出,將占據(jù)300GB的存儲(chǔ)空間。

談及至此,不得不提實(shí)驗(yàn)室的一項(xiàng)“王牌技術(shù)”:新一代國際編解碼標(biāo)準(zhǔn)。它在業(yè)內(nèi)廣受關(guān)注。

該標(biāo)準(zhǔn)于2020年7月正式發(fā)布,成為視頻產(chǎn)業(yè)跨時(shí)代的里程碑,相比上一代標(biāo)準(zhǔn),其壓縮性能顯著提高,可在視頻主觀質(zhì)量不變的條件下減少50%的數(shù)據(jù)大小,大大減少視頻傳輸帶來的流量、帶寬成本,推動(dòng)整個(gè)視頻產(chǎn)業(yè)進(jìn)化。

騰訊多媒體實(shí)驗(yàn)室正是這項(xiàng)標(biāo)準(zhǔn)制定的主要貢獻(xiàn)者之一,提交的技術(shù)提案被國際和國內(nèi)標(biāo)準(zhǔn)采納,數(shù)量全球領(lǐng)先。同時(shí),實(shí)驗(yàn)室專家們還在標(biāo)準(zhǔn)組織中擔(dān)任包括新一代國際編解碼標(biāo)準(zhǔn)聯(lián)合主編、參考軟件聯(lián)席主席等重要席位。騰訊是中國最早參與并致力于開發(fā)視頻信息壓縮和解碼標(biāo)準(zhǔn)的公司之一,現(xiàn)已在視頻編解碼技術(shù)上處于全球領(lǐng)先的地位。

在2023 MSU世界視頻編碼器大賽中,騰訊自研最新一代H.266/VVC編碼器以其出色的壓縮性能和節(jié)省帶寬的能力,在此次競爭激烈的MSU FullHD編碼大賽中脫穎而出。在1fps、5fps和30fps這三個(gè)速度檔位上,Tencent266在15項(xiàng)關(guān)鍵指標(biāo)中贏得了12項(xiàng)第一,第一總數(shù)全場最多。Tencent266還在全部VVC編碼器中三個(gè)速度檔位取得15項(xiàng)指標(biāo)全部第一。此外Tencent266還在MSU世界視頻編碼器大賽10bit編碼比賽,4K編碼比賽與主觀編碼比賽中連續(xù)保持行業(yè)領(lǐng)先,均取得了全場最多的第一總數(shù),證明Tencent266在不同應(yīng)用場景下均能為用戶用更低的帶寬帶來更好的畫質(zhì)。

與此同時(shí),騰訊云音視頻轉(zhuǎn)碼及相關(guān)媒體處理應(yīng)用已于2021年7月全線支持新一代國際編解碼標(biāo)準(zhǔn),這是該標(biāo)準(zhǔn)首次在云上商用,填補(bǔ)了全球云廠商在該領(lǐng)域的空白。Tencent266在23年初上線騰訊云直播,騰訊云成為行業(yè)首個(gè)支持VVC直播的云廠商。

此外,騰訊多媒體實(shí)驗(yàn)室在標(biāo)準(zhǔn)截稿僅三個(gè)月后,發(fā)布了新一代國際編解碼播放器,解碼速度較標(biāo)準(zhǔn)參考軟件快了約 20 倍,能對(duì) UHD 影像進(jìn)行實(shí)時(shí)解碼,其性能在全球處于領(lǐng)先地位。

近年來,隨著5G、人工智能等數(shù)字技術(shù)的發(fā)展,超高清視頻技術(shù)成為推動(dòng)我國超高清視頻產(chǎn)業(yè)迅猛發(fā)展的重要?jiǎng)恿?。然而,在超高清?nèi)容生產(chǎn)端,則存在著超高清內(nèi)容制作、經(jīng)典老片及視頻轉(zhuǎn)高清的成本高、效率低等痛點(diǎn),成為制約產(chǎn)業(yè)發(fā)展的關(guān)鍵因素。

夏珍表示,全球有非常多的諸如演唱會(huì)、電視劇、電影、紀(jì)錄片等經(jīng)典影像,騰訊多媒體實(shí)驗(yàn)室目前已經(jīng)形成了較為完整的智能老片修復(fù)技術(shù)矩陣,未來希望通過超清沉浸感修復(fù)引擎,幫助更多的時(shí)代經(jīng)典高質(zhì)、高效地重現(xiàn)于觀眾面前。

這次修復(fù)工作展現(xiàn)了超清修復(fù)技術(shù)在視頻內(nèi)容修復(fù)和轉(zhuǎn)換方面的巨大潛力。騰訊多媒體實(shí)驗(yàn)室希望通過這項(xiàng)技術(shù)幫助更多經(jīng)典作品以高質(zhì)、高效的方式重現(xiàn)于觀眾面前,同時(shí)也致力于推動(dòng)多媒體技術(shù)在各個(gè)產(chǎn)業(yè)領(lǐng)域的應(yīng)用。

這一創(chuàng)新展示了騰訊技術(shù)在傳統(tǒng)文化傳承和數(shù)字化領(lǐng)域的價(jià)值,為科技向善、可持續(xù)社會(huì)價(jià)值創(chuàng)新做出了新的貢獻(xiàn)。

(免責(zé)聲明:本網(wǎng)站內(nèi)容主要來自原創(chuàng)、合作伙伴供稿和第三方自媒體作者投稿,凡在本網(wǎng)站出現(xiàn)的信息,均僅供參考。本網(wǎng)站將盡力確保所提供信息的準(zhǔn)確性及可靠性,但不保證有關(guān)資料的準(zhǔn)確性及可靠性,讀者在使用前請(qǐng)進(jìn)一步核實(shí),并對(duì)任何自主決定的行為負(fù)責(zé)。本網(wǎng)站對(duì)有關(guān)資料所引致的錯(cuò)誤、不確或遺漏,概不負(fù)任何法律責(zé)任。
任何單位或個(gè)人認(rèn)為本網(wǎng)站中的網(wǎng)頁或鏈接內(nèi)容可能涉嫌侵犯其知識(shí)產(chǎn)權(quán)或存在不實(shí)內(nèi)容時(shí),應(yīng)及時(shí)向本網(wǎng)站提出書面權(quán)利通知或不實(shí)情況說明,并提供身份證明、權(quán)屬證明及詳細(xì)侵權(quán)或不實(shí)情況證明。本網(wǎng)站在收到上述法律文件后,將會(huì)依法盡快聯(lián)系相關(guān)文章源頭核實(shí),溝通刪除相關(guān)內(nèi)容或斷開相關(guān)鏈接。 )