《青春有你3》的子彈時間舞臺,凝筑了自由視角技術(shù)進化史

原標題:《青春有你3》的子彈時間舞臺,凝筑了自由視角技術(shù)進化史

2021年,內(nèi)娛選秀綜藝的競爭愈發(fā)激烈了。

要讓追綜多年的“秀粉”們有驚艷和驚喜感,光靠練習生們的顏值及業(yè)務能力已經(jīng)不夠,為了激起火花,通過刻意剪輯、選手“互相扯頭花”等為上熱搜而打造噱頭的情況也并不少見。

與這些“騷操作”相比,或許流媒體平臺們更需要問自己一個問題:在綜藝娛樂節(jié)目中,觀眾還有哪些尚未被滿足的需求?

以我自己為例,最近就因為《青春有你3》剛剛上線的子彈時間被吸引“入坑”了。

作為一個老“綜藝鵝”,我可以120°視角自主操控觀看角度,而不是只能通過節(jié)目組設(shè)定好的某一個角度來欣賞“時間凝固”效果,自由度更高,能夠全方位展示選手的業(yè)務能力,讓秀粉們解鎖專屬快樂。

另外,《青春有你3》這次的“子彈時間”對設(shè)備的要求也沒那么苛刻。我用的是非頂配性能的老款手機,互動體驗依然絲滑,高清畫面的加載也沒有明顯延遲??赐曛笪蚁胝f:內(nèi)娛還是有點東西的。

黑科技應用頻在綜藝節(jié)目中比重越來越大,會是接下來流媒體平臺的“流量密碼”嗎?

綜藝新秀自由視角,是如何一步步進化的?

隨著4K及8K分辨率視頻的逐漸推廣,平面視頻體驗幾乎已經(jīng)達到了發(fā)展的極限。更高自由度、能給用戶提供更多信息的互動式流媒體技術(shù)自然也就引發(fā)了更多關(guān)注。

其中應用最早、最為大眾熟悉的互動技術(shù)之一,就是子彈時間。

子彈時間依托于一種全新的3D視頻制作技術(shù)——自由視角視頻。在《黑客帝國》電影當中,特效團隊在攝影棚內(nèi)圓弧形架設(shè)了120臺攝像機,每臺攝影機間隔1秒依序拍攝,再通過特效后制,就能為觀眾展現(xiàn)出全方位環(huán)繞、時間停滯一般的“上帝視角”。

不過,此前的子彈時間應用只能算是自由視角技術(shù)的初級形態(tài),拍攝的是時間靜止時的畫面,觀眾能看到什么是由最終剪輯來決定的,依然無法主動獲取任意視角下播放畫面。

在此基礎(chǔ)上,以6DoF(Six degrees of freedom)為目標,實現(xiàn)全新交互式體驗的“自由視角”應用就出現(xiàn)了。

這種新形式可以拍攝進程中任意時間的360度畫面。具體方式一般是在體育比賽場館或綜藝錄制現(xiàn)場架設(shè)高清相機,通過點云重建并在虛擬場景中將各個角度的2D視頻拼成全景視頻,渲染出360度的視覺效果。用戶可以滑動、旋轉(zhuǎn)手機屏幕來自由選擇被拍攝對象運動中的任意視角。

不過,由于自由視角的技術(shù)條件要求高,需要攝像機陣列以毫秒級同步拍攝選手狀態(tài),在硬件部署、視頻壓縮、渲染等方面都帶來了挑戰(zhàn),因此在實際落地中,節(jié)目制作方一般需要在操作自由度與畫面信息維度之間做出取舍,比如減少攝像機數(shù)量、再利用AI插幀的方式來彌補體驗不足。

而這次《青春有你3》中上線的“子彈時間”,則是對自由視角落地方案的進一步升級。

愛奇藝技術(shù)產(chǎn)品團隊運用幾十個高分辨率的攝像頭從多個角度捕捉被拍攝物體和場景,還原出三維空間中的場景。再借由獨有的編解碼、播放技術(shù)方案,緩解網(wǎng)速導致的超高清視頻加載速度過慢這一痛點,既能保證高清畫質(zhì),并且對終端設(shè)備的性能要求大幅下降,讓更多人可以低門檻地感受到高自由度觀看的魅力。

在技術(shù)驅(qū)動的時代大幕中,科技手段也成為流媒體產(chǎn)業(yè)逃離同質(zhì)化窠臼的利器。海外有Netflix利用AI算法提升個性化推薦效果的案例,國內(nèi)則有愛奇藝這樣不斷探索高自由度交互式體驗的典范。這種嘗試,也讓愛奇藝又一次在娛樂公司中立穩(wěn)了“技術(shù)人設(shè)”。

穿透體驗困境:愛奇藝的技術(shù)“雙叉戟”

對于一項新技術(shù)來說,所覆蓋的觀眾廣度與普及效率顯然是首要任務。但長期以來,自由視角技術(shù)都存在兩個基礎(chǔ)難題:

一是視頻高分辨率與自由度之間的矛盾。視頻分辨率從1080p到4K等不斷提升,要實現(xiàn)大角度、高自由度的交互效果,只有性能很高的手機能實現(xiàn)解碼支持,流暢地進行播放。

二是網(wǎng)絡傳輸與流暢度之間的矛盾。高清且高自由度的視頻整體數(shù)據(jù)傳輸量高,對帶寬的需求很大,網(wǎng)絡環(huán)境不夠理想的觀眾,觀看高自由度視頻的體驗會受影響。

那么,平價機型也能玩轉(zhuǎn)的《青春有你3》自由視角,又是怎么實現(xiàn)的呢?

這次,愛奇藝也祭出了流媒體技術(shù)和數(shù)據(jù)加載解決方案的“雙叉戟”:

一方面,通過編解碼技術(shù),實現(xiàn)了時空雙路徑編碼視頻流、多路解碼器并行解碼。具體來說就是可以按時間、空間兩個維度對視頻進行解碼,時間維度碼流可以讓用戶在切換觀看視角時穩(wěn)定加載,空間維度碼流則在靜止場中保證穩(wěn)定精細化的旋轉(zhuǎn)效果。此外,愛奇藝還通過專利技術(shù)建構(gòu)了多路CPU/GPU復合解碼器架構(gòu),可以自適應多路碼流來進行動態(tài)解碼,隨著用戶的實時視角旋轉(zhuǎn)來切換解碼區(qū)域。然后借助超低延遲的渲染互動技術(shù),在用戶轉(zhuǎn)動視角時直接“通知”渲染引擎實時更新畫面。

這一套“組合拳”下來,普通終端也能體驗到流暢、高清的高自由度視頻。

針對網(wǎng)絡問題,愛奇藝則使用了創(chuàng)新的“主流+底流”數(shù)據(jù)加載方案。在觀看高自由度視頻時,通過“主流+底流”傳輸可以將數(shù)據(jù)連續(xù)、實時地傳送到終端,大幅提高傳輸效率,縮短了互動延時,用戶可以流暢地進行播放和切換。同時實現(xiàn)了GOP級視角數(shù)據(jù)的切換與加載。

憑借技術(shù)創(chuàng)新,更廣泛受眾玩轉(zhuǎn)自由視角的體驗障礙,就這樣被愛奇藝一一拔除了。

自由視角的產(chǎn)業(yè)進行時:用連鎖反應重構(gòu)產(chǎn)業(yè)鏈條

如果自由視角技術(shù)只能應用在一部或幾部作品中,必然無法降低平臺的制作成本,也很難說徹底變革大眾的觀看習慣。

能夠讓自由視角技術(shù)真正普及的前提,是去掉規(guī)模化應用的限制,提升技術(shù)的落地效率,才能讓更多綜藝、劇集的觀眾快速感受到新交互體驗的魅力所在。

愛奇藝在《青春有你3》中除了技術(shù)落地之外,也對背后的視頻生產(chǎn)與制作環(huán)節(jié)進行了改造。

首先,針對自由視角視頻前期硬件投入高,傳統(tǒng)算法效率低,制作風險較大的痛點,打造了一系列系統(tǒng)級工具,以期實現(xiàn)高自由度視頻的智能化拍攝。

比如愛奇藝打造了一套自由視角下的虛擬環(huán)境拍攝系統(tǒng),能夠基于三維渲染技術(shù),渲染出一套和真實場景及尺寸一致的虛擬場景。制作方可以精確部署虛擬相機陣列,模擬真實相機拍攝素材,低成本、高效率地設(shè)計出自由視角拍攝相機陣列的部署方案,降低子彈時間、點云、自由視點等多種視頻的制作風險。

在實際拍攝過程中,愛奇藝也通過自研的一套相機陣列智能調(diào)節(jié)系統(tǒng)將每臺相機進行參數(shù)標定,對它們進行統(tǒng)一調(diào)節(jié),將繁雜的部署工作時間大大縮短。

針對視角切換中可能出現(xiàn)的畫面抖動,愛奇藝還設(shè)計了一套畫面穩(wěn)定算法系統(tǒng),可以在視頻拍攝完成后,在后臺對素材自動進行穩(wěn)定處理,不用后期制作人員再費時費力地手動調(diào)節(jié),效果也大大提升。

在后期的視頻制作中,愛奇藝則將攝像機的控制、基于模板的自由視角視頻編輯與創(chuàng)作、自由視角視頻的導出與回放等功能整合在一起,輸出成了自由視角視頻創(chuàng)作中控系統(tǒng)的整套集成方案。

編導可以基于預先設(shè)計好的模板,進行現(xiàn)場快捷創(chuàng)作,例如曲線模板編輯,對當前錄制場景所產(chǎn)生的實際效果的效果預覽。

創(chuàng)作好的自由視角視頻,可輸出到現(xiàn)場導播切換臺、外部監(jiān)視器及現(xiàn)場大屏等設(shè)備上,方便制作團隊及時調(diào)整、查漏補缺。

和所有新興技術(shù)一樣,自由視角因為投入大、成本高、拍攝制作周期長,令內(nèi)容生產(chǎn)者望而卻步。但現(xiàn)在,愛奇藝的一系列生產(chǎn)工具前所未有地提升了高自由度視頻的產(chǎn)業(yè)效率,讓創(chuàng)作者可以低門檻地使用這一技術(shù)來建立內(nèi)容差異化優(yōu)勢。

也就是說,愛奇藝已經(jīng)在高自由度視頻所需要的流媒體技術(shù)、基礎(chǔ)算法、硬件協(xié)同、場景適配、生產(chǎn)制作等關(guān)鍵環(huán)節(jié)上,都有了技術(shù)沉淀,可能引發(fā)的連鎖反應將是革命性的,也讓我們看到了流媒體產(chǎn)業(yè)的進化方向。

解優(yōu)質(zhì)內(nèi)容之渴,愛奇藝的技術(shù)革命

近年來,自由視角、VR、AR等技術(shù)在流媒體產(chǎn)業(yè)出現(xiàn)的越來越高頻。為什么平臺們不惜重金,也要在黑科技領(lǐng)域“整活”?

當平面視頻已經(jīng)趨近極限的時候,占據(jù)極高比例的年輕觀眾對多樣化、個性化的追求,也給內(nèi)容的差異化創(chuàng)新帶來了挑戰(zhàn)。像子彈時間、自由視角這樣的高自由度視頻,能夠打破平面觀看的束縛,給用戶體驗帶來質(zhì)的提升,自然也就成為“兵家必爭之地”。

在此基礎(chǔ)上,愛奇藝選擇更進一步,在更上游的生產(chǎn)側(cè)進行改造,不僅能夠有效降低高自由度視頻的制作門檻與成本,進入良性循環(huán);而且率先建立起了行業(yè)標準和模板,開啟一場內(nèi)容產(chǎn)業(yè)的人才與創(chuàng)意爭奪戰(zhàn)。

這絕對是一件利在當下、功在未來的事。

2021年,是內(nèi)地綜藝娛樂進入存量競爭的一年,也是內(nèi)容消費開始回歸價值和收獲感的一年。遠離低質(zhì)、同質(zhì)化、缺乏誠意的節(jié)目和作品,已經(jīng)成為觀眾們迫切且一致的呼喚。

從這一點上看,愛奇藝《青春有你3》上線子彈時間,也打開了一扇充滿驚喜的大門,包含著高自由度視頻交互體驗席卷而來的無限想象。

極客網(wǎng)企業(yè)會員

免責聲明:本網(wǎng)站內(nèi)容主要來自原創(chuàng)、合作伙伴供稿和第三方自媒體作者投稿,凡在本網(wǎng)站出現(xiàn)的信息,均僅供參考。本網(wǎng)站將盡力確保所提供信息的準確性及可靠性,但不保證有關(guān)資料的準確性及可靠性,讀者在使用前請進一步核實,并對任何自主決定的行為負責。本網(wǎng)站對有關(guān)資料所引致的錯誤、不確或遺漏,概不負任何法律責任。任何單位或個人認為本網(wǎng)站中的網(wǎng)頁或鏈接內(nèi)容可能涉嫌侵犯其知識產(chǎn)權(quán)或存在不實內(nèi)容時,應及時向本網(wǎng)站提出書面權(quán)利通知或不實情況說明,并提供身份證明、權(quán)屬證明及詳細侵權(quán)或不實情況證明。本網(wǎng)站在收到上述法律文件后,將會依法盡快聯(lián)系相關(guān)文章源頭核實,溝通刪除相關(guān)內(nèi)容或斷開相關(guān)鏈接。

2021-03-21
《青春有你3》的子彈時間舞臺,凝筑了自由視角技術(shù)進化史
不過,由于自由視角的技術(shù)條件要求高,需要攝像機陣列以毫秒級同步拍攝選手狀態(tài),在硬件部署、視頻壓縮、渲染等方面都帶來了挑戰(zhàn),因此在實際落地中,節(jié)目制作方一般需要在操作自由度與畫面信息維度之間做出取舍,

長按掃碼 閱讀全文