《青春有你3》的子彈時(shí)間舞臺(tái),凝筑了自由視角技術(shù)進(jìn)化史

原標(biāo)題:《青春有你3》的子彈時(shí)間舞臺(tái),凝筑了自由視角技術(shù)進(jìn)化史

2021年,內(nèi)娛選秀綜藝的競爭愈發(fā)激烈了。

要讓追綜多年的“秀粉”們有驚艷和驚喜感,光靠練習(xí)生們的顏值及業(yè)務(wù)能力已經(jīng)不夠,為了激起火花,通過刻意剪輯、選手“互相扯頭花”等為上熱搜而打造噱頭的情況也并不少見。

與這些“騷操作”相比,或許流媒體平臺(tái)們更需要問自己一個(gè)問題:在綜藝娛樂節(jié)目中,觀眾還有哪些尚未被滿足的需求?

以我自己為例,最近就因?yàn)椤肚啻河心?》剛剛上線的子彈時(shí)間被吸引“入坑”了。

作為一個(gè)老“綜藝鵝”,我可以120°視角自主操控觀看角度,而不是只能通過節(jié)目組設(shè)定好的某一個(gè)角度來欣賞“時(shí)間凝固”效果,自由度更高,能夠全方位展示選手的業(yè)務(wù)能力,讓秀粉們解鎖專屬快樂。

另外,《青春有你3》這次的“子彈時(shí)間”對設(shè)備的要求也沒那么苛刻。我用的是非頂配性能的老款手機(jī),互動(dòng)體驗(yàn)依然絲滑,高清畫面的加載也沒有明顯延遲。看完之后我想說:內(nèi)娛還是有點(diǎn)東西的。

黑科技應(yīng)用頻在綜藝節(jié)目中比重越來越大,會(huì)是接下來流媒體平臺(tái)的“流量密碼”嗎?

綜藝新秀自由視角,是如何一步步進(jìn)化的?

隨著4K及8K分辨率視頻的逐漸推廣,平面視頻體驗(yàn)幾乎已經(jīng)達(dá)到了發(fā)展的極限。更高自由度、能給用戶提供更多信息的互動(dòng)式流媒體技術(shù)自然也就引發(fā)了更多關(guān)注。

其中應(yīng)用最早、最為大眾熟悉的互動(dòng)技術(shù)之一,就是子彈時(shí)間。

子彈時(shí)間依托于一種全新的3D視頻制作技術(shù)——自由視角視頻。在《黑客帝國》電影當(dāng)中,特效團(tuán)隊(duì)在攝影棚內(nèi)圓弧形架設(shè)了120臺(tái)攝像機(jī),每臺(tái)攝影機(jī)間隔1秒依序拍攝,再通過特效后制,就能為觀眾展現(xiàn)出全方位環(huán)繞、時(shí)間停滯一般的“上帝視角”。

不過,此前的子彈時(shí)間應(yīng)用只能算是自由視角技術(shù)的初級形態(tài),拍攝的是時(shí)間靜止時(shí)的畫面,觀眾能看到什么是由最終剪輯來決定的,依然無法主動(dòng)獲取任意視角下播放畫面。

在此基礎(chǔ)上,以6DoF(Six degrees of freedom)為目標(biāo),實(shí)現(xiàn)全新交互式體驗(yàn)的“自由視角”應(yīng)用就出現(xiàn)了。

這種新形式可以拍攝進(jìn)程中任意時(shí)間的360度畫面。具體方式一般是在體育比賽場館或綜藝錄制現(xiàn)場架設(shè)高清相機(jī),通過點(diǎn)云重建并在虛擬場景中將各個(gè)角度的2D視頻拼成全景視頻,渲染出360度的視覺效果。用戶可以滑動(dòng)、旋轉(zhuǎn)手機(jī)屏幕來自由選擇被拍攝對象運(yùn)動(dòng)中的任意視角。

不過,由于自由視角的技術(shù)條件要求高,需要攝像機(jī)陣列以毫秒級同步拍攝選手狀態(tài),在硬件部署、視頻壓縮、渲染等方面都帶來了挑戰(zhàn),因此在實(shí)際落地中,節(jié)目制作方一般需要在操作自由度與畫面信息維度之間做出取舍,比如減少攝像機(jī)數(shù)量、再利用AI插幀的方式來彌補(bǔ)體驗(yàn)不足。

而這次《青春有你3》中上線的“子彈時(shí)間”,則是對自由視角落地方案的進(jìn)一步升級。

愛奇藝技術(shù)產(chǎn)品團(tuán)隊(duì)運(yùn)用幾十個(gè)高分辨率的攝像頭從多個(gè)角度捕捉被拍攝物體和場景,還原出三維空間中的場景。再借由獨(dú)有的編解碼、播放技術(shù)方案,緩解網(wǎng)速導(dǎo)致的超高清視頻加載速度過慢這一痛點(diǎn),既能保證高清畫質(zhì),并且對終端設(shè)備的性能要求大幅下降,讓更多人可以低門檻地感受到高自由度觀看的魅力。

在技術(shù)驅(qū)動(dòng)的時(shí)代大幕中,科技手段也成為流媒體產(chǎn)業(yè)逃離同質(zhì)化窠臼的利器。海外有Netflix利用AI算法提升個(gè)性化推薦效果的案例,國內(nèi)則有愛奇藝這樣不斷探索高自由度交互式體驗(yàn)的典范。這種嘗試,也讓愛奇藝又一次在娛樂公司中立穩(wěn)了“技術(shù)人設(shè)”。

穿透體驗(yàn)困境:愛奇藝的技術(shù)“雙叉戟”

對于一項(xiàng)新技術(shù)來說,所覆蓋的觀眾廣度與普及效率顯然是首要任務(wù)。但長期以來,自由視角技術(shù)都存在兩個(gè)基礎(chǔ)難題:

一是視頻高分辨率與自由度之間的矛盾。視頻分辨率從1080p到4K等不斷提升,要實(shí)現(xiàn)大角度、高自由度的交互效果,只有性能很高的手機(jī)能實(shí)現(xiàn)解碼支持,流暢地進(jìn)行播放。

二是網(wǎng)絡(luò)傳輸與流暢度之間的矛盾。高清且高自由度的視頻整體數(shù)據(jù)傳輸量高,對帶寬的需求很大,網(wǎng)絡(luò)環(huán)境不夠理想的觀眾,觀看高自由度視頻的體驗(yàn)會(huì)受影響。

那么,平價(jià)機(jī)型也能玩轉(zhuǎn)的《青春有你3》自由視角,又是怎么實(shí)現(xiàn)的呢?

這次,愛奇藝也祭出了流媒體技術(shù)和數(shù)據(jù)加載解決方案的“雙叉戟”:

一方面,通過編解碼技術(shù),實(shí)現(xiàn)了時(shí)空雙路徑編碼視頻流、多路解碼器并行解碼。具體來說就是可以按時(shí)間、空間兩個(gè)維度對視頻進(jìn)行解碼,時(shí)間維度碼流可以讓用戶在切換觀看視角時(shí)穩(wěn)定加載,空間維度碼流則在靜止場中保證穩(wěn)定精細(xì)化的旋轉(zhuǎn)效果。此外,愛奇藝還通過專利技術(shù)建構(gòu)了多路CPU/GPU復(fù)合解碼器架構(gòu),可以自適應(yīng)多路碼流來進(jìn)行動(dòng)態(tài)解碼,隨著用戶的實(shí)時(shí)視角旋轉(zhuǎn)來切換解碼區(qū)域。然后借助超低延遲的渲染互動(dòng)技術(shù),在用戶轉(zhuǎn)動(dòng)視角時(shí)直接“通知”渲染引擎實(shí)時(shí)更新畫面。

這一套“組合拳”下來,普通終端也能體驗(yàn)到流暢、高清的高自由度視頻。

針對網(wǎng)絡(luò)問題,愛奇藝則使用了創(chuàng)新的“主流+底流”數(shù)據(jù)加載方案。在觀看高自由度視頻時(shí),通過“主流+底流”傳輸可以將數(shù)據(jù)連續(xù)、實(shí)時(shí)地傳送到終端,大幅提高傳輸效率,縮短了互動(dòng)延時(shí),用戶可以流暢地進(jìn)行播放和切換。同時(shí)實(shí)現(xiàn)了GOP級視角數(shù)據(jù)的切換與加載。

憑借技術(shù)創(chuàng)新,更廣泛受眾玩轉(zhuǎn)自由視角的體驗(yàn)障礙,就這樣被愛奇藝一一拔除了。

自由視角的產(chǎn)業(yè)進(jìn)行時(shí):用連鎖反應(yīng)重構(gòu)產(chǎn)業(yè)鏈條

如果自由視角技術(shù)只能應(yīng)用在一部或幾部作品中,必然無法降低平臺(tái)的制作成本,也很難說徹底變革大眾的觀看習(xí)慣。

能夠讓自由視角技術(shù)真正普及的前提,是去掉規(guī)?;瘧?yīng)用的限制,提升技術(shù)的落地效率,才能讓更多綜藝、劇集的觀眾快速感受到新交互體驗(yàn)的魅力所在。

愛奇藝在《青春有你3》中除了技術(shù)落地之外,也對背后的視頻生產(chǎn)與制作環(huán)節(jié)進(jìn)行了改造。

首先,針對自由視角視頻前期硬件投入高,傳統(tǒng)算法效率低,制作風(fēng)險(xiǎn)較大的痛點(diǎn),打造了一系列系統(tǒng)級工具,以期實(shí)現(xiàn)高自由度視頻的智能化拍攝。

比如愛奇藝打造了一套自由視角下的虛擬環(huán)境拍攝系統(tǒng),能夠基于三維渲染技術(shù),渲染出一套和真實(shí)場景及尺寸一致的虛擬場景。制作方可以精確部署虛擬相機(jī)陣列,模擬真實(shí)相機(jī)拍攝素材,低成本、高效率地設(shè)計(jì)出自由視角拍攝相機(jī)陣列的部署方案,降低子彈時(shí)間、點(diǎn)云、自由視點(diǎn)等多種視頻的制作風(fēng)險(xiǎn)。

在實(shí)際拍攝過程中,愛奇藝也通過自研的一套相機(jī)陣列智能調(diào)節(jié)系統(tǒng)將每臺(tái)相機(jī)進(jìn)行參數(shù)標(biāo)定,對它們進(jìn)行統(tǒng)一調(diào)節(jié),將繁雜的部署工作時(shí)間大大縮短。

針對視角切換中可能出現(xiàn)的畫面抖動(dòng),愛奇藝還設(shè)計(jì)了一套畫面穩(wěn)定算法系統(tǒng),可以在視頻拍攝完成后,在后臺(tái)對素材自動(dòng)進(jìn)行穩(wěn)定處理,不用后期制作人員再費(fèi)時(shí)費(fèi)力地手動(dòng)調(diào)節(jié),效果也大大提升。

在后期的視頻制作中,愛奇藝則將攝像機(jī)的控制、基于模板的自由視角視頻編輯與創(chuàng)作、自由視角視頻的導(dǎo)出與回放等功能整合在一起,輸出成了自由視角視頻創(chuàng)作中控系統(tǒng)的整套集成方案。

編導(dǎo)可以基于預(yù)先設(shè)計(jì)好的模板,進(jìn)行現(xiàn)場快捷創(chuàng)作,例如曲線模板編輯,對當(dāng)前錄制場景所產(chǎn)生的實(shí)際效果的效果預(yù)覽。

創(chuàng)作好的自由視角視頻,可輸出到現(xiàn)場導(dǎo)播切換臺(tái)、外部監(jiān)視器及現(xiàn)場大屏等設(shè)備上,方便制作團(tuán)隊(duì)及時(shí)調(diào)整、查漏補(bǔ)缺。

和所有新興技術(shù)一樣,自由視角因?yàn)橥度氪蟆⒊杀靖?、拍攝制作周期長,令內(nèi)容生產(chǎn)者望而卻步。但現(xiàn)在,愛奇藝的一系列生產(chǎn)工具前所未有地提升了高自由度視頻的產(chǎn)業(yè)效率,讓創(chuàng)作者可以低門檻地使用這一技術(shù)來建立內(nèi)容差異化優(yōu)勢。

也就是說,愛奇藝已經(jīng)在高自由度視頻所需要的流媒體技術(shù)、基礎(chǔ)算法、硬件協(xié)同、場景適配、生產(chǎn)制作等關(guān)鍵環(huán)節(jié)上,都有了技術(shù)沉淀,可能引發(fā)的連鎖反應(yīng)將是革命性的,也讓我們看到了流媒體產(chǎn)業(yè)的進(jìn)化方向。

解優(yōu)質(zhì)內(nèi)容之渴,愛奇藝的技術(shù)革命

近年來,自由視角、VR、AR等技術(shù)在流媒體產(chǎn)業(yè)出現(xiàn)的越來越高頻。為什么平臺(tái)們不惜重金,也要在黑科技領(lǐng)域“整活”?

當(dāng)平面視頻已經(jīng)趨近極限的時(shí)候,占據(jù)極高比例的年輕觀眾對多樣化、個(gè)性化的追求,也給內(nèi)容的差異化創(chuàng)新帶來了挑戰(zhàn)。像子彈時(shí)間、自由視角這樣的高自由度視頻,能夠打破平面觀看的束縛,給用戶體驗(yàn)帶來質(zhì)的提升,自然也就成為“兵家必爭之地”。

在此基礎(chǔ)上,愛奇藝選擇更進(jìn)一步,在更上游的生產(chǎn)側(cè)進(jìn)行改造,不僅能夠有效降低高自由度視頻的制作門檻與成本,進(jìn)入良性循環(huán);而且率先建立起了行業(yè)標(biāo)準(zhǔn)和模板,開啟一場內(nèi)容產(chǎn)業(yè)的人才與創(chuàng)意爭奪戰(zhàn)。

這絕對是一件利在當(dāng)下、功在未來的事。

2021年,是內(nèi)地綜藝娛樂進(jìn)入存量競爭的一年,也是內(nèi)容消費(fèi)開始回歸價(jià)值和收獲感的一年。遠(yuǎn)離低質(zhì)、同質(zhì)化、缺乏誠意的節(jié)目和作品,已經(jīng)成為觀眾們迫切且一致的呼喚。

從這一點(diǎn)上看,愛奇藝《青春有你3》上線子彈時(shí)間,也打開了一扇充滿驚喜的大門,包含著高自由度視頻交互體驗(yàn)席卷而來的無限想象。

極客網(wǎng)企業(yè)會(huì)員

免責(zé)聲明:本網(wǎng)站內(nèi)容主要來自原創(chuàng)、合作伙伴供稿和第三方自媒體作者投稿,凡在本網(wǎng)站出現(xiàn)的信息,均僅供參考。本網(wǎng)站將盡力確保所提供信息的準(zhǔn)確性及可靠性,但不保證有關(guān)資料的準(zhǔn)確性及可靠性,讀者在使用前請進(jìn)一步核實(shí),并對任何自主決定的行為負(fù)責(zé)。本網(wǎng)站對有關(guān)資料所引致的錯(cuò)誤、不確或遺漏,概不負(fù)任何法律責(zé)任。任何單位或個(gè)人認(rèn)為本網(wǎng)站中的網(wǎng)頁或鏈接內(nèi)容可能涉嫌侵犯其知識(shí)產(chǎn)權(quán)或存在不實(shí)內(nèi)容時(shí),應(yīng)及時(shí)向本網(wǎng)站提出書面權(quán)利通知或不實(shí)情況說明,并提供身份證明、權(quán)屬證明及詳細(xì)侵權(quán)或不實(shí)情況證明。本網(wǎng)站在收到上述法律文件后,將會(huì)依法盡快聯(lián)系相關(guān)文章源頭核實(shí),溝通刪除相關(guān)內(nèi)容或斷開相關(guān)鏈接。

2021-03-21
《青春有你3》的子彈時(shí)間舞臺(tái),凝筑了自由視角技術(shù)進(jìn)化史
不過,由于自由視角的技術(shù)條件要求高,需要攝像機(jī)陣列以毫秒級同步拍攝選手狀態(tài),在硬件部署、視頻壓縮、渲染等方面都帶來了挑戰(zhàn),因此在實(shí)際落地中,節(jié)目制作方一般需要在操作自由度與畫面信息維度之間做出取舍,

長按掃碼 閱讀全文