字節(jié)跳動(dòng)AVG編碼技術(shù)新突破:讓視頻縮小13%

3月1日消息,據(jù)聯(lián)合視頻專家組JVET官網(wǎng)顯示,字節(jié)跳動(dòng)AVG(先進(jìn)視頻團(tuán)隊(duì))今年2月發(fā)起一項(xiàng)視頻壓縮的技術(shù)提案,該提案能夠在優(yōu)化壓縮質(zhì)量的同時(shí),節(jié)約至少13%的存儲(chǔ)和帶寬。例如,一段180分鐘H.266/VVC標(biāo)準(zhǔn)的高清視頻(1080P分辨率),大約需要3GB的數(shù)據(jù)體積,應(yīng)用新技術(shù)后只需要2.6GB。

視頻是由一張張圖片連接起來(lái)的動(dòng)態(tài)圖像序列,視頻編解碼則是視頻應(yīng)用的底層核心技術(shù),作用是對(duì)圖像進(jìn)行壓縮和數(shù)字編碼,以盡可能小的帶寬傳送高質(zhì)量的視頻數(shù)據(jù)。H.266/VVC能夠在不影響畫質(zhì)的情況下,把視頻碼率降低到前一代標(biāo)準(zhǔn)H.265/HEVC的一半。本來(lái)只夠放標(biāo)清視頻的網(wǎng)速,也能流暢播放高清視頻。

此次字節(jié)跳動(dòng)AVG提出的新算法,旨在通過(guò)深度學(xué)習(xí)技術(shù)構(gòu)建減少視頻壓縮失真的濾波器(DAM),主干是基于殘差單元堆疊的深度卷積網(wǎng)絡(luò),輔以自適應(yīng)模型選擇以最大程度適應(yīng)特性復(fù)雜的自然視頻。所謂殘差單元是指通過(guò)引入跳層連接,允許網(wǎng)絡(luò)把注意力放在變化的殘差上,這與視頻圖像幀之間的殘差有異曲同工之妙,比如武林高手決斗,“劍光一閃”,每一幀圖像絕大部分內(nèi)容是相同的,閃動(dòng)的劍光形成殘差,這也是視頻編碼壓縮的重點(diǎn)關(guān)注對(duì)象。

實(shí)驗(yàn)結(jié)果顯示,相比H.266/VVC最新標(biāo)準(zhǔn),字節(jié)跳動(dòng)的DAM解決方案能夠?yàn)橐曨l編碼性能帶來(lái)顯著提升,亮度信號(hào)Y可實(shí)現(xiàn)10.28%的性能增益,兩個(gè)色度信號(hào)U和V,性能增益也分別達(dá)到28.22%和27.97%,在視頻質(zhì)量有所優(yōu)化的同時(shí),至少還可縮小13%的數(shù)據(jù)體積。

據(jù)悉,AVG的各項(xiàng)研究成果,也將通過(guò)BVC編碼器的升級(jí)換代投入應(yīng)用,包括抖音、西瓜視頻、今日頭條等App的視頻類內(nèi)容處理,以及云計(jì)算、云游戲等基礎(chǔ)架構(gòu)領(lǐng)域。

根據(jù)公開(kāi)報(bào)道,字節(jié)跳動(dòng)AVG在美國(guó)加州建立研發(fā)團(tuán)隊(duì),成員有來(lái)自高通、微軟、英特爾等巨頭的資深研究員,也有出身海內(nèi)外頂級(jí)院校的新生代。在此前JVET制定新一代國(guó)際視頻編解碼標(biāo)準(zhǔn)H.266/VVC的過(guò)程中,字節(jié)跳動(dòng)AVG累計(jì)提交260+項(xiàng)技術(shù)提案,其中130+項(xiàng)被采納,被采納提案數(shù)和采納率均排在世界前列,是H.266/VVC核心算法的主要貢獻(xiàn)者之一。

極客網(wǎng)企業(yè)會(huì)員

免責(zé)聲明:本網(wǎng)站內(nèi)容主要來(lái)自原創(chuàng)、合作伙伴供稿和第三方自媒體作者投稿,凡在本網(wǎng)站出現(xiàn)的信息,均僅供參考。本網(wǎng)站將盡力確保所提供信息的準(zhǔn)確性及可靠性,但不保證有關(guān)資料的準(zhǔn)確性及可靠性,讀者在使用前請(qǐng)進(jìn)一步核實(shí),并對(duì)任何自主決定的行為負(fù)責(zé)。本網(wǎng)站對(duì)有關(guān)資料所引致的錯(cuò)誤、不確或遺漏,概不負(fù)任何法律責(zé)任。任何單位或個(gè)人認(rèn)為本網(wǎng)站中的網(wǎng)頁(yè)或鏈接內(nèi)容可能涉嫌侵犯其知識(shí)產(chǎn)權(quán)或存在不實(shí)內(nèi)容時(shí),應(yīng)及時(shí)向本網(wǎng)站提出書面權(quán)利通知或不實(shí)情況說(shuō)明,并提供身份證明、權(quán)屬證明及詳細(xì)侵權(quán)或不實(shí)情況證明。本網(wǎng)站在收到上述法律文件后,將會(huì)依法盡快聯(lián)系相關(guān)文章源頭核實(shí),溝通刪除相關(guān)內(nèi)容或斷開(kāi)相關(guān)鏈接。

2021-03-01
字節(jié)跳動(dòng)AVG編碼技術(shù)新突破:讓視頻縮小13%
3月1日消息,據(jù)聯(lián)合視頻專家組JVET官網(wǎng)顯示,字節(jié)跳動(dòng)AVG(先進(jìn)視頻團(tuán)隊(duì))今年2月發(fā)起一項(xiàng)視頻壓縮的技術(shù)?

長(zhǎng)按掃碼 閱讀全文