無(wú)限想象，音視頻技術(shù)實(shí)踐與創(chuàng)新應(yīng)用

作者：Qcon 王利瑩

10 月 17 日，ZEGO即構(gòu) & QCon “一觸即發(fā)· ZEGO 音視頻技術(shù)交流夜”晚場(chǎng)活動(dòng)在上海舉辦?，F(xiàn)場(chǎng)，首先由ZEGO即構(gòu)科技聯(lián)合創(chuàng)始人蔣寧波，進(jìn)行了《音視頻技術(shù)探索實(shí)踐之路》的主題分享。

隨后在 Lean Coffee 環(huán)節(jié)，圍繞音視頻技術(shù) 6 個(gè)主題，六位技術(shù)專(zhuān)家與開(kāi)發(fā)者們就音視頻技術(shù)與應(yīng)用進(jìn)行了深度的探討交流。 以下是音視頻技術(shù)交流夜的主要內(nèi)容回顧，感謝Qcon的整理編輯：

即構(gòu)音視頻技術(shù)探索與實(shí)踐

在交流夜的主題分享環(huán)節(jié)，ZEGO即構(gòu)科技聯(lián)合創(chuàng)始人蔣寧波，首先向我們展示了即構(gòu) 18 年深厚的音視頻技術(shù)積累：

連接 5 億+終端用戶(hù)，服務(wù)覆蓋全球超過(guò) 200 個(gè)國(guó)家和地區(qū)，每日通話(huà)時(shí)長(zhǎng) 6 億+分鐘，兼容 8000+ 硬件機(jī)型，端到端 80ms 超低延時(shí)。

在這些數(shù)字背后，是ZEGO即構(gòu)在技術(shù)和產(chǎn)品上不斷的創(chuàng)新探索。

技術(shù)上：

2015 年，全球推出直播連麥技術(shù)，讓低延遲連麥互動(dòng)成為直播標(biāo)配;

2017 年，全球推出 32 路視頻通話(huà)技術(shù)，比蘋(píng)果 Facetime 早一年;

2018 年，上線(xiàn) WebRTC-Gateway系統(tǒng)，打造全終端音視頻云服務(wù)體系;

2019 年，上線(xiàn)全球服務(wù)撥測(cè)系統(tǒng)和全球多中心實(shí)時(shí)音視頻調(diào)度系統(tǒng);

產(chǎn)品上：

推出以互動(dòng)視頻、實(shí)時(shí)語(yǔ)音、語(yǔ)聊房為代表的 PaaS 產(chǎn)品;以 TalkLine 視頻會(huì)議為主的 SaaS 產(chǎn)品;為金融、政企、軍工等服務(wù)的私有化部署產(chǎn)品。產(chǎn)品廣泛應(yīng)用于秀場(chǎng)直播、社交、游戲、在線(xiàn)教育、在線(xiàn)醫(yī)療、智能硬件、金融等多個(gè)行業(yè)，為客戶(hù)快速提供音視頻通話(huà)能力。

ZEGO即構(gòu)在音視頻領(lǐng)域的實(shí)踐，繞不開(kāi)自研的底層音視頻引擎?；谧匝屑夹g(shù)，即構(gòu)能快速響應(yīng)客戶(hù)多樣化的需求，實(shí)現(xiàn)產(chǎn)品和技術(shù)的靈活拓展。 隨著 5G 技術(shù)的發(fā)展，ZEGO即構(gòu)十分看好 5G 為音視頻帶來(lái)的超帶寬、低延時(shí)應(yīng)用。此前ZEGO即構(gòu)已經(jīng)成立 5G 音視頻實(shí)驗(yàn)室，研發(fā)并上線(xiàn)了 5G+4K 超高清直播應(yīng)用，未來(lái)還將探索 “5G+音視頻”的更多可能。

音視頻技術(shù)賦能新世界

Lean Coffee 環(huán)節(jié)，來(lái)自不同企業(yè)的音視頻開(kāi)發(fā)者們齊聚一堂，圍繞 WebRTC、高并發(fā)、QoE、編解碼、音頻3A處理、 AI+4K六個(gè)話(huà)題，共同探討遇到的問(wèn)題及解決思路。 WebRTC

WebRTC 作為目前流行的實(shí)時(shí)音視頻開(kāi)源技術(shù)，小組討論的方向有三個(gè)：

第一，對(duì) WebRTC 有興趣，但是從未接觸過(guò)的研發(fā)人員，要如何開(kāi)始 WebRTC 技術(shù)的學(xué)習(xí)和應(yīng)用?ZEGO即構(gòu)引擎組的技術(shù)專(zhuān)家向大家分享了 WebRTC 快速上手的心得;

第二，關(guān)于 WebRTC 前端兼容性問(wèn)題，小組內(nèi)就設(shè)備互通性、兼容性效果進(jìn)行了探討;

第三，關(guān)于 WebRTC 后端問(wèn)題，由于 WebRTC 是通過(guò) P2P 傳輸?shù)?，但在?shí)際業(yè)務(wù)場(chǎng)景中，幾乎沒(méi)有直接通過(guò) P2P 傳輸?shù)?，所以需要搭建一個(gè)網(wǎng)關(guān)，比如ZEGO即構(gòu)的 WebRTC-Gateway 系統(tǒng)。

WebRTC 是開(kāi)源技術(shù)，隱藏的“坑”眾多。既有 WebRTC 本身的難點(diǎn)，比如 RTCP 協(xié)議、重傳、帶寬評(píng)估，也有像組網(wǎng)等后端普遍存在的問(wèn)題，那么對(duì)于在 WebRTC 技術(shù)上沒(méi)有太多經(jīng)驗(yàn)的客戶(hù)來(lái)說(shuō)，與ZEGO即構(gòu)這種第三方技術(shù)商合作是避免踩坑最有效的方式。

高并發(fā)

高并發(fā)小組討論的內(nèi)容集中在回源、調(diào)度、高并發(fā)方面，ZEGO即構(gòu)后臺(tái)組技術(shù)專(zhuān)家簡(jiǎn)單分享了即構(gòu)在這方面的技術(shù)實(shí)踐：

回源，即服務(wù)器到服務(wù)器之間的數(shù)據(jù)傳輸。ZEGO即構(gòu)會(huì)根據(jù)鏈路、節(jié)點(diǎn)質(zhì)量等去選擇最優(yōu)的線(xiàn)路，為用戶(hù)提供流暢低延時(shí)的實(shí)時(shí)流媒體的傳輸; 調(diào)度方面，ZEGO即構(gòu)自研的全球智能調(diào)度系統(tǒng)，與基于 DNS 解析的調(diào)度相比有較大優(yōu)勢(shì)：ZEGO即構(gòu)能夠根據(jù)用戶(hù)的地理位置及歸屬的不同運(yùn)營(yíng)商，選擇不同的設(shè)備，并且在容災(zāi)上做了很多工作，比如給客戶(hù)端返回多個(gè) IDC 節(jié)點(diǎn)，盡可能保障用戶(hù)服務(wù)的可用性。

高并發(fā)方面，ZEGO即構(gòu)可以支持大量用戶(hù)同時(shí)推拉流，并且支持大房間場(chǎng)景，提供穩(wěn)定流暢的實(shí)時(shí)音視頻服務(wù)。

QoE

在QoE (用戶(hù)質(zhì)量體驗(yàn))方面，來(lái)自ZEGO即構(gòu)的解決方案架構(gòu)師做了簡(jiǎn)短的分享。

在實(shí)際業(yè)務(wù)場(chǎng)景中經(jīng)常出現(xiàn)的一個(gè)場(chǎng)景是：開(kāi)發(fā)小伙伴經(jīng)常聽(tīng)到運(yùn)營(yíng)人員說(shuō)“用戶(hù)反饋卡了”，但是，沒(méi)有相關(guān)的指標(biāo)或者數(shù)據(jù)提供，開(kāi)發(fā)人員也束手無(wú)策。 基于此，小組成員感興趣的是，ZEGO即構(gòu)有著 5億+的龐大用戶(hù)群體，是如何依靠全球多中心實(shí)時(shí)調(diào)度系統(tǒng)，保障用戶(hù)的真實(shí)體驗(yàn)?

首先，ZEGO即構(gòu)今年上線(xiàn)了全球撥測(cè)系統(tǒng)，會(huì)對(duì)可能有故障的線(xiàn)路提前進(jìn)行預(yù)警和規(guī)避;

其次，根據(jù)每日大量的線(xiàn)上用戶(hù)實(shí)時(shí)數(shù)據(jù)，ZEGO即構(gòu)的調(diào)度系統(tǒng)能實(shí)時(shí)查看哪些地區(qū)哪些用戶(hù)訪(fǎng)問(wèn)哪些運(yùn)營(yíng)商，甚至哪些邊緣節(jié)點(diǎn)的 IP 到哪些中間節(jié)點(diǎn) IP，傳輸效果是最好的，然后ZEGO即構(gòu)的實(shí)時(shí)推拉流，根據(jù)實(shí)時(shí)配置文件下發(fā)的 IP 進(jìn)行;

第三，ZEGO即構(gòu)開(kāi)放全面的線(xiàn)上數(shù)據(jù)分析診斷，讓用戶(hù)快速定位“哪里卡，為什么卡，用戶(hù)哪些動(dòng)作導(dǎo)致卡”。 此外，現(xiàn)場(chǎng)還有關(guān)于AI 與音視頻行業(yè)的結(jié)合、4K 超高清技術(shù)帶來(lái)的極致視聽(tīng)體驗(yàn)、復(fù)雜網(wǎng)絡(luò)對(duì)音頻的沖擊等話(huà)題的分享，各種碰撞在開(kāi)發(fā)者中間產(chǎn)生。

在音視頻交流夜上，我們看到了為滿(mǎn)足多場(chǎng)景應(yīng)用，ZEGO即構(gòu)進(jìn)行的多項(xiàng)技術(shù)創(chuàng)新，通過(guò)與現(xiàn)場(chǎng)眾多從業(yè)者的互動(dòng)交流，我們能看到音視頻技術(shù)應(yīng)用的多種可能性。一個(gè)通過(guò)實(shí)時(shí)音視頻連接的世界即將到來(lái)，讓我們共同期待!

生成海報(bào)

免責(zé)聲明：本網(wǎng)站內(nèi)容主要來(lái)自原創(chuàng)、合作伙伴供稿和第三方自媒體作者投稿，凡在本網(wǎng)站出現(xiàn)的信息，均僅供參考。本網(wǎng)站將盡力確保所提供信息的準(zhǔn)確性及可靠性，但不保證有關(guān)資料的準(zhǔn)確性及可靠性，讀者在使用前請(qǐng)進(jìn)一步核實(shí)，并對(duì)任何自主決定的行為負(fù)責(zé)。本網(wǎng)站對(duì)有關(guān)資料所引致的錯(cuò)誤、不確或遺漏，概不負(fù)任何法律責(zé)任。任何單位或個(gè)人認(rèn)為本網(wǎng)站中的網(wǎng)頁(yè)或鏈接內(nèi)容可能涉嫌侵犯其知識(shí)產(chǎn)權(quán)或存在不實(shí)內(nèi)容時(shí)，應(yīng)及時(shí)向本網(wǎng)站提出書(shū)面權(quán)利通知或不實(shí)情況說(shuō)明，并提供身份證明、權(quán)屬證明及詳細(xì)侵權(quán)或不實(shí)情況證明。本網(wǎng)站在收到上述法律文件后，將會(huì)依法盡快聯(lián)系相關(guān)文章源頭核實(shí)，溝通刪除相關(guān)內(nèi)容或斷開(kāi)相關(guān)鏈接。