1994年，滾石樂隊(duì)首次決定對他們的演唱會進(jìn)行網(wǎng)絡(luò)直播，在滾石登場前的半小時，處在不同城市的Severe Tire Damage(STD)樂隊(duì)似乎是作為暖場嘉賓出現(xiàn)的，他們表演了20分鐘，并且完成了很好的直播音畫效果，自此被記錄為世界上第一支現(xiàn)場音樂流，有關(guān)實(shí)時音視頻技術(shù)的迭代與商業(yè)應(yīng)用自此開啟。
如今隨著物聯(lián)網(wǎng)帶來巨大產(chǎn)業(yè)機(jī)遇，實(shí)時音視頻在解決“人與硬件設(shè)備”交流溝通方面同樣持續(xù)獲得成果，不同種類的音視頻智能硬件滲透到了人們生活的方方面面，并且它們?nèi)栽诟碌?，時刻刷新智能時代的產(chǎn)業(yè)面貌。
10月24-25日，RTE2023第九屆實(shí)時互聯(lián)網(wǎng)大會在北京隆重召開，其中25日上午舉行的IoT專場以「RTC+IoT構(gòu)建萬物互聯(lián)互動底座」為主題，邀請了中國信通院汽車云工作組組長馬龍飛、聲網(wǎng)IoT行業(yè)產(chǎn)品總監(jiān)馮曉東、賦之大產(chǎn)品線與業(yè)務(wù)負(fù)責(zé)人夏大偉、移遠(yuǎn)通信云產(chǎn)品部高級產(chǎn)品經(jīng)理方飛、聲網(wǎng)平行操控技術(shù)負(fù)責(zé)人張樂陶、低速無人駕駛聯(lián)盟秘書長李進(jìn)科、馭勢戰(zhàn)略產(chǎn)品部負(fù)責(zé)人蔡堯、九號機(jī)器人自動駕駛與AI產(chǎn)品線負(fù)責(zé)人胡哲華等行業(yè)大咖出席并參與分享，分享主題涵蓋消費(fèi)端智能家居、產(chǎn)業(yè)端平行操控兩大領(lǐng)域，全面展現(xiàn)RTC與IoT融合的價值與魅力。
智能家居下半場 進(jìn)入真互動時代
隨著各類型的音視頻硬件設(shè)備充斥生活，聲網(wǎng)IoT行業(yè)產(chǎn)品總監(jiān)馮曉東表示智能硬件已進(jìn)入真互動時代。在“人與物”的互動形式基礎(chǔ)上，人們對互動體驗(yàn)的要求變得更加豐富、更加細(xì)致，比如期待能隨時隨地、遠(yuǎn)距離、多角度、多人完成互動;比如希望感受更低的延遲、更高清的畫面、更高保真/立體的聲音。
在用戶需求升級的推動下，智能家居場景的設(shè)備也呈現(xiàn)出普遍的進(jìn)化方向，即通過增加攝像頭和屏幕來加強(qiáng)實(shí)時互動，最典型的是帶貓眼和屏幕的智能門鎖廣受歡迎，其他品類如智能手表、智能音箱、智能寵物喂食器等也都有增加攝像頭或屏幕的新品推向市場。
馮曉東介紹，過去硬件本身的性能可能決定了用戶體驗(yàn)的上限，但聲網(wǎng)的IoT解決方案通過軟件算法打破硬件上限，在不增加硬件成本的情況下，通過客戶端的視頻增強(qiáng)方式，基于深度學(xué)習(xí)的自研超分算法，可以支持1.5倍、2倍、3倍的移動端實(shí)時超分，幫助硬件從360P增加到720P，提升畫質(zhì)清晰度。
不僅如此，聲網(wǎng)的多項(xiàng)音視頻黑科技不斷刷新用戶互動體驗(yàn)天花板，有專為實(shí)時互動打造的自研高清語音引擎、視頻增強(qiáng)策略、實(shí)時美聲算法、AI降噪和回聲消除能力等技術(shù)，讓用戶擁有更高保真、更趣味、更高清畫質(zhì)的音視頻體驗(yàn)。
在門鈴門鎖場景，聲網(wǎng)聯(lián)合信通院泰爾實(shí)驗(yàn)室聯(lián)合發(fā)布門鈴門鎖新標(biāo)準(zhǔn)，為品牌廠商提供了從定義體驗(yàn)指標(biāo)到測試體驗(yàn)指標(biāo)的參考依據(jù)。
此外，聲網(wǎng)的IoT解決方案擁有顯著的跨平臺互聯(lián)互通能力，包括對Linux、Android、Harmony、FreeRTOS、AliOS、LiteOS等各類型操作系統(tǒng)都完成了深度適配，以及支持與Native、Web、小程序、Amazon Alexa、Google Assistant的互通。
用實(shí)時互動硬件設(shè)備 增強(qiáng)家庭情感連接
賦之科技選擇切入家庭機(jī)器人賽道也是因?yàn)闀r下技術(shù)、需求和場景的推動。
在這之中，由于全球范圍內(nèi)寵物數(shù)量上升及整體消費(fèi)能力升級，賦之科技首先推出寵物守護(hù)機(jī)器人，目前憑EBO Air、EBO SE兩款成熟產(chǎn)品在全球獲得35萬用戶，其中近80% 的用戶為寵物主，剩余部分用戶使用該類產(chǎn)品滿足輕安防需求。
另外，賦之科技也計劃把家庭機(jī)器人的服務(wù)場景擴(kuò)大到所有成員，因此推出了EBO X 綜合型家庭服務(wù)機(jī)器人，用戶包括老人、兒童、寵物等。
EBO X的功能包括三大類：1)安全守護(hù)，支持老人跌倒提醒、嬰兒/兒童哭聲&呼救聲提醒、特定區(qū)域闖入提醒、定點(diǎn)&移動巡航安防;2)溫暖陪伴，支持遠(yuǎn)程雙向?qū)崟r通訊、多人共享登錄、私人智能助理、寵物陪玩;3)娛樂酷玩，支持哈曼音質(zhì)、豐富燈效、海量互聯(lián)網(wǎng)內(nèi)容服務(wù)等。賦之大產(chǎn)品線與業(yè)務(wù)負(fù)責(zé)人夏大偉表示：“在涉及產(chǎn)品音視頻通話能力方面，聲網(wǎng)為賦之科技提供了重要的經(jīng)驗(yàn)分享和技術(shù)支撐。”
IoT+RTC 完整解決方案將推動產(chǎn)業(yè)升級
在智能硬件誕生的過程中，為設(shè)備獲取通信能力都是必要的。此次大會上，移遠(yuǎn)通信云產(chǎn)品部高級產(chǎn)品經(jīng)理方飛介紹了移遠(yuǎn)通信智能模組產(chǎn)品已經(jīng)滲透到大多數(shù)智能硬件和智能設(shè)備中，并同時為客戶提供開發(fā)者中心(IoTHub)、APP、SaaS垂直行業(yè)應(yīng)用解決方案等一系列軟件服務(wù)，全方位幫助智能硬件快速升級。
此外，方飛以移遠(yuǎn)通信低功耗可視門鎖解決方案為例，表示智能硬件的完整功能構(gòu)建需要IoT技術(shù)和RTC技術(shù)的互相融合。方飛表示，該門鎖解決方案支持可視對講、遠(yuǎn)程開門、異常告警、低功耗、設(shè)備分享、設(shè)備管理、設(shè)備OTA、云存儲等，既需要移遠(yuǎn)模組及移遠(yuǎn)IoT基座能力，也需要聲網(wǎng)專業(yè)的全場景實(shí)時音視頻互動能力。
應(yīng)用在家居安防、戶外監(jiān)控、在崗門衛(wèi)、商超看店、梯控對講等其他場景，IoT結(jié)合RTC都將為智能硬件創(chuàng)造新的功能和體驗(yàn)，IoT+RTC的融合范圍實(shí)則非常廣泛。
方飛形容：“如果我們把整個數(shù)字世界比作一個人，IoT是屬于人的感官和認(rèn)知，它去感知并連接物理世界;RTC就是關(guān)鍵環(huán)節(jié)中的血脈和神經(jīng)，通過實(shí)時高密度的媒體數(shù)據(jù)來連接人和物理世界。”
RTC結(jié)合智能網(wǎng)聯(lián)汽車 以標(biāo)準(zhǔn)規(guī)范產(chǎn)業(yè)發(fā)展
除了智能家居場景，本場大會的另一主題場景是平行操控。在提及與“車”相關(guān)的話題時，中國信通院汽車云工作組組長馬龍飛表示汽車工業(yè)正在經(jīng)歷新四化變革(電氣化、智能化、網(wǎng)聯(lián)化、共享化)，隨著自動駕駛技術(shù)的不斷發(fā)展以及云計算、5G等通信技術(shù)的廣泛應(yīng)用，智能網(wǎng)聯(lián)汽車已經(jīng)成為汽車行業(yè)的重要發(fā)展趨勢。隨著智能網(wǎng)聯(lián)汽車行業(yè)的快速發(fā)展，汽車云上遠(yuǎn)程運(yùn)維能力的需求日益凸顯，各種遠(yuǎn)程運(yùn)維平臺如雨后春筍般涌現(xiàn)，但由于行業(yè)內(nèi)缺乏統(tǒng)一的標(biāo)準(zhǔn)，導(dǎo)致行業(yè)內(nèi)大部分平臺在技術(shù)、能力上存在較大差異，進(jìn)而各大車廠遠(yuǎn)程運(yùn)維能力參差不齊，其安全性和可靠性也難以保障。
在此背景下，由信通院牽頭，聯(lián)合頭部整車廠、軟件開發(fā)商、解決方案商、學(xué)術(shù)產(chǎn)業(yè)共同參與的《智能網(wǎng)聯(lián)汽車遠(yuǎn)程運(yùn)維能力總體要求》公開面世，《要求》分為功能性和保障性兩大部分，其中功能性的包括車輛監(jiān)測、遠(yuǎn)程排障遠(yuǎn)程干能預(yù)三項(xiàng)能力，保障性的包括平臺管理和安全管理兩項(xiàng)能力。
功能性能力要求主要關(guān)注遠(yuǎn)程運(yùn)維平臺直接服務(wù)于終端用戶的能力，包括讓用戶“隨時可看”的車輛監(jiān)測能力、讓用戶在“運(yùn)營結(jié)束后可管”的遠(yuǎn)程排障能力和在“運(yùn)營過程中可控”的遠(yuǎn)程干預(yù)能力。
保障性能力要求則主要關(guān)注如何保障上述功能性能力可以在終端用戶的基礎(chǔ)設(shè)施中被安全地和可靠地使用，包括支撐運(yùn)維服務(wù)運(yùn)轉(zhuǎn)的平臺基礎(chǔ)系統(tǒng)能力，保障運(yùn)維功能模塊可靠高效運(yùn)行的平臺管理能力，以及確保運(yùn)維過程和數(shù)據(jù)安全的安全管理能力。
馬龍飛進(jìn)一步表示，聲網(wǎng)在遠(yuǎn)程駕駛車輛的功能和分級指標(biāo)等方面為《要求》做出了貢獻(xiàn)，主要有：1)通過回傳視頻查看現(xiàn)場實(shí)時畫面，并通過信令通道對車輛進(jìn)行遠(yuǎn)程控制，以實(shí)現(xiàn)遠(yuǎn)程駕駛車輛的功能;2)建立3級指標(biāo)，根據(jù)在弱網(wǎng)、延遲、卡頓率、畫質(zhì)、車速、指令延時等不同范圍，提供標(biāo)準(zhǔn)支持。
超低延時助力平行操控極致體驗(yàn)
在現(xiàn)場，聲網(wǎng)平行操控技術(shù)負(fù)責(zé)人張樂陶從低延時的技術(shù)層面，全方面講述了平行操控的意義、應(yīng)用場景與創(chuàng)新方案。
平行操控，指遠(yuǎn)程操控，通過超低延時視頻傳輸技術(shù)結(jié)合實(shí)時信令技術(shù)，遠(yuǎn)程操控遠(yuǎn)端的無人車或者機(jī)械設(shè)備,使用戶突破距離限制，可以操作幾百甚至上千公里外的設(shè)備。
目前，平行操控的應(yīng)用場景集中在機(jī)場、港口、物流配送等應(yīng)急接管場景;礦區(qū)、化工等高危/惡劣環(huán)境場景;以及云賽車、無人機(jī)、機(jī)器人操控等遠(yuǎn)程服務(wù)場景。運(yùn)維形式基本是機(jī)器替代人在當(dāng)時場景下高可靠、高穩(wěn)定地完成部分或全部作業(yè)。
聲網(wǎng)平行操控技術(shù)負(fù)責(zé)人張樂陶介紹，網(wǎng)絡(luò)的差異性和多樣化給遠(yuǎn)程駕駛和操控帶了很大的挑戰(zhàn)，為保證車輛的安全運(yùn)行，業(yè)務(wù)場景對音視頻的延時需求較高。對此聲網(wǎng)的平行操控解決方案給出了端到端的全鏈路延時優(yōu)化方案，涵蓋了設(shè)備端的深度適配、底層傳輸大網(wǎng)、操控端多端支持等全套解決方案。
在設(shè)備端，深度適配了Nvidia Jetson生態(tài)，提供從采集、編碼到傳輸全套功能，支持車規(guī)級GMSL攝像頭的采集，支持超低延時信令。在操控端，基于Native深度優(yōu)化，提供主流終端平臺的SDK。而依靠聲網(wǎng)自研的SD-RTN傳輸大網(wǎng)，能實(shí)現(xiàn)全球端到端延時中位數(shù)76ms，能高質(zhì)量保障遠(yuǎn)程操控過程中車輛畫面的低延時傳輸。此外，該解決方案提供云端錄制服務(wù)，支持記錄用戶每次遠(yuǎn)程遙控的全過程并提供回看。在部署形式上，方案支持公網(wǎng)和私有化部署兩種類型。
“聲網(wǎng)的平行操控方案，在大量實(shí)際常規(guī)場景下的性能表現(xiàn)為：在4G路測弱網(wǎng)環(huán)境，視頻端到端延時低至100ms，95分位數(shù)為180ms，充分滿足脫困場景下延時不能高于200毫秒的行業(yè)要求。”張樂陶介紹。
圓桌會議：平行操控如何助力無人車體驗(yàn)升級?
大會最后的圓桌環(huán)節(jié)由低速無人駕駛聯(lián)盟秘書長李進(jìn)科擔(dān)任主持，中國信通信院汽車云工作組組長馬龍飛、聲網(wǎng)IoT行業(yè)產(chǎn)品總監(jiān)馮曉東、馭勢戰(zhàn)略產(chǎn)品部負(fù)責(zé)人蔡堯、九號機(jī)器人自動駕駛與AI產(chǎn)品線負(fù)責(zé)人胡哲華作為嘉賓分享了一系列前沿觀點(diǎn)和實(shí)踐經(jīng)驗(yàn)。
馮曉東：“從我們的角度來看，目前無人車體驗(yàn)上最關(guān)注兩點(diǎn)要求，一是盡可能低時延獲取實(shí)時畫面，二是在弱網(wǎng)情況下也能做到實(shí)時傳輸。”
蔡堯：“在技術(shù)商業(yè)化過程中，除了平行駕駛技術(shù)和網(wǎng)絡(luò)條件，實(shí)際可能還會引入更多策略。比如在極端網(wǎng)絡(luò)條件下，系統(tǒng)有意識選擇特定的攝像頭進(jìn)行監(jiān)控，關(guān)閉其他短時非必要的視頻流來減少帶寬;又比如在車端增加基礎(chǔ)的感知和邊緣計算能力，確保在網(wǎng)絡(luò)失效情況下也能保證基礎(chǔ)安全。”
馬龍飛：“無人駕駛場景的落地首先是涉及到數(shù)據(jù)采集，目前行業(yè)內(nèi)標(biāo)準(zhǔn)化的動作和政策指導(dǎo)還不是特別完備，還需要做更好的分級規(guī)范。”
胡哲華：“無人車一定需要根據(jù)當(dāng)?shù)丨h(huán)境做很多本地化的工作，無論是氣候溫度、網(wǎng)絡(luò)基礎(chǔ)設(shè)施條件、社會穩(wěn)定狀況等，都可能會對無人車的運(yùn)行效果產(chǎn)生影響。”
（免責(zé)聲明：本網(wǎng)站內(nèi)容主要來自原創(chuàng)、合作伙伴供稿和第三方自媒體作者投稿，凡在本網(wǎng)站出現(xiàn)的信息，均僅供參考。本網(wǎng)站將盡力確保所提供信息的準(zhǔn)確性及可靠性，但不保證有關(guān)資料的準(zhǔn)確性及可靠性，讀者在使用前請進(jìn)一步核實(shí)，并對任何自主決定的行為負(fù)責(zé)。本網(wǎng)站對有關(guān)資料所引致的錯誤、不確或遺漏，概不負(fù)任何法律責(zé)任。
任何單位或個人認(rèn)為本網(wǎng)站中的網(wǎng)頁或鏈接內(nèi)容可能涉嫌侵犯其知識產(chǎn)權(quán)或存在不實(shí)內(nèi)容時，應(yīng)及時向本網(wǎng)站提出書面權(quán)利通知或不實(shí)情況說明，并提供身份證明、權(quán)屬證明及詳細(xì)侵權(quán)或不實(shí)情況證明。本網(wǎng)站在收到上述法律文件后，將會依法盡快聯(lián)系相關(guān)文章源頭核實(shí)，溝通刪除相關(guān)內(nèi)容或斷開相關(guān)鏈接。 ）
