疫情與科技雙輪驅(qū)動(dòng),徹底改變了人類社會(huì),線上會(huì)議、云上辦公、遠(yuǎn)程醫(yī)療,很多新的協(xié)作方式應(yīng)運(yùn)而生。
哪類場(chǎng)景是受益技術(shù)落地應(yīng)用頗深的呢?
釘釘、騰訊會(huì)議等依托已有的用戶打造了方便實(shí)用的會(huì)議工具,AI公司推出了相關(guān)的會(huì)議場(chǎng)景解決方案,也有一些VR、AR科技公司開(kāi)始拓展在線會(huì)議的邊界,想在細(xì)分領(lǐng)域開(kāi)拓一片天地。
今年的中關(guān)村論壇將繼續(xù)發(fā)揮科技辦會(huì)的優(yōu)勢(shì),利用多項(xiàng)黑科技全面提升參會(huì)體驗(yàn)。在2021中關(guān)村論壇中多項(xiàng)科技辦會(huì)應(yīng)用,也將直接落地到了北京冬奧會(huì)中。
一:從內(nèi)到外,科技凸顯中國(guó)式防疫的力量
疫情期間舉辦如此規(guī)格與規(guī)模的論壇,防疫工作必然是重中之重。
首先,根據(jù)不同功能需求,在關(guān)鍵區(qū)域和出入口布設(shè)睿家科技智能安檢測(cè)溫系統(tǒng)及曠視明驥智能體溫篩查比對(duì)系統(tǒng)。前者用于在安檢處快速核驗(yàn)個(gè)人健康防疫信息,后者用于在人員密集處快速篩查體溫。
值得一提的是,睿家科技智能安檢測(cè)溫系統(tǒng)可以做到一秒七步合一:身份識(shí)別、智能測(cè)溫、健康碼、核酸檢測(cè)、疫苗接種、公安聯(lián)網(wǎng)、電子登記。
會(huì)場(chǎng)還布置了氣溶膠新冠病毒監(jiān)測(cè)系統(tǒng),利用生物氣溶膠采樣器直接將空氣中新冠病毒顆粒采集至檢測(cè)芯片裂解液腔室,芯片放入病原體核酸分析儀后,可全自動(dòng)完成核酸提取與擴(kuò)增檢測(cè),實(shí)現(xiàn)“樣品入-結(jié)果出”式的高靈敏檢測(cè)。
二:MR全景會(huì)場(chǎng),云上論壇開(kāi)啟融合的世界
辦會(huì)期間的科技防疫是基礎(chǔ)操作,科技對(duì)會(huì)議主體內(nèi)容的賦能更能突顯智慧。
3G時(shí)代人與人之間的溝通更快了,4G時(shí)代物與物連成了物聯(lián)網(wǎng),5G時(shí)代,人、物、數(shù)據(jù)將更加深度的綁定在一起,現(xiàn)實(shí)世界和虛擬世界也會(huì)加速融合。
無(wú)論VR還是AR,都會(huì)讓人感覺(jué)到真實(shí)和虛擬世界的割裂,缺乏沉浸式的體驗(yàn),本次云上論壇,將同步在MR(混合現(xiàn)實(shí))全景會(huì)場(chǎng)中舉辦,融合實(shí)景全景+三維模型,還原真實(shí)的會(huì)場(chǎng)空間,將多種融媒體整合、讓觀眾可以在線上得到身臨其境的沉浸式體驗(yàn)。
那MR和本就融合了現(xiàn)實(shí)和虛擬的AR有何不同?
AR這項(xiàng)技術(shù)主要是通過(guò)三維模型、視頻等數(shù)字媒體來(lái)給現(xiàn)實(shí)世界增加新的視角,將各種“美術(shù)”元素實(shí)時(shí)疊加在了用戶的像機(jī)視圖上,但如果你想和虛擬對(duì)象去交互,就行不通了,在AR中,現(xiàn)實(shí)和虛擬世界只是形式上的融合。
MR則不同,在MR的世界里人們能夠像現(xiàn)實(shí)世界一般去互動(dòng)、操縱和體驗(yàn),想象一下類似隔空輸入,敲擊著桌面上的虛擬鍵盤,屏幕上就實(shí)時(shí)顯示出了內(nèi)容,在混合現(xiàn)實(shí)中,到處都是這樣的場(chǎng)景,虛擬世界的對(duì)象都是可觸碰,有反饋的,相當(dāng)于創(chuàng)造了現(xiàn)實(shí)和虛擬共存的混合世界。
那MR全景會(huì)場(chǎng)如何構(gòu)建?首先需要一套全景技術(shù)來(lái)復(fù)制一份會(huì)場(chǎng)的全景三維鏡像,然后再整合多元化的媒體信息。這個(gè)全景系統(tǒng)會(huì)涉及超高清全景相機(jī)、全景拼接和全景圖像渲染引擎等。
全景相機(jī)將拍攝的會(huì)場(chǎng)高清圖像上傳至云端,后臺(tái)通過(guò)特征點(diǎn)識(shí)別、特征點(diǎn)匹配、圖像智能拼接、圖像融合等技術(shù),將圖片無(wú)縫拼接好,再由前端渲染引擎實(shí)現(xiàn)全景照片在手機(jī)、電腦、智慧屏等終端上完美呈現(xiàn)。
再融合空間定位、實(shí)時(shí)數(shù)據(jù)映射等多元媒體技術(shù),一個(gè)令人興奮可以實(shí)時(shí)交互的MR全景會(huì)場(chǎng)就誕生了,這個(gè)MR會(huì)場(chǎng)不再是“堆特效”堆出來(lái)的死場(chǎng)景,而是生動(dòng)可感的第三世界。
三:“悟道2.0”加持,手語(yǔ)播報(bào)數(shù)字人讓聽(tīng)障人士享受普惠AI
MR云上會(huì)場(chǎng)雖然有更加沉浸式的體驗(yàn),但現(xiàn)場(chǎng)的互動(dòng)體驗(yàn)更能讓與會(huì)者感受到科技的變化。
中關(guān)村論壇這樣的科技盛會(huì),不僅規(guī)格高,場(chǎng)次也很多,比較重要的會(huì)議通常伴有手語(yǔ)直播,方便聽(tīng)障人士參會(huì),如果全靠真人手語(yǔ)主播,工作強(qiáng)度將會(huì)非常大。
近兩年,虛擬數(shù)字主播逐漸走上舞臺(tái),幫助主持會(huì)議、播報(bào)新聞,幾乎可以亂真,但目前可以播報(bào)手語(yǔ)的虛擬人并不常見(jiàn)。本次大會(huì)非常幸運(yùn)請(qǐng)到了 “悟道2.0”超大規(guī)模預(yù)訓(xùn)練模型加持的手語(yǔ)播報(bào)數(shù)字人。
由于手語(yǔ)主要靠手勢(shì)來(lái)傳遞信息,不同的人有不同的手勢(shì)習(xí)慣,很容易造成信息傳遞偏差,而人工智能則可以避免“千人千面”,只要前端接收的自然語(yǔ)言信息無(wú)誤,就能準(zhǔn)確表達(dá)。
普通播報(bào)新聞的虛擬主播也是由AI來(lái)驅(qū)動(dòng),對(duì)它們來(lái)說(shuō),只要語(yǔ)音準(zhǔn)確就可以,表情和手勢(shì)只需配合,而手語(yǔ)播報(bào)數(shù)字人,對(duì)手勢(shì)的要求會(huì)更加精準(zhǔn)。
追根溯源,手語(yǔ)數(shù)字人也是為了傳遞信息,所以對(duì)自然語(yǔ)言的理解尤為重要,這次的手語(yǔ)數(shù)字人背后注入了“悟道2.0”和微軟小冰的強(qiáng)大基因。
“悟道2.0”是類似GPT-3的人工智能預(yù)訓(xùn)練大模型,參數(shù)規(guī)模達(dá)到了1.75萬(wàn)億,達(dá)到了GPT-3的10倍,打破了之前由Google Switch Transformer預(yù)訓(xùn)練模型創(chuàng)造的1.6萬(wàn)億參數(shù)記錄,并且完全使用了國(guó)產(chǎn)算力,在世界公認(rèn)的9項(xiàng)Benchmark基準(zhǔn)測(cè)試任務(wù)上都達(dá)到了精準(zhǔn)智能。
因?yàn)橛?xùn)練數(shù)據(jù)和參數(shù)跟普通的AI模型不在一個(gè)量級(jí),所以在自然語(yǔ)言理解上會(huì)有十分明顯的優(yōu)勢(shì)。微軟小冰基于情感的交互能力更強(qiáng),不光可以進(jìn)行創(chuàng)作性回答,還能控制自然對(duì)話的節(jié)奏,讓整個(gè)播報(bào)更像真人。
據(jù)悉,該手語(yǔ)播報(bào)數(shù)字人不光參加中關(guān)村論壇,也會(huì)服務(wù)于北京冬奧會(huì),為全世界的聽(tīng)障人士帶去更好的參會(huì)體驗(yàn)。
四:AI修復(fù)+視錯(cuò)覺(jué)視頻技術(shù),線上觀看效果依然“人從畫(huà)中來(lái)”
而作為線下論壇,利用科技增強(qiáng)現(xiàn)場(chǎng)效果、給觀眾帶來(lái)更佳的體驗(yàn)亦是重中之重。
中關(guān)村論壇引入了一系列適用于論壇場(chǎng)景的新技術(shù),多維度整合進(jìn)論壇場(chǎng)景中,讓科技論壇真正科技化。
“國(guó)際化”、“高端化”是今年中關(guān)村論壇辦會(huì)特色,為此論壇邀請(qǐng)了眾多海外相關(guān)領(lǐng)域嘉賓線上參會(huì),嘉賓線上視頻的質(zhì)量直接影響了現(xiàn)場(chǎng)效果。
中關(guān)村論壇利用技術(shù)打造了線上嘉賓“人從畫(huà)中來(lái)”的真實(shí)效果。
首先是視錯(cuò)覺(jué)視頻技術(shù),主會(huì)場(chǎng)采用大面積弧形屏+頂部條屏結(jié)合的方式,營(yíng)造沉浸感氛圍,條形屏通過(guò)動(dòng)態(tài)素材的呈現(xiàn)增加靈動(dòng)感,同時(shí)配合視頻呈現(xiàn)裸眼3D效果。
利用視覺(jué)差原理,通過(guò)綠幕錄制、后期特效等方式制作遠(yuǎn)程嘉賓演講視頻,達(dá)到線下線上裸眼3D效果,配合制作合成的模擬特寫(xiě)鏡頭上屏,達(dá)到以假亂真的效果。
同時(shí)利用AI視頻增強(qiáng)技術(shù),將部分質(zhì)量不高的演講視頻優(yōu)化為高清視頻。如今,AI視頻增強(qiáng)技術(shù)通常是基于深度學(xué)習(xí)技術(shù),重新設(shè)計(jì)或提出自研的超分核心技術(shù)算法??舍槍?duì)有損的視頻場(chǎng)景、低分辨率視頻流或視頻文件進(jìn)行實(shí)時(shí)放大、修復(fù)、復(fù)原,輸出高分辨率、高清晰度視頻,并經(jīng)過(guò)神經(jīng)網(wǎng)絡(luò)的處理,有效修復(fù)編解碼引入的圖像錯(cuò)誤。
除此之外,2021中關(guān)村論壇在在通州區(qū)九棵樹(shù)文化產(chǎn)業(yè)園設(shè)置了沉浸式第二現(xiàn)場(chǎng),全方位還原中關(guān)村論壇部分活動(dòng)場(chǎng)次——通過(guò)邊緣融合技術(shù)對(duì)多個(gè)方位拍攝影像進(jìn)行拼接融合,在第二現(xiàn)場(chǎng)進(jìn)行播出,達(dá)到全方位沉浸式體驗(yàn)的效果。
事實(shí)上,許多賽事會(huì)議都將用上基于5G的沉浸式VR體驗(yàn),例如2022北京冬奧會(huì)的賽場(chǎng)。
如今的許多體育場(chǎng)和競(jìng)技場(chǎng)全都安裝有數(shù)十臺(tái)高清攝像機(jī),然后捕捉各類角度的賽事鏡頭,將捕捉到的圖像數(shù)據(jù)進(jìn)行渲染處理,進(jìn)而能夠?qū)崿F(xiàn)360度的回放,并使得對(duì)人眼難以判斷的動(dòng)作和場(chǎng)上的違規(guī)行為進(jìn)行詳細(xì)描述成為可能。角度甚至可以你在球場(chǎng)中間、運(yùn)動(dòng)員就在你身邊的效果,進(jìn)而達(dá)到沉浸式體驗(yàn)。
如今,人、物、數(shù)據(jù)將更加深度的鏈接在一起,現(xiàn)實(shí)世界和虛擬世界正在加速融合,VR會(huì)議只是數(shù)字孿生的冰山一角,是一個(gè)表現(xiàn)形式一個(gè)窗口,未來(lái)的數(shù)字化智能工廠,不是搬進(jìn)了虛擬世界,而是邁上了通往融合創(chuàng)新的新大陸。
(免責(zé)聲明:本網(wǎng)站內(nèi)容主要來(lái)自原創(chuàng)、合作伙伴供稿和第三方自媒體作者投稿,凡在本網(wǎng)站出現(xiàn)的信息,均僅供參考。本網(wǎng)站將盡力確保所提供信息的準(zhǔn)確性及可靠性,但不保證有關(guān)資料的準(zhǔn)確性及可靠性,讀者在使用前請(qǐng)進(jìn)一步核實(shí),并對(duì)任何自主決定的行為負(fù)責(zé)。本網(wǎng)站對(duì)有關(guān)資料所引致的錯(cuò)誤、不確或遺漏,概不負(fù)任何法律責(zé)任。
任何單位或個(gè)人認(rèn)為本網(wǎng)站中的網(wǎng)頁(yè)或鏈接內(nèi)容可能涉嫌侵犯其知識(shí)產(chǎn)權(quán)或存在不實(shí)內(nèi)容時(shí),應(yīng)及時(shí)向本網(wǎng)站提出書(shū)面權(quán)利通知或不實(shí)情況說(shuō)明,并提供身份證明、權(quán)屬證明及詳細(xì)侵權(quán)或不實(shí)情況證明。本網(wǎng)站在收到上述法律文件后,將會(huì)依法盡快聯(lián)系相關(guān)文章源頭核實(shí),溝通刪除相關(guān)內(nèi)容或斷開(kāi)相關(guān)鏈接。 )