中科慧眼孟然:為智能汽車植入眼睛和大腦

極客網(wǎng)6月24日消息,今天,由汽車創(chuàng)新港、NewCar??W(wǎng)主辦的“預(yù)見未來:人工智能和自動(dòng)駕駛技術(shù)論壇”在上海盛大舉行,論壇圍繞人工智能自動(dòng)駕駛汽車領(lǐng)域的應(yīng)用實(shí)踐這一話題,深入探討駕駛輔助、自動(dòng)駕駛、高精度地圖、環(huán)境感知、語音識(shí)別、軟件系統(tǒng)等技術(shù)難點(diǎn)和重點(diǎn)。極客網(wǎng)作為合作支持媒體,將為您帶來全程報(bào)道。

論壇邀請(qǐng)了沃爾沃汽車智能駕駛事業(yè)部高級(jí)經(jīng)理張立存博士、地平線機(jī)器人智能駕駛業(yè)務(wù)總監(jiān)李星宇,亞太機(jī)電智能網(wǎng)聯(lián)事業(yè)部 技術(shù)總監(jiān)梁濤年博士,QNX大中華區(qū)總經(jīng)理張人杰,吉利汽車主動(dòng)安全科經(jīng)理李博博士,閱面科技創(chuàng)始人(前阿里巴巴算法總監(jiān))趙京雷博士,慧眼科技 CEO(Imprezzeo創(chuàng)始人)單霆博士,上海傲碩信息科技總經(jīng)理鄭天堂先生,中科慧眼創(chuàng)始人副總經(jīng)理孟然先生做主題分享。

第二位出場演講的是中科慧眼創(chuàng)始人副總經(jīng)理孟然,他演講的題目是《為智能汽車植入眼睛和大腦》。

以下是演講速記整理內(nèi)容:

有請(qǐng)孟然先生給大家介紹“為智能汽車植入大腦和眼睛”,他是中科慧眼有限科技公司創(chuàng)始人副總經(jīng)理。

孟然:大家好,剛才張博士講得我覺得有很多東西對(duì)我很有幫助,因?yàn)榍皟商靺⒓右粋€(gè)會(huì)議,我記得還有人跟我講,他問我,你覺得多少年能夠?qū)崿F(xiàn)自動(dòng)駕駛,我哆哆嗦嗦告訴他可能會(huì)有十年,因?yàn)槲遗抡f得太長會(huì)影響到大家對(duì)這個(gè)行業(yè)的積極性和興奮點(diǎn),但是剛才張博士說得很好,就是我內(nèi)心真正想的,可能在有生之年我們能看到完全的自動(dòng)駕駛出現(xiàn),我感覺就很不錯(cuò)了。

我先自我介紹一下,我們是一個(gè)民營企業(yè),也是一個(gè)創(chuàng)業(yè)不久的企業(yè),現(xiàn)在融資走到第二輪。中科慧眼是中科院和豐田汽車從日本回來的一個(gè)團(tuán)隊(duì),現(xiàn)在做的不是完全的自動(dòng)駕駛,而是大多數(shù)集中在感知,在感知上,我們用的是雙目的方案,今天我在做這個(gè)介紹的時(shí)候,我想側(cè)重點(diǎn)還是在用視覺的方式解決感知問題,我想講一些純技術(shù)的問題。

在講之前請(qǐng)大家先看一段視頻,看一看用是覺得方式怎么樣解決在感知的時(shí)候所遇到的一些問題。

(播放視頻)這個(gè)東西可以叫它運(yùn)動(dòng)估計(jì),它是怎么做,究竟有什么用處,我給大家講一下。大家知道我們視覺上,用在汽車上我們的處理器,哪怕是SOC,一般到30幀、40幀是頂級(jí)的,做碰撞預(yù)警并不是簡單對(duì)一個(gè)目標(biāo)的距離或者碰撞時(shí)間的預(yù)警,一定是對(duì)這個(gè)目標(biāo)進(jìn)行追蹤,那么把我與它的距離,把我與它的每一個(gè)碰撞時(shí)間連成一個(gè)曲線,這樣去預(yù)測下一個(gè)什么時(shí)間我會(huì)撞上它,而不是兩個(gè)點(diǎn)或者三個(gè)點(diǎn)去預(yù)測一個(gè)目標(biāo)。我們?cè)陬A(yù)測它的時(shí)候,就要對(duì)它進(jìn)行跟蹤,大家知道我們現(xiàn)在的30幀去跟蹤一個(gè)飛快速度的目標(biāo)是跟蹤不了的,如果我以100公里的速度往前進(jìn),這個(gè)時(shí)候有一個(gè)小孩跑進(jìn)來,這個(gè)時(shí)候我不知道他是同一個(gè)目標(biāo),這個(gè)時(shí)候怎么辦?我們就要在原有基礎(chǔ)上對(duì)這個(gè)目標(biāo)進(jìn)行一個(gè)分析,分析完以后對(duì)它進(jìn)行跟蹤。這個(gè)圖像說的就是什么呢?我從一個(gè)15幀的視頻把它變成30幀,這里面用的就是對(duì)比。原有視頻每一個(gè)點(diǎn)做估計(jì),估計(jì)完以后形成新的點(diǎn),所有新的點(diǎn)組成一個(gè)圖像,把這個(gè)圖像插到兩幀圖像里面組成一個(gè)30幀的圖像,就是大伙看到的連續(xù)的效果,這是在視頻感知里頭做目標(biāo)跟蹤。

大家知道做視頻檢測,第一個(gè)問題要解決的是雨霧天,大家知道激光雷達(dá)對(duì)雨霧的穿透能力有限。視頻,大雨大霧能不能搞定?視頻在技術(shù)上可以做一定程度的減輕,也就是說,就是大家看到的去霧的效果。

這是防抖功能,用軟件和算法做的一個(gè)防抖。防抖并不是沒抖,沒抖叫失真,防抖是去掉高頻。這是在汽車上必須要做的,如果不做的話會(huì)很麻煩。

這是低光功能增強(qiáng),我們選用三色的時(shí)候,本身要對(duì)低光有一個(gè)很好的范圍,但是在軟件里面就除此之外,硬件解決完了之后在軟件里面也要有一個(gè)增強(qiáng)。

這個(gè)東西就是對(duì)于雙目攝像頭來講,里面一些中間層的數(shù)據(jù),它需要大家做演示和分析。這里面是雙目視頻里面的左眼,右眼跟它也是差不多,左右眼差不多,這是一個(gè)生成的深度的數(shù)據(jù)。就是與前方障礙物的距離,測距離干嗎?它跟單目不一樣,雙目是先測距離,先算碰撞距離,一系列的點(diǎn)要對(duì)一個(gè)目標(biāo)進(jìn)行跟蹤,所有的數(shù)據(jù)勾勒出來以后預(yù)測下一個(gè)點(diǎn)在哪兒,從而發(fā)生預(yù)警,這個(gè)是雙目與單目的區(qū)別,雙目是直接測距預(yù)測碰撞的時(shí)間,而單目不用測距,而是做識(shí)別,識(shí)別完以后直接預(yù)測碰撞時(shí)間。

回到PPT,剛才張博士的觀點(diǎn)我非常同意,完全的自動(dòng)駕駛一定是多傳感器做融合,單純的視覺不管是雙目還是單目,都不可以做自動(dòng)駕駛,這樣的話風(fēng)險(xiǎn)太大了。所以一個(gè)完全的自動(dòng)駕駛,一定是多個(gè)尖端傳感器,每一個(gè)傳感器都做到最優(yōu)時(shí)候進(jìn)行的一個(gè)融合,我今天只講雙目感知。

這是我們公司的情況,前期肯定是把雙目用在ADAS上,當(dāng)然整個(gè)的自動(dòng)駕駛的路線肯定是從感知到?jīng)Q策,再到控制。當(dāng)然后面還有一個(gè)聯(lián)網(wǎng),可以說它是分三步或者是分四步,我們的團(tuán)隊(duì)以前在日本豐田也是做自動(dòng)駕駛的,當(dāng)然我們的技術(shù)專長還是在雙目的感知上。所以我們回國以后還是把很多的信息都給它砍掉了。

以前會(huì)對(duì)比所有傳感器的優(yōu)缺點(diǎn),現(xiàn)在由于時(shí)間關(guān)系我最終只講視覺部分,雷達(dá)不講了,雷達(dá)目前為止,價(jià)格并不是最大的問題,最大的問題應(yīng)該還是性能,性能包括探測距離、探測角度以及敏感強(qiáng)度,比如對(duì)黑顏色的金屬,對(duì)重物體的敏感程度,而視頻的方式,最起碼是二維的,最低縱向也有480行,遠(yuǎn)遠(yuǎn)超過64線。

大家都會(huì)關(guān)心,究竟是單目好還是雙目好?其實(shí)單目和雙目并不是矛盾的,并不是說用單目就不能用雙目,或者說用了雙目就不能用單目。各有優(yōu)缺點(diǎn),我上次來的時(shí)候也有人問我,說視覺攝像頭究竟能看到多少米?對(duì)于視覺來講看到多少米跟單目和雙目沒有關(guān)系,是跟鏡頭有關(guān)系的。分辨率確定以后,放大率越高分辨力越高。所以最好的方式是什么?有多組去做,比如說有一組長焦鏡頭關(guān)注遠(yuǎn)處,中焦的鏡頭去關(guān)注中等的距離,還有一組近焦的鏡頭關(guān)注近處,這樣的話近處視覺大,中間的視覺居中,遠(yuǎn)處的視覺比較窄,但是這樣的話無法走后裝,因?yàn)槌杀颈容^高。所以我們要是走后裝的話一定要選擇一個(gè)恰當(dāng)?shù)慕咕嗳リP(guān)注中近距的距離,可能要放到100米以外的距離了。

還有一個(gè)單目的特點(diǎn)是要先做分類,先做識(shí)別,單目一定要做識(shí)別,這是常識(shí)。如果說一個(gè)單目的攝像機(jī)不做識(shí)別直接測距,這句話本身是不科學(xué)的。也有很多人說Mobileye已經(jīng)做得這么好了為什么要有雙目,Mobileye做得好我當(dāng)時(shí)說了還是有兩個(gè)原因,第一個(gè)就是Mobileye的識(shí)別做得非常好,因?yàn)樽R(shí)別的話大家知道,做識(shí)別之前應(yīng)該有特征數(shù)據(jù)進(jìn)來,這個(gè)時(shí)候需要一個(gè)很龐大的數(shù)據(jù)庫,或者用什么方式去做,一定要有一個(gè)特征庫,不管什么形式存在的,所以Mobileye的庫是用了十幾年,豐富了十幾年,并且這個(gè)庫要保證這個(gè)識(shí)別量,這個(gè)識(shí)別率要不斷的迭代和更新,這是它的第一個(gè)要素。就是做識(shí)別不困難,但是做到極致很困難,這個(gè)時(shí)候Mobileye的識(shí)別應(yīng)該是做到極致了,但是即便是這樣有一些未知的異情是搞不定的,比如說一個(gè)三輪車上拉著一只豬,所以這個(gè)時(shí)候沒有辦法做車輛的識(shí)別,所以你把這個(gè)特征加進(jìn)去沒有用,豬的身上還騎著一只羊怎么樣,這個(gè)東西是舉不勝舉的。比如正規(guī)車廠做出來的汽車,正規(guī)車廠做出來的摩托車、行人這個(gè)東西識(shí)別是沒有問題的,我們做過很多行人姿態(tài)、車輛姿態(tài)基本上都是可以搞定的,比如說一個(gè)抱小孩的婦女,或者攙扶著一個(gè)老人,Mobileye都可以識(shí)別出來,但是不能故意搞一些怪異的姿勢。當(dāng)然對(duì)于魚和豬肯定就搞不定,如果能夠搞定就不科學(xué)了,所以這是單目,一個(gè)是識(shí)別做得好,再一個(gè)就是目前里面單目的算法我相信不是一種,因?yàn)槲覀円苍陟o態(tài)的時(shí)候、拐彎的時(shí)候,低速、高速的時(shí)候分別去研究過它的算法,它應(yīng)該是有幾套路子去走。對(duì)于單目來講達(dá)到這種水平還是非常值得尊敬的,如果我們做單目算法的話,估計(jì)用幾年是絕對(duì)趕不上它的性能,所以我們沒有辦法,只能彎道超車了。

大家知道雙目是不需要做識(shí)別的,它是根據(jù)一個(gè)視察去反推具體,反推的距離可以非常精確,因?yàn)榭梢砸灰粚?duì)比,如果成像和標(biāo)定足夠好是可以精確測距的。

這個(gè)是大黃蜂,在世界上僅有的幾個(gè)雙目相機(jī)也非常不多,就這么一兩款,我們能夠在實(shí)驗(yàn)的時(shí)候買到的,我們前期的實(shí)驗(yàn)還是在用它。這個(gè)東西是2萬人民幣,后來我拆開看了它確實(shí)值2萬,因?yàn)殡p目有一個(gè)極大的問題,就是保證兩個(gè)攝像頭完全的不變,相對(duì)的位置完全都不變,但是世界上有一個(gè)完全向?qū)Σ蛔兊奈恢脝幔坑绕涫歉邷?、低溫一定有熱脹冷縮。它這殼子是一次成型的鑄造,鑄造完以后把鏡頭放在了鋼鐵上,這個(gè)鋼比較厚,有幾十個(gè)厘米,這樣的話可以把它的型變?cè)跓崦浝淇s發(fā)生的時(shí)候降低到最低,稍微有一點(diǎn)型變?cè)趺崔k,我不知道它的方式是怎么做的。這個(gè)東西并不是用于汽車,用于室內(nèi)的車輛,所以有一些誤差是沒有關(guān)系的。

雙目相機(jī)怎么來做?雙目相機(jī)在世界上沒有這個(gè)東西,最起碼在世界上沒有用于交通方面的雙目相機(jī),本身雙目相機(jī)就比較少,我們第一個(gè)要解決的就是同步曝光且參數(shù)一致,如果不同步曝光左右相機(jī)肯定不是一個(gè)場景,這個(gè)東西用鏈路可以搞得定,但是有一個(gè)問題來了,就是曝光參數(shù),我們知道所有的相機(jī)都是自適應(yīng)的,都是自動(dòng)調(diào)焦。這些參數(shù)會(huì)導(dǎo)致兩個(gè)差異,進(jìn)而會(huì)導(dǎo)致所有兩個(gè)圖像的匹配。你自己開發(fā)一個(gè)SP,去算曝光參數(shù),分配給兩三個(gè)去使用。Sensor位置固定,當(dāng)然高動(dòng)態(tài)是一個(gè)最基本的要求,但是大家注意高動(dòng)態(tài)必然導(dǎo)致信息的丟失,信息的丟失必然導(dǎo)致左右圖像的適配,所以這個(gè)東西要做一個(gè)權(quán)衡。還有就是Sensor位置要絕對(duì)的固定,它采用的是一體化成型,直接鑄造的方式,如果我們這么鑄造的話,這個(gè)相機(jī)的成本估計(jì)也在萬元以上,所以我們很明顯不能這么干。怎么辦?我們只能用軟件的方式。還有一個(gè)東西就是散熱。

對(duì)于雙目算法來講,什么叫好,什么叫不好?大家看看這個(gè)東西,用顏色去反映一個(gè)角度的距離,在它暖色調(diào)的時(shí)候代表距離近,冷色調(diào)代表距離很遠(yuǎn),我不希望出現(xiàn)這些東西。這些東西是什么東西呢?這些東西是在你采圖的時(shí)候,采到的這些場景在左右的圖像上不一致,因?yàn)椴灰恢?,或者說其他的原因?qū)е伦笥覉D像的失配,就是說沒有配上沒有配準(zhǔn),沒有配準(zhǔn)這一塊就沒有距離的信息,沒有距離的信息可以空著也可以隨機(jī),隨機(jī)就會(huì)產(chǎn)生危險(xiǎn),所以我不希望有這些沒有配上的地方,我希望它是一個(gè)平滑的東西,是一個(gè)全部可以匹配的東西,這是我對(duì)算法的第一個(gè)要求。

這是我們現(xiàn)在所做到的效果做的一個(gè)比對(duì),跟網(wǎng)上一些算法的對(duì)比。

這是一個(gè)實(shí)景與一個(gè)距離之間1:1點(diǎn)對(duì)點(diǎn)的一個(gè)對(duì)比圖。雙目相機(jī)拍攝到的景物實(shí)時(shí)狀況和距離,從而實(shí)現(xiàn)碰撞預(yù)警ADAS功能。它對(duì)一個(gè)障礙物的檢測實(shí)際上是二維的,它的可靠性在正常情況下是非常高的,而不是一條線或者幾條線組成的,是由一個(gè)二維的東西組成一個(gè)障礙物。當(dāng)然對(duì)于雙目來講并不知道這個(gè)障礙物是什么,只知道在我的車前有一個(gè)障礙物。當(dāng)然你可以去做識(shí)別,預(yù)警并不要求你進(jìn)行識(shí)別,但是你想知道它是什么你可以做識(shí)別,因?yàn)楫吘箞D像在這兒。但是作為預(yù)警來講,對(duì)于碰撞來講,它不是必要的,但是你可以去做的。

我希望看到的里面測量的這些東西是這樣的,而不是有漏洞的。這是一些典型的算法,SGBM、ELAS,這兩種算法在雙目算法里面是經(jīng)常會(huì)用到的一些主流算法。剛才講的我需要平滑,第二個(gè)我希望這些小的物體能夠出來,就是前面的電線桿還有樹,如果出不來也會(huì)導(dǎo)致我的一些危險(xiǎn),當(dāng)然地上的一些小的石頭,希望這些景物可以在我的計(jì)算里面出來。

第三個(gè)是效率,我們?cè)谪S田用的是服務(wù)器來做,如果前期做后裝,后期再做前裝,做后裝的情況下用服務(wù)器就有點(diǎn)搞笑了,但是我希望算法快。為什么呢?因?yàn)榇蠹铱梢运愎P帳,如果每小時(shí)的時(shí)速是120公里,如果每秒鐘15幀率,是每走2.22米探測一次,在這個(gè)步長之間有可能探出來一個(gè)東西可能會(huì)跟它進(jìn)行碰撞,因?yàn)樗械奶綔y都是有一個(gè)頻率的,只不過這個(gè)頻率是很高罷了,所有的探測都不是連續(xù)的,我們希望這個(gè)頻率做得越高越好。在面臨這么高的一個(gè)算法效率是必須要考慮的一個(gè)問題,而不光是效果。前面講的是效果,現(xiàn)在講的是效率。所以我們把這個(gè)探測分兩個(gè)階段,第一個(gè)用GPU+GUDA的方式解決,第二個(gè)用ARM+FPGA的方式解決,30幀不足以對(duì)目標(biāo)進(jìn)行跟蹤,一個(gè)目標(biāo)的跟蹤我想最起碼要加倍,甚至幾倍,后面用視頻的方式只能對(duì)點(diǎn)進(jìn)行適量的計(jì)算。我們對(duì)所有的目標(biāo)估計(jì)效果還是非常準(zhǔn)確的,沒有出現(xiàn)什么問題。因?yàn)槲覀冊(cè)诼飞鲜强焖僖苿?dòng),對(duì)于一個(gè)目標(biāo)移動(dòng)中,30幀的頻率不足以能夠支撐。

對(duì)于用戶來講有一個(gè)好處就是不需要標(biāo)定,標(biāo)定是在工廠完成的,而不是在車?yán)锿瓿傻?。雙目的間距不變就無需標(biāo)定,當(dāng)然這個(gè)標(biāo)定工作是在工廠進(jìn)行的。

由于時(shí)間的關(guān)系,我就給大家分享到這里,大家有問題我們可以直接交流,交流到技術(shù)上也沒有問題。

提問:剛才你說的雙目識(shí)別的障礙物的算法,我有點(diǎn)不明白,它為什么不是識(shí)別一個(gè)具體的物品遠(yuǎn)近,而是按照熱力圖的方式,這個(gè)原理能不能講更明白一點(diǎn)?

孟然:這不是一個(gè)熱力圖也不是一個(gè)熱圖像,我在屏幕上如果寫一堆數(shù)的話,你就沒法看了,就是為了看得方便,所以我用顏色代表遠(yuǎn)近。為什么雙目不做識(shí)別?雙目就像咱們看3D電影一樣,為什么看3D電影的時(shí)候能夠看出來遠(yuǎn)近,是因?yàn)槟愦髦粋€(gè)眼鏡,這個(gè)眼鏡實(shí)際上在是分光。就是立體電影是用雙目攝像頭拍的,一個(gè)左一個(gè)右,你戴的眼鏡是把左邊攝像頭拍的圖像唯一的投射到你的左眼,而把右邊拍攝的圖像唯一投射到你的右眼,分工完以后因?yàn)閮蓚€(gè)點(diǎn)接觸的圖像大致相同,但是又存在視差,你可以自己做一個(gè)實(shí)驗(yàn),你會(huì)發(fā)現(xiàn)兩個(gè)眼睛對(duì)于同一個(gè)目標(biāo)是在左右晃動(dòng)的,而這個(gè)晃動(dòng)的東西我們叫視差,這個(gè)視差越大這個(gè)東西離你越近,視察越小離你越遠(yuǎn)。比如你看那個(gè)柱子跟看這個(gè)杯子在左右眼睛的視差是不一樣的,近的時(shí)候視差很大,遠(yuǎn)的時(shí)候視差很小。如果在分辨率、焦距所有都固定的情況下視差是唯一對(duì)應(yīng)你的距離的。它不是對(duì)具體某個(gè)物體,而是對(duì)它相機(jī)里面所有的場景和所有的點(diǎn),因?yàn)樗械膱鼍昂退械狞c(diǎn)在雙目相機(jī)里都存在一個(gè)視察,每一個(gè)點(diǎn)都有一個(gè)視察,所以每一個(gè)點(diǎn)都有一個(gè)距離,這樣二維場景里的距離也就出來了。

提問:剛才你提到雙目攝像頭里面30幀/秒的頻率可能還不夠,提高幀率的話,是想通過通過加幀,加到60幀或者加到更高,是這個(gè)意思嗎?

孟然:不是,用芯片的方式去處理這個(gè)問題,30幀或者40幀是封頂了,目前的硬件是封頂了。目前來講做到30幀已經(jīng)很不錯(cuò),因?yàn)椴还馐切酒奶幚砟芰€有數(shù)據(jù)通路,比如你用任何一種傳遞視頻的方式都有一個(gè)封頂,數(shù)據(jù)量非常大。封頂以后你說我的Sensor可以達(dá)到60幀,沒有用,后面處理不過來,芯片處理不過來,數(shù)據(jù)通度不允許。還有就是有各種各樣的限制,這個(gè)時(shí)候怎么辦?我覺得目前做到30幀已經(jīng)非常完美了,但是這個(gè)時(shí)候怎么辦呢?我們?nèi)y距沒有問題,就像你一邊跑一邊眨眼,你的眨眼頻率是30秒眨30次沒有問題,但是對(duì)于目標(biāo)跟蹤來講30次遠(yuǎn)遠(yuǎn)不夠,因?yàn)榭赡軙?huì)快速的移動(dòng),蛇形的運(yùn)動(dòng),30次可能會(huì)丟了這個(gè)目標(biāo),而你測這個(gè)目標(biāo)的時(shí)候用一兩個(gè)點(diǎn)的數(shù)據(jù)去估算下一秒鐘的碰撞時(shí)間是不科學(xué)的,我是指對(duì)于一個(gè)東西你要進(jìn)行連續(xù)的跟蹤,你去預(yù)測我什么時(shí)候去與它進(jìn)行碰撞是比較靠譜的。而對(duì)于你只采集了一個(gè)目標(biāo)的幾個(gè)點(diǎn)去預(yù)測下一個(gè)點(diǎn)的碰撞時(shí)間是不科學(xué)的,所以我希望連續(xù)的進(jìn)行跟蹤,當(dāng)然即便是60幀也有可能會(huì)丟失這個(gè)目標(biāo)的跟蹤,也有可能。但是它只是會(huì)大大降低丟失的概率罷了,而維護(hù)一個(gè)目標(biāo),我會(huì)隨著你的移動(dòng)會(huì)抓著你,把所有對(duì)于你的距離、時(shí)間探測勾勒出一個(gè)曲線來,從而預(yù)測下一秒我與你的碰撞時(shí)間,完全是為了預(yù)測碰撞時(shí)間的準(zhǔn)確性,才會(huì)去對(duì)于目標(biāo)進(jìn)行跟蹤,而并不單純是一幀一幀只是測距罷了。

提問:我想問的就是,因?yàn)槟阋獙?duì)這個(gè)目標(biāo)進(jìn)行跟蹤的話,勢必會(huì)用到前面的圖像,如果真的是在一個(gè)很短的時(shí)間里面沖出來一個(gè)人,可能還沒有對(duì)它進(jìn)行跟蹤,這個(gè)事故可能已經(jīng)發(fā)生了,可能30幀再去做跟蹤達(dá)到的效果可能只有10幀。

孟然:你說得沒錯(cuò),對(duì)于目標(biāo)進(jìn)行追蹤的目的并不是解決突然間跑出來一個(gè)人的問題,而是解決我與前方的物體碰撞時(shí)間的預(yù)測更加的精確,我對(duì)這個(gè)時(shí)間的預(yù)測更加精確,因?yàn)槲沂怯靡幌盗悬c(diǎn)的軌跡去預(yù)測,預(yù)測更加的精準(zhǔn)。但是沖出來一個(gè)人,完全就得靠幀頻,如果我走1.1米探測一次,你這個(gè)人正好在中間沖出來的話那沒辦法,所以只能單純的提高頻率。

提問:關(guān)于Sensor傳感器的分辨率,分辨率現(xiàn)在是以什么樣的分辨率?

孟然:分辨率這個(gè)問題,1280P都可以。

提問:可不可以降低分辨率提高效率?

孟然:但是效果會(huì)差,效果差,效率一定會(huì)提升,沒有問題。

提問:Sensor接口是以什么為主?

孟然:這就是純技術(shù)問題了,我們現(xiàn)在這個(gè)接口是我們自己開發(fā)的一個(gè)接口,私有的接口。

提問:我的問題有三個(gè),第一個(gè)我想就算法來說,因?yàn)槲椰F(xiàn)在在做靜態(tài)的雙目視覺的立體匹配,您剛才提到算法的匹配度,表現(xiàn)出來的偽色彩度有一些誤匹配率,你們?cè)趺唇鉀Q這個(gè)物匹配率的問題?

孟然:這個(gè)問題我們下面私下討論。

提問:我的問題是,可不可以這樣理解,雙目攝像頭現(xiàn)在價(jià)格還是偏高的,還有芯片和硬件成本。相比市場很多做單目攝像頭的,也是定位于后裝,優(yōu)勢在哪里,未來的市場怎么去競爭?

孟然:單目和雙目各有各的優(yōu)勢和各有各的特點(diǎn),雙目肯定比單目貴,這是毋庸置疑的。因?yàn)闁|西就用了人家的兩倍,這是毋庸置疑的。我不敢說雙目有什么優(yōu)勢,我只是說它的特點(diǎn),它的特點(diǎn)是無需識(shí)別,這是第一個(gè)特點(diǎn),視察直接轉(zhuǎn)變?yōu)榫嚯x,可以對(duì)所有的障礙物進(jìn)行測量,比如桌子放在高速公路上也是障礙物,不用識(shí)別。而對(duì)于單目,比如一個(gè)桌子拿車往上撞你看它會(huì)不會(huì)報(bào)警,因?yàn)樵谥袊牡缆飞弦磺薪杂锌赡?,所以這個(gè)東西是不是它的優(yōu)勢,你可以自己分析一下,這是第一個(gè)。

第二個(gè),它或許在某一個(gè)距離范圍內(nèi),它的測距精度要準(zhǔn)確一點(diǎn),我不敢說雙目一定要比單目準(zhǔn)確,但是在某一個(gè)距離范圍內(nèi)或許測量的定位,因?yàn)槭侵苯訙y量而不是估算的,通過視察映射到這個(gè)上面,并不存在什么估計(jì),就是視察準(zhǔn)確了距離就準(zhǔn)確了,這個(gè)距離是相當(dāng)準(zhǔn)確的,甚至比人眼還要準(zhǔn)確,所以它或許體驗(yàn)會(huì)做得很好,因?yàn)榫嚯x預(yù)測準(zhǔn)、碰撞時(shí)間預(yù)測準(zhǔn)就不會(huì)出現(xiàn)“狼來了”,不會(huì)出現(xiàn)多報(bào)或者少報(bào)的情況。

謝謝大家。

(該演講內(nèi)容全部由現(xiàn)場速記內(nèi)容整理,若有錯(cuò)誤之處敬請(qǐng)諒解)

 

免責(zé)聲明:本網(wǎng)站內(nèi)容主要來自原創(chuàng)、合作伙伴供稿和第三方自媒體作者投稿,凡在本網(wǎng)站出現(xiàn)的信息,均僅供參考。本網(wǎng)站將盡力確保所提供信息的準(zhǔn)確性及可靠性,但不保證有關(guān)資料的準(zhǔn)確性及可靠性,讀者在使用前請(qǐng)進(jìn)一步核實(shí),并對(duì)任何自主決定的行為負(fù)責(zé)。本網(wǎng)站對(duì)有關(guān)資料所引致的錯(cuò)誤、不確或遺漏,概不負(fù)任何法律責(zé)任。任何單位或個(gè)人認(rèn)為本網(wǎng)站中的網(wǎng)頁或鏈接內(nèi)容可能涉嫌侵犯其知識(shí)產(chǎn)權(quán)或存在不實(shí)內(nèi)容時(shí),應(yīng)及時(shí)向本網(wǎng)站提出書面權(quán)利通知或不實(shí)情況說明,并提供身份證明、權(quán)屬證明及詳細(xì)侵權(quán)或不實(shí)情況證明。本網(wǎng)站在收到上述法律文件后,將會(huì)依法盡快聯(lián)系相關(guān)文章源頭核實(shí),溝通刪除相關(guān)內(nèi)容或斷開相關(guān)鏈接。

2016-06-24
中科慧眼孟然:為智能汽車植入眼睛和大腦
第二位出場演講的是中科慧眼創(chuàng)始人副總經(jīng)理孟然,他演講的題目是《為智能汽車植入眼睛和大腦》。

長按掃碼 閱讀全文