新智駕按:2020 年 8 月 7 日,全球人工智能和機器人峰會(CCF-GAIR 2020)正式開幕。CCF-GAIR 2020 峰會由中國計算機學(xué)會(CCF)主辦,香港中文大學(xué)(深圳)、雷鋒網(wǎng)聯(lián)合承辦,鵬城實驗室、深圳市人工智能與機器人研究院協(xié)辦。
本次峰會智能駕駛專場上,威盛電子高級技術(shù)總監(jiān)唐亮,為與會者們帶來了一場精彩紛呈的“產(chǎn)學(xué)研整合-推動下一代智能駕駛?cè)瞬排囵B(yǎng)”報告。
實際上,威盛電子在車載領(lǐng)域,憑借嵌入式及計算機視覺領(lǐng)域的研究成果做了大量關(guān)于智能駕駛方面的工作,主要針對商用車隊、礦卡、巴士等車型,以車載AI系統(tǒng)及車載AI雙鏡頭監(jiān)控儀為硬件基礎(chǔ),配套DMS駕駛員監(jiān)控、ADAS輔助駕駛、SVS全景環(huán)視、傳感器融合等軟件算法,并針對學(xué)校發(fā)展有威盛任我行智駕科研平臺。
基于威盛任我行智駕科研平臺原型無人車系統(tǒng),在封閉園區(qū)指定范圍內(nèi),可以做到自動行駛抵達目的地。同時通過激光雷達、超聲波雷達、慣性導(dǎo)航等,已經(jīng)可以自主避障,實現(xiàn)了 L4 級別的自動駕駛。
同時,唐亮稱目前相關(guān)技術(shù)人才培養(yǎng),很多大學(xué)都處于科普階段,目前中國的人工智能領(lǐng)域人員缺口是 500 萬,威盛希望通過自己的努力,借助威盛任我行智駕科研平臺以及系統(tǒng),幫助百萬學(xué)子走入 AI 和自動駕駛產(chǎn)業(yè)。
以下是唐亮的演講全文,雷鋒網(wǎng)新智駕進行了不改變原意的編輯:
大家好,我是威盛電子的唐亮。我今天介紹的題目是“產(chǎn)學(xué)研整合-推動下一代智能駕駛?cè)瞬排囵B(yǎng)”,主要介紹威盛任我行智駕科研平臺。演講內(nèi)容包括三部分:一是介紹威盛電子;二是介紹威盛電子在人工智能方面做的工作;三是介紹威盛任我行智駕科研平臺。
完成從傳統(tǒng)嵌入式平臺到人工智能嵌入式平臺轉(zhuǎn)變
威盛電子成立于 1987 年,是嵌入式平臺及解決方案提供商。公司總部在 1992 年從美國遷至臺灣臺北市。CEO 是陳文琦,目前有 2000 多名員工,擁有專利 6000 多個。
國內(nèi)在北京、深圳、上海、臺北等地設(shè)有研發(fā)中心,國外在美國奧斯丁和福利蒙特市設(shè)有研發(fā)中心,東京有銷售分部。
威盛電子 1987 年成立至今,從最底層的 CPU、GPU、芯片組設(shè)計,到自行研發(fā)嵌入式主板,最后成功研發(fā)嵌入式系統(tǒng)。如今把計算機視覺、人工智能結(jié)合進來做終端智能化工作,一路走來將近 30 多年的歷程。
30 多年的時間,最初威盛主要涉及領(lǐng)域都在 PC 領(lǐng)域,主做系統(tǒng)設(shè)計、I/O 集成、無線網(wǎng)絡(luò)連接等。最近十年我們集中在人工智能方向,結(jié)合深度學(xué)習(xí),增加了很多人工智能功能,完成了從傳統(tǒng)嵌入式平臺到人工智能嵌入式平臺轉(zhuǎn)變的過程。
如今威盛人工智能工作很多是在視覺方面,基于 GPU 的積累,視覺上主要做物體識別,應(yīng)用于智能工廠,比如硅片識別、流水線瑕疵產(chǎn)品的識別等。
視覺領(lǐng)域自然少不了人臉識別,所以威盛做了大量關(guān)于人臉識別方面的努力,很多產(chǎn)品已經(jīng)落地。語音方面,不論是在線還是離線語音處理,也已落地了很多項目,尤其在智能家居、智能醫(yī)療方面有很多實際項目落地。
車載領(lǐng)域,借用嵌入式領(lǐng)域的工作成果和視覺研究成果,在輔助駕駛方面的工作主要針對:DMS、駕駛?cè)松矸葑R別、ADAS 方面,已有 Mobile360 系列產(chǎn)品落地。
威盛電子人工智能主要集中在邊緣端,目的是為實現(xiàn)終端智能化,在智能制造、智能醫(yī)療、智能商務(wù)、智能交通等各個領(lǐng)域都有人工智能方面的產(chǎn)品落地。
為什么開發(fā)威盛任我行智駕科研平臺?
與學(xué)校、廠商合作過程中,需要把代碼、項目、技術(shù)移交給對方,如果僅僅把源代碼給對方,這樣做很可能無法順利交接,原因在于開發(fā)流程、編譯環(huán)境以及使用習(xí)慣不同,中間缺乏一個完整的系統(tǒng)做這件事。
基于這些因素,為方便輸出技術(shù),威盛借助在人工智能領(lǐng)域的經(jīng)驗積累,開發(fā)出任我行智駕科研平臺。該平臺功能包括:用戶管理、代碼管理、開發(fā)測試、編譯環(huán)境、自動部署等一系列的流程工具,同時也包括人工智能模型訓(xùn)練、模型優(yōu)化、自動標(biāo)注等人工智能方面的基礎(chǔ)工具。
對外接口一方面是面向用戶操作的人機界面,可以在該平臺做編譯、開發(fā)等工作。另一方面是對終端的訪問接口,可以實現(xiàn)終端的管理、數(shù)據(jù)上傳、數(shù)據(jù)分析以及自動更新等。
在底層,平臺同樣提供了跨平臺的部署能力,可以部署到私有服務(wù)器上,也可以部署到公有云上,并提供擴展功能。
借助這套人工智能開發(fā)平臺,可以很好地把威盛技術(shù)結(jié)合在一起,輸出到科研學(xué)校、科研單位或者合作伙伴。
任我行智駕平臺有一部分是車載視覺開發(fā)平臺??蓪④囕d視覺的:硬件、軟件、代碼、SDK,平臺相結(jié)合。硬件部分,車載視覺控制器采用高通 820 的芯片,可以接到 9 個攝像頭,實現(xiàn)人工智能、視頻拼接等操作,利用平臺可以開發(fā)智能座艙等。如果只是想在小的領(lǐng)域做研發(fā),比如需要做 ISP 性能提升調(diào)整,有了這個平臺一兩天時間就可以完成部署。
有了車載視覺開發(fā)平臺就可以開發(fā)關(guān)于自動駕駛方面功能,如:道路交通標(biāo)志識別、盲點監(jiān)測、前車防撞預(yù)警、3D 環(huán)視/行車記錄等。
除在應(yīng)用層開發(fā),該套系統(tǒng)也能調(diào)整人工智能模型、物體檢測、行人檢測、面部檢測、調(diào)整模型和訓(xùn)練素材。
DMS 作為駕駛員行為監(jiān)測系統(tǒng),通過圖像輸入,對面部、身體形態(tài)分割,把信息輸入到深度卷積神經(jīng)網(wǎng)絡(luò),識別各種不同的行為,并分析這是危害駕駛還是安全駕駛。有了 DMS,就可以實現(xiàn)深度神經(jīng)網(wǎng)絡(luò)的圖像識別功能,捕獲司機駕駛行為并自定義報警,目前已經(jīng)可以識別 十幾種駕駛行為。
環(huán)視系統(tǒng)作為現(xiàn)在的標(biāo)配,當(dāng)拿到統(tǒng)一模塊直接上車就可以使用。Tier 1 在這個領(lǐng)域已經(jīng)做的非常好,拿到完整的開發(fā)包,可以自己調(diào)整,最多接 9 路攝像頭,正常的話接 4 路就可以了,前后左右。有些攝像頭數(shù)據(jù)拿過來可以做標(biāo)定工作,通過拼接了解整個流程,做任何想要做的事情。有了 SVS 代碼,也可以了解計算機視覺動態(tài)拼接是怎么實現(xiàn)的,了解關(guān)鍵點在哪里,如想在里面做小的調(diào)整,這些可以進行實現(xiàn)。
ADAS 領(lǐng)域有很多輔助功能,基于此,威盛在開發(fā)平臺上開放了接口,便于學(xué)習(xí)、了解。包括盲點檢測、前車防撞等,都是基于視覺、毫米波雷達等對物體距離、對物體的判斷,根據(jù)這些信息做邏輯分析。
基于任我行平臺實現(xiàn) L4 級別的自動駕駛
當(dāng)下自動駕駛大熱,前途也非常光明,研究自動駕駛的公司非常多,但自動駕駛研究的機構(gòu)用手指就可以數(shù)出來,沒有經(jīng)濟實力做相關(guān)研究很難,威盛所做的就是提供計算平臺,結(jié)合代碼、控制器、無人車、傳感器,整體打包自動駕駛開發(fā)平臺。
威盛電子開發(fā)的原形系統(tǒng)在封閉園區(qū)指定范圍內(nèi),可以做到自動行駛抵達目的地。同時通過激光雷達、超聲波雷達、慣性導(dǎo)航等,已經(jīng)可以自主避障,實現(xiàn)了 L4 級別的自動駕駛。
相關(guān)技術(shù)人才缺口巨大
威盛任我行智駕科研平臺的基礎(chǔ),是構(gòu)建在人工智能開發(fā)平臺之上,把自動駕駛技術(shù)放進去變成自動駕駛開發(fā)平臺,把車載視覺放進去就是車載視覺開發(fā)平臺,形成可供教學(xué)使用的開發(fā)平臺。
可以看到全中國的學(xué)校,最上層是 235 所科研院所(不含大學(xué)),593 所大學(xué)可以招收研究生,2956 所高等學(xué)府、1.01 萬所中專。大學(xué)包括大專在內(nèi),都是以理論知識為主,做科研的是少數(shù),更多是做科普。
威盛希望達到的效果并不僅僅是把平臺拿出去做科研,而是希望更多做技術(shù)方面的 AI 公司加入,把任我行平臺作為一個科普平臺,通過開發(fā)平臺把威盛的技術(shù)變成標(biāo)準(zhǔn)化的開發(fā)包,供給學(xué)?;蚩蒲袡C構(gòu)使用。
通過標(biāo)準(zhǔn)化開發(fā)包的方式,幫助第三方教育機構(gòu)有能力開發(fā)基于人工智能的教案、教具,讓更多的人能夠接觸人工智能,學(xué)習(xí)人工智能。
目前中國的人工智能領(lǐng)域人員缺口是 500 萬,威盛目標(biāo)是希望通過智研平臺以及系統(tǒng),幫助百萬學(xué)子走入 AI 產(chǎn)業(yè),這個時間可能是 5 年、10 年,但這是威盛電子努力的方向,第一步先從自動駕駛和輔助駕駛開始。
本文來源:雷鋒網(wǎng),作者:子健
(免責(zé)聲明:本網(wǎng)站內(nèi)容主要來自原創(chuàng)、合作伙伴供稿和第三方自媒體作者投稿,凡在本網(wǎng)站出現(xiàn)的信息,均僅供參考。本網(wǎng)站將盡力確保所提供信息的準(zhǔn)確性及可靠性,但不保證有關(guān)資料的準(zhǔn)確性及可靠性,讀者在使用前請進一步核實,并對任何自主決定的行為負(fù)責(zé)。本網(wǎng)站對有關(guān)資料所引致的錯誤、不確或遺漏,概不負(fù)任何法律責(zé)任。
任何單位或個人認(rèn)為本網(wǎng)站中的網(wǎng)頁或鏈接內(nèi)容可能涉嫌侵犯其知識產(chǎn)權(quán)或存在不實內(nèi)容時,應(yīng)及時向本網(wǎng)站提出書面權(quán)利通知或不實情況說明,并提供身份證明、權(quán)屬證明及詳細(xì)侵權(quán)或不實情況證明。本網(wǎng)站在收到上述法律文件后,將會依法盡快聯(lián)系相關(guān)文章源頭核實,溝通刪除相關(guān)內(nèi)容或斷開相關(guān)鏈接。 )