單目攝像頭和FPGA的ADAS產(chǎn)品原型系統(tǒng)
1月5日-8日拉斯維加斯消費(fèi)電子展(CES)上,地平線機(jī)器人(以下簡(jiǎn)稱“地平線”)將與英特爾聯(lián)合展示一款基于單目攝像頭和FPGA的ADAS產(chǎn)品原型系統(tǒng)。
車輛檢測(cè)結(jié)果
該原型由英特爾和地平線聯(lián)合開發(fā)完成,基于地平線最新設(shè)計(jì)的一款低功耗深度神經(jīng)網(wǎng)絡(luò)處理器架構(gòu)IP。分工上,英特爾提供了FPGA硬件平臺(tái),地平線提供了實(shí)現(xiàn)在FPGA上的深度神經(jīng)處理器架構(gòu),深度神經(jīng)網(wǎng)絡(luò)算法,以及整套嵌入式人工智能解決方案。該系統(tǒng)可實(shí)現(xiàn)高速公路和市區(qū)道路場(chǎng)景下的ADAS功能,可對(duì)車輛、車道線,行人,以及可行駛區(qū)域等同時(shí)實(shí)時(shí)檢測(cè)和識(shí)別。
現(xiàn)場(chǎng)展示會(huì)盡量還原行車中視覺部分實(shí)時(shí)計(jì)算的過程。使用一個(gè)和硬件平臺(tái)連接的單目攝像頭拍攝路況,并在硬件平臺(tái)中對(duì)交通環(huán)境進(jìn)行處理,模擬行車時(shí)基于計(jì)算機(jī)視覺的駕駛輔助功能。受限于室內(nèi)展示無法提供真實(shí)道路環(huán)境,攝像頭會(huì)拍攝顯示器播放的行車路況視頻,來模擬真實(shí)情況中攝像頭從前擋玻璃處觀察前方路況。實(shí)時(shí)運(yùn)算處理的結(jié)果會(huì)由另一個(gè)顯示器輸出,觀眾可在畫面中看到目標(biāo)檢測(cè)識(shí)別后的結(jié)果,來演示算法的識(shí)別率和硬件性能。
眾所周知,在基于視覺的ADAS功能實(shí)現(xiàn)中,圖像相關(guān)算法性能與計(jì)算資源高度相關(guān)。其中基于深度學(xué)習(xí)的圖像處理算法,對(duì)硬件的計(jì)算性能、功耗、以及成本把控都會(huì)提出更高要求。為了減輕對(duì)硬件壓力,算法本身的優(yōu)化將成為重中之重。本次產(chǎn)品原型的展示,不僅能佐證英特爾的硬件平臺(tái)性能,而且對(duì)地平線算法優(yōu)化的功力亦能有所體現(xiàn)。據(jù)披露,這是業(yè)界首次在Intel的FPGA平臺(tái)上展現(xiàn)深度學(xué)習(xí)計(jì)算性能,也是地平線首次向外界展示其處理器架構(gòu)研發(fā)的最新成果。
地平線成立于2015年7月,設(shè)有北京總部和深圳、南京分公司,汽車業(yè)務(wù)主要針對(duì)自動(dòng)駕駛提供基于深度神經(jīng)網(wǎng)絡(luò)和深度學(xué)習(xí)的嵌入式人工智能解決方案,主要產(chǎn)品是核心處理器架構(gòu),軟件算法和全套技術(shù)解決方案,是一家面向前裝的二級(jí)零部件供應(yīng)商。
目前地平線在軟件算法上提供了基于深度學(xué)習(xí)的整體方案,具有高性能、低運(yùn)算量的特點(diǎn)。在今年智車優(yōu)行“奇點(diǎn)汽車”發(fā)布會(huì)上,地平線首次向外界展示了真車環(huán)境下,利用單目攝像頭同時(shí)實(shí)現(xiàn)行人/車輛/車道線檢測(cè)的ADAS產(chǎn)品原型系統(tǒng)。在今年3月份時(shí),地平線已獨(dú)立開發(fā)推出了專門根據(jù)自身深度學(xué)習(xí)算法設(shè)計(jì)的軟硬件解決方案——Hugo1.0平臺(tái)。
英特爾近期重申了進(jìn)入汽車領(lǐng)域的決心,期待用汽車業(yè)務(wù)續(xù)寫PC時(shí)代的輝煌。公司近兩年通過一系列收購來為進(jìn)軍汽車領(lǐng)域積蓄力量,陸續(xù)完成了對(duì)可編程邏輯器件廠商Altera、意大利半導(dǎo)體制造商Yogitech和計(jì)算機(jī)視覺公司Itseez Inc的收購。近期又宣布成立專門致力于提供自動(dòng)駕駛技術(shù)解決方案的事業(yè)部——自動(dòng)駕駛事業(yè)部(簡(jiǎn)稱ADG)。
在汽車領(lǐng)域,英特爾的合作業(yè)務(wù)已陸續(xù)展開。目前這家公司已在聯(lián)合寶馬、Mobileye共同開發(fā)無人駕駛汽車技術(shù),讓寶馬自動(dòng)駕駛汽車在2021年上路。此次與地平線的合作,將為英特爾在汽車領(lǐng)域的研發(fā)探索提供一則全新案例。