瑞薩電子與StradVision合作開(kāi)發(fā)下一代ADAS智能攝像頭

2019年9月26日，日本東京、美國(guó)加州圣何塞訊-全球領(lǐng)先的半導(dǎo)體解決方案供應(yīng)商瑞薩電子株式會(huì)社，與具備深度學(xué)習(xí)專業(yè)知識(shí)的自動(dòng)駕駛視覺(jué)處理技術(shù)解決方案提供商StradVision今日宣布聯(lián)合開(kāi)發(fā)基于深度學(xué)習(xí)的視覺(jué)處理解決方案，用于下一代高級(jí)駕駛輔助系統(tǒng)(ADAS)的智能攝像頭，適用于ADAS Level 2及以上級(jí)別。

為了避免在城市地區(qū)發(fā)生的常見(jiàn)危險(xiǎn)，下一代ADAS需具備高精度視覺(jué)處理能力，能夠檢測(cè)出行人和騎行者等所謂弱勢(shì)道路使用者(VRU)。同時(shí)，對(duì)于大眾市場(chǎng)的中低端車輛，這些系統(tǒng)必須實(shí)現(xiàn)非常低的功耗。瑞薩與StradVision的全新解決方案同時(shí)實(shí)現(xiàn)了這兩個(gè)目標(biāo)，旨在加速ADAS的廣泛應(yīng)用。

瑞薩電子汽車技術(shù)客戶合作事業(yè)部副總裁吉田直樹(shù)表示：“作為視覺(jué)處理技術(shù)的領(lǐng)導(dǎo)者，StradVision在應(yīng)用瑞薩R-Car SoC開(kāi)發(fā)ADAS解決方案方面擁有豐富經(jīng)驗(yàn)。通過(guò)此次合作，我們帶來(lái)了量產(chǎn)級(jí)解決方案，面向未來(lái)打造安全和精準(zhǔn)的移動(dòng)性能。這一基于深度學(xué)習(xí)的全新合作解決方案針對(duì)R-Car SoC進(jìn)行了優(yōu)化，將有助于下一代ADAS的廣泛采用，并可支持未來(lái)幾年內(nèi)不斷提升的視覺(jué)傳感器要求?！?/span>

StradVision首席執(zhí)行官Junhwan Kim表示：“StradVision很高興能夠與瑞薩聯(lián)手，幫助開(kāi)發(fā)人員有效推進(jìn)ADAS的下一次重大飛躍。這一共同努力不僅可以轉(zhuǎn)化為快速有效的評(píng)估方案，而且將大大提升ADAS的性能。未來(lái)幾年中，預(yù)計(jì)前置攝像頭市場(chǎng)將會(huì)大規(guī)模增長(zhǎng)，StradVision和瑞薩聯(lián)手打造優(yōu)勢(shì)技術(shù)，無(wú)疑將保持雙方在該領(lǐng)域的領(lǐng)先地位。”

StradVision基于深度學(xué)習(xí)的視覺(jué)處理軟件為車輛、行人和車道的識(shí)別等提供了高性能。該高精度視覺(jué)處理軟件已針對(duì)瑞薩R-Car汽車片上系統(tǒng)(SoC)產(chǎn)品R-Car V3H和R-Car V3M進(jìn)行了優(yōu)化，而R-Car系列產(chǎn)品已在量產(chǎn)車型中擁有良好的應(yīng)用業(yè)績(jī)。以上R-Car系列產(chǎn)品搭載了CNN-IP(卷積神經(jīng)網(wǎng)絡(luò)知識(shí)產(chǎn)權(quán))深度學(xué)習(xí)處理專用引擎，使其能夠以最低功耗高速運(yùn)行StradVision的SVNet汽車深度學(xué)習(xí)網(wǎng)絡(luò)。此次合作開(kāi)發(fā)的視覺(jué)處理解決方案實(shí)現(xiàn)了基于深度學(xué)習(xí)的視覺(jué)處理能力，同時(shí)保持了低功耗，使其適用于量產(chǎn)車輛，進(jìn)而推動(dòng)ADAS的采用。

基于深度學(xué)習(xí)的視覺(jué)處理解決方案的關(guān)鍵特性：

(1) 解決方案同時(shí)支持早期評(píng)估及量產(chǎn)車型

StradVision的SVNet深度學(xué)習(xí)軟件是一款強(qiáng)大的AI感知解決方案，用于量產(chǎn)的ADAS系統(tǒng)。它因在弱光環(huán)境下的識(shí)別精度和識(shí)別對(duì)象被其它物體部分遮擋時(shí)的處理能力而備受關(guān)注。R-Car V3H的基本軟件包可同時(shí)執(zhí)行車輛、人員與車道的識(shí)別，以每秒25幀的速度處理圖像數(shù)據(jù)，實(shí)現(xiàn)快速評(píng)估和POC開(kāi)發(fā)。以這些功能作為基礎(chǔ)，如果開(kāi)發(fā)人員希望通過(guò)添加符號(hào)、標(biāo)記和其它物體作為識(shí)別物體來(lái)定制軟件，StradVision可為基于深度學(xué)習(xí)的視覺(jué)處理提供支持，面向量產(chǎn)車輛，涵蓋從培訓(xùn)到軟件嵌入的所有步驟。

(2) R-Car V3H和R-Car V3M SoC在降低成本的同時(shí)提升了智能攝像頭系統(tǒng)的可靠性

除了CNN-IP專用深度學(xué)習(xí)模塊，瑞薩R-Car V3H和R-Car V3M還搭載了IMP-X5圖像識(shí)別引擎。將基于深度學(xué)習(xí)的復(fù)雜物體識(shí)別與高度可驗(yàn)證的圖像識(shí)別處理同人為規(guī)則相結(jié)合，使設(shè)計(jì)人員能夠構(gòu)建一個(gè)強(qiáng)大的系統(tǒng)。此外，方案還設(shè)計(jì)了片上圖像信號(hào)處理器(ISP)對(duì)傳感器信號(hào)進(jìn)行轉(zhuǎn)換，用于圖像渲染和識(shí)別處理，從而可以采用無(wú)內(nèi)置ISP的低成本攝像頭進(jìn)行系統(tǒng)配置，以降低BOM成本。

供貨信息

采用全新聯(lián)合開(kāi)發(fā)的深度學(xué)習(xí)解決方案的瑞薩電子R-Car SoC(包括StradVision的軟件與開(kāi)發(fā)支持)，計(jì)劃于2020年初向開(kāi)發(fā)人員供貨。