安霸、Lumentum和安森美合作開發(fā)基于AI處理的3D感知用于下一代AIoT設(shè)備
人工智能 (AI) 視覺(jué)硅公司安霸 (Ambarella, Inc. , 美國(guó)納斯達(dá)克上市代號(hào):AMBA)、創(chuàng)新光學(xué)和光子產(chǎn)品的領(lǐng)先設(shè)計(jì)者和制造商Lumentum (美國(guó)納斯達(dá)克上市代號(hào):LITE),以及CMOS圖像傳感器方案的領(lǐng)先供應(yīng)商安森美 ,今天美國(guó)時(shí)間發(fā)布了兩個(gè)新的聯(lián)合參考設(shè)計(jì),建基于這3家公司之前針對(duì)無(wú)接觸訪問(wèn)系統(tǒng)的聯(lián)合解決方案,加速人工智能物聯(lián)網(wǎng) (AIoT) 設(shè)備在各垂直領(lǐng)域的部署。Ambarella的AI 系統(tǒng)單芯片 (SoC) , 結(jié)合來(lái)自Lumentum的高性能垂直腔面發(fā)射激光器 (VCSEL) 陣列照明器和安森美半導(dǎo)體的圖像傳感器數(shù)據(jù),在用于生物識(shí)別門禁、3D電子鎖和其它智能感知應(yīng)用的下一代AIoT設(shè)備中可實(shí)現(xiàn)更高水平的準(zhǔn)確性和更智能的決策。 .
這些新的參考設(shè)計(jì)原本用于生物識(shí)別門禁和電子鎖,也可滿足智能城市、智能建筑、智能家居和智能醫(yī)療的需求。此外,這些聯(lián)合解決方案提供的高集成度顯著降低系統(tǒng)功耗和熱設(shè)計(jì)要求,同時(shí)使產(chǎn)品尺寸大大縮小。
Ambarella總裁兼首席執(zhí)行官 (CEO) Fermi Wang說(shuō):"Ambarella的愿景是將AI處理與3D和視覺(jué)感知相結(jié)合,創(chuàng)造一個(gè)環(huán)境智能的未來(lái)。我司與Lumentum和安森美的合作將進(jìn)一步推動(dòng)AI和物聯(lián)網(wǎng) (IoT) 的融合,以實(shí)現(xiàn)新一代門禁系統(tǒng),同時(shí)激發(fā)新類別的環(huán)境感知產(chǎn)品--所有這些產(chǎn)品都由使用AI視覺(jué)處理器的傳感器融合賦能,以智能和不顯眼的方式與人互動(dòng),滿足人們不斷變化的需求。"
Lumentum 3D感知高級(jí)副總裁兼總經(jīng)理Téa Williams說(shuō):"我們新的聯(lián)合解決方案將大大增加AIoT設(shè)備在各應(yīng)用垂直領(lǐng)域的準(zhǔn)確性--從生物識(shí)別門禁和電子鎖開始--使它們能夠識(shí)別人并預(yù)測(cè)他們的需求,而不需要一個(gè)直接的人機(jī)接口。許多這些應(yīng)用將利用3D感知注入新的數(shù)據(jù)輸入維度以優(yōu)化決策。例如,使用更高分辨率的基于VCSEL的點(diǎn)光源可實(shí)現(xiàn)更遠(yuǎn)的感知范圍和更高精度的面部識(shí)別。這些聯(lián)合解決方案中使用的Lumentum的領(lǐng)先業(yè)界的高性能VCSEL陣列,具有零現(xiàn)場(chǎng)故障的特點(diǎn),正在推動(dòng)新的應(yīng)用,幫助實(shí)現(xiàn)AIoT設(shè)備具有3D感知能力的夢(mèng)想。"
安森美工業(yè)和消費(fèi)類傳感器分部 (ICSD) 副總裁兼總經(jīng)理Gianluca Colli說(shuō):“圖像傳感器是智能感知設(shè)備的眼睛,它們看得更遠(yuǎn)更細(xì),從而為AIoT設(shè)備中的AI處理器作決策提供顯著的更多信息。我們領(lǐng)先行業(yè)的RGB-IR傳感器技術(shù)結(jié)合Ambarella的AI視覺(jué)SoC的先進(jìn)圖像信號(hào)處理 (ISP)能力,可將可見(jiàn)圖像和紅外圖像同時(shí)帶給設(shè)備。我們第二代聯(lián)合解決方案采用了客戶的反饋,將RGB-IR圖像傳感器的分辨率提高了四倍,達(dá)到4K (800萬(wàn)像素)。
這三家公司的新的聯(lián)合AIoT解決方案包括兩個(gè)參考設(shè)計(jì)和附加的3D感知開發(fā)套件,每個(gè)都經(jīng)過(guò)獨(dú)特配置,以滿足結(jié)合AI處理、3D深度感知和視覺(jué)感知的特定應(yīng)用需求:
Vision +參考設(shè)計(jì)針對(duì)下一代生物識(shí)別門禁讀卡器,是AIoT行業(yè)首個(gè)基于RGB-IR技術(shù)執(zhí)行單攝像頭940 nm結(jié)構(gòu)光感知的4K解決方案。它也是首個(gè)利用單芯片方案用于深度處理、AI處理和視頻處理的方案。它基于Ambarella CV22 CVflow?AI視覺(jué)處理器,包括由Lumentum的VCSEL技術(shù)賦能的單攝像頭結(jié)構(gòu)光感知,具有2米的范圍,以及安森美的4K (800萬(wàn)像素) RGB-IR CMOS圖像傳感器。
Saturn參考設(shè)計(jì)針對(duì)下一代智能電子門鎖 (eLock),適用于商業(yè)和住宅應(yīng)用,是AIoT行業(yè)首個(gè)將AI處理集成到單攝像頭結(jié)構(gòu)光感知和快速啟動(dòng)視頻處理的設(shè)計(jì)。它基于Ambarella CV25 CVflow AI視覺(jué)處理器,包括一個(gè)由Lumentum的VCSEL技術(shù)賦能的結(jié)構(gòu)光攝像頭和安森美的AR0237CS 200萬(wàn)像素 RGB-IR圖像傳感器。
Ambarella的CV2系列基于CVflow AI視覺(jué)處理器的開發(fā)套件針對(duì)智能感知應(yīng)用,可用于各垂直領(lǐng)域,現(xiàn)在可配備由Lumentum領(lǐng)先的VCSEL陣列賦能的飛行時(shí)間 (ToF)傳感器適配器。這些套件還提供一個(gè)選項(xiàng):4K RGB-IR圖像傳感器適配器。
用于Ambarella的CVflow AI視覺(jué)處理器的開放式軟件開發(fā)套件 (SDK),使第三方應(yīng)用程序易于集成,同時(shí)使原始設(shè)備制造商 (OEM)能以單個(gè)平臺(tái)解決不同的區(qū)域要求 (例如,在不同的區(qū)域用不同的AI算法)。此外,這強(qiáng)固的基于Linux的SDK具備以下功能,擴(kuò)展了邊緣感知設(shè)備的能力,簡(jiǎn)化產(chǎn)品開發(fā)并加快上市時(shí)間:
定制的應(yīng)用開發(fā)能力
支持不同的3D模式,包括結(jié)構(gòu)光和ToF。獨(dú)特的是,一個(gè)Ambarella SoC提供3D感知處理,無(wú)需專用深度處理器或單獨(dú)的主機(jī)處理器
攝像頭設(shè)備的高AI推理能力,支持多個(gè)神經(jīng)網(wǎng)絡(luò) (NN)同時(shí)運(yùn)行
強(qiáng)固的AI工具,支持深度神經(jīng)網(wǎng)絡(luò) (DNN)開發(fā)和遷移
集成ISP,可處理具挑戰(zhàn)性的場(chǎng)景,包括高動(dòng)態(tài)范圍 (HDR) 和微光場(chǎng)景
內(nèi)置Arm?處理器以運(yùn)行客戶應(yīng)用程序
集成安全硬件,包括安全啟動(dòng)、存儲(chǔ)密鑰的OTP和用于安全密鑰比較的Arm TrustZone技術(shù)
豐富的外設(shè)接口支持,簡(jiǎn)化系統(tǒng)設(shè)計(jì)