神經(jīng)處理單元(NPU)加速智能視覺(jué)應(yīng)用

Shanghai, China, 9 June 2021 嵌入式和邊緣計(jì)算技術(shù)的領(lǐng)先供應(yīng)商德國(guó)康佳特推出基于i.MX 8處理器的入門(mén)套件，為AI加速智能嵌入式視覺(jué)應(yīng)用。該套件搭配基于i.MX 8M Plus處理器的SMARC計(jì)算機(jī)模塊，其優(yōu)勢(shì)在于利用集成恩智浦(NXP)神經(jīng)處理單元(NPU)的新處理器，可以運(yùn)行推理引擎和庫(kù)(如Arm Neural Network (NN) 和 TensorFlow Lite)，為基于深度學(xué)習(xí)的人工智能提供多達(dá)2.3個(gè)TOPS性能。此外，它還與Basler嵌入式視覺(jué)軟件無(wú)縫集成，為OEM提供了一個(gè)用于開(kāi)發(fā)下一代AI加速嵌入式視覺(jué)系統(tǒng)的應(yīng)用就緒型解決方案平臺(tái)。廣泛的典型應(yīng)用，涵蓋從價(jià)格敏感的零售自動(dòng)結(jié)帳終端到建筑安全，以及從車內(nèi)導(dǎo)航視覺(jué)到公共汽車的監(jiān)控系統(tǒng)。工業(yè)用例包括基于視覺(jué)的用戶識(shí)別和基于手勢(shì)的機(jī)器操作組成的人機(jī)界面(HMI)，以及視覺(jué)支持的機(jī)器人和工業(yè)質(zhì)量檢測(cè)系統(tǒng)。

康佳特產(chǎn)品管理總監(jiān)Martin Danzer解釋道: “一個(gè)由TensorFlow等開(kāi)源AI軟件解決方案支持的神經(jīng)算法專用處理單元，是許多基于視覺(jué)系統(tǒng)的效率加速器。所有這些資源整合而成的一個(gè)應(yīng)用就緒的硬件和軟件驗(yàn)證平臺(tái)(包括Basler Pylon系列相機(jī)軟件套件)，助力開(kāi)發(fā)者進(jìn)入設(shè)計(jì)NPU加速智能視覺(jué)應(yīng)用。”

Basler pylon 相機(jī)軟件套件提供統(tǒng)一的軟件開(kāi)發(fā)工具包(SDK)，包括用于MIPI的BCON接口 、USB3和GigE接口的視覺(jué)相機(jī)，并允許通過(guò)源代碼、GUI或第三方軟件訪問(wèn)相機(jī)。高性能pylon查看器完美適合相機(jī)評(píng)估。得益于集成加速AI視覺(jué)應(yīng)用的康佳特i.MX 8M Plus入門(mén)套件，工程師可以立即訪問(wèn)重要的AI支持的機(jī)器視覺(jué)功能(如觸發(fā)、單個(gè)圖像捕獲和高度差異化的相機(jī)配置選項(xiàng)，以及基于Arm NN和TensorFlow Lite生態(tài)系統(tǒng)輕松訪問(wèn)定制推理算法)。

詳細(xì)的功能集

AI加速視覺(jué)應(yīng)用的新入門(mén)套件，包含開(kāi)發(fā)者立即啟動(dòng)設(shè)計(jì)所需的整套生態(tài)系統(tǒng)，即可提供高效視覺(jué)和人工智能集成的下一代平臺(tái)。入門(mén)套件的核心是新型SMARC 2.1模塊conga-SMX8-Plus，其擁有4個(gè)功能強(qiáng)大的Arm Cortex®-A53 核心、1個(gè) Arm Cortex®-M72控制器以及加速深度學(xué)習(xí)邊緣算法的恩智浦神經(jīng)處理單元，并提供被動(dòng)式冷卻。3.5英寸載板conga-SMC1/SMARC-ARM可直接通過(guò)MIPI CSI-2.0連接配備F1.8 f4mm透鏡的1300萬(wàn)像素 Basler dart daA4200-30mci BCON MIPI相機(jī)。除了MIPI CSI-2.0，還支持USB和GigE接口的視覺(jué)相機(jī)。在軟件方面，康佳特提供一個(gè)帶有預(yù)先配置的SD卡，包含引導(dǎo)加載程序、Yocto OS鏡像、匹配的BSP和經(jīng)過(guò)處理器優(yōu)化的Basler嵌入式視覺(jué)軟件，并且能夠根據(jù)捕獲的圖像和視頻序列立即進(jìn)行AI推理訓(xùn)練。