PROPHESEE 發(fā)布全新事件視覺傳感器,超低功耗、極小尺寸讓消費類智能設(shè)備更自主、更安全
2023年10月20日,中國上海——領(lǐng)先的神經(jīng)擬態(tài)視覺傳感公司普諾飛思(Prophesee)今日宣布,推出業(yè)界首款專為超低功耗邊緣視覺設(shè)備集成設(shè)計的 Metavision® 事件視覺傳感器 GenX320。該新品為Prophesee第五代Metavision 傳感器產(chǎn)品,采用尺寸為 3x4mm 的裸片。GenX320的推出將 Prophesee開創(chuàng)性的事件視覺技術(shù)平臺的應(yīng)用范圍拓寬,擴展至快速增長的邊緣市場領(lǐng)域,覆蓋 AR/VR 設(shè)備、可穿戴設(shè)備、游戲、機器人、筆記本和平板電腦、物聯(lián)網(wǎng)設(shè)備等。
Prophesee Metavision® 事件視覺傳感器 GenX320
Prophesee Metavision® 事件視覺傳感器 GenX320裸片尺寸
Prophesee 聯(lián)合創(chuàng)始人兼首席執(zhí)行官 Luca Verre 表示:“事件視覺傳感器具備卓越的性能及能效,非常適合低功耗邊緣人工智能市場各式各樣的應(yīng)用?;谠谄渌鼞?yīng)用領(lǐng)域取得商業(yè)成功,我們開發(fā)了這款全新的 Metavision 事件視覺傳感器,專門滿足邊緣系統(tǒng)開發(fā)人員的需求。該款傳感器易于集成、配置和優(yōu)化,適用于運動和物體檢測、存在感知、手勢識別、眼動追蹤,以及其它高增長市場的多種用例?!?
基于 Prophesee 豐富經(jīng)驗和多年的技術(shù)積淀,GenX320 事件視覺傳感器能夠為各種應(yīng)用帶來速度、低延遲、動態(tài)范圍和能效方面的優(yōu)勢。GenX320 事件視覺傳感器采用 BSI 堆棧式技術(shù),像素尺寸為 320x320 6.3μm,采用微型的 1/5” 光學(xué)格式,因此,在能源、計算和尺寸都受制約的嵌入式邊緣視覺系統(tǒng)中,GenX320 事件視覺傳感器正契合其對于高效集成事件視覺傳感的技術(shù)要求。即使在極具挑戰(zhàn)性的操作和照明條件下,GenX320 仍能以超低功耗提供穩(wěn)定、高速的視覺感知。
GenX320 帶來的優(yōu)勢包括:
?低延遲的事件時間戳,分辨率為微秒,且數(shù)據(jù)格式靈活。
?片上智能電源管理模式,可將功耗降至 36uW,并支持智能喚醒事件,同時支持深度睡眠和待機模式。
?與標準 SoC 輕松集成/連接,具備多個集成事件數(shù)據(jù)預(yù)處理、過濾和格式化功能,可最大程度地減少外部處理開銷。
?MIPI 或 CPI 數(shù)據(jù)輸出接口為嵌入式處理平臺(包括低功耗微控制器和現(xiàn)代神經(jīng)擬態(tài)處理器架構(gòu))提供低延遲連接。
?AI-ready:片上直方圖輸出可兼容多個 AI 加速器。
?傳感器級別隱私保護:得益于事件傳感器固有的稀疏無框事件數(shù)據(jù),以及靜態(tài)場景去除功能,能夠從傳感器層面保護隱私。
與 Prophesee Metavision Intelligence 原生兼容,Metavision Intelligence 是當(dāng)前業(yè)界最全面的免費事件視覺軟件套件,目前在全球擁有超過 10,000 名用戶。
潛在應(yīng)用場景
?用于 AR/VR/XR 頭顯中的注視點渲染或無縫交互的高速眼動追蹤
?消費電子設(shè)備(電視、PC、游戲機、智能家居等)中低延遲、無接觸的人機交互界面
?物聯(lián)網(wǎng)攝像頭中的智能存在檢測和人數(shù)統(tǒng)計
?超低功耗 always-on 區(qū)域監(jiān)控系統(tǒng)
?家庭及醫(yī)療設(shè)備中檢測跌倒的攝像頭
Prophesee Metavision事件視覺傳感器 GenX320, 專為超低功耗邊緣視覺設(shè)備開發(fā)設(shè)計
商業(yè)可用
GenX320 現(xiàn)可從 Prophesee 及其銷售合作伙伴處購買。GenX320 配套一整套開發(fā)工具,包括裝有板載芯片 (COB) GenX320 模組或緊湊型光學(xué)柔性模組的綜合評估套件 (Evaluation Kit),可幫助開發(fā)人員輕松探索和開展優(yōu)化工作。此外,Prophesee 還提供一系列適配器套件,可無縫連接到各種嵌入式平臺(例如 STM32 MCU),從而縮短產(chǎn)品上市時間(Time-to-Market)。
合作客戶
Zinn Labs
“基于 Prophesee Metavision 事件傳感器的獨特功能,Zinn Labs 正在開發(fā)新一代視線跟蹤系統(tǒng)。 Prophesee 新型 GenX320 傳感器能夠以毫秒為時間單位,捕捉眼睛和注視動作的變化。相比傳統(tǒng)的基于視頻的視線跟蹤模式,使用 GenX320 傳感器,Zinn Labs 能夠以更小的功率及計算量來跟蹤眼睛的特征變化(視線追蹤系統(tǒng)的功率低于 20 mW)。此外,由于新款傳感器的封裝尺寸更小,使得事件視覺傳感器能夠首次應(yīng)用于空間有限的 AR/VR 頭顯設(shè)備中。Zinn Labs 很高興能與 Prophesee 合作,我們正在將 GenX320 傳感器集成到即將推出的客戶項目中?!?
Kevin Boyle
Zinn Labs 創(chuàng)始人兼首席執(zhí)行官
YunX
“YunX 是一家致力于物聯(lián)網(wǎng)技術(shù)與醫(yī)療應(yīng)用的企業(yè)。隨著全球人口老齡化現(xiàn)象日益加劇和醫(yī)療科技的快速發(fā)展,照護市場迎來前所未有的機遇。如何在注重隱私保護的同時實時提供對人體更精準、更可靠的AI 監(jiān)測分析,成為當(dāng)前的最主要的挑戰(zhàn)?;赑rophesee 所開發(fā)的事件傳感EVS 的Metavision影像技術(shù),YunX 為這一市場提供了兩種需求兼顧的理想方案,并在其高階產(chǎn)品中已得到功能驗證。全新面市的第五代GenX320 傳感器在緊湊性、低功耗和邊緣AI 能力及降低成本方面實現(xiàn)了重大突破,同時通過算法革新在性能上也保持了巨大的優(yōu)勢?!?
鮑柏君
YunX 首席執(zhí)行長
XPERI
“每當(dāng)將視覺技術(shù)應(yīng)用于駕駛員監(jiān)控解決方案(DMS)和電視服務(wù)等產(chǎn)品中時,隱私總是消費者最關(guān)心的問題之一。通過 Prophesee Metavision 事件視覺技術(shù),我們無需對場景進行明確的視覺表征即可理解場景,將我們的“隱私設(shè)計 (PbD)”原則提升至更安全的水平。只需捕獲每個像素的變化,無需像傳統(tǒng)圖像傳感器那樣捕獲整個場景,我們的算法可通過捕獲的內(nèi)容來感知到場景中的細節(jié),不用再對其進行詳細表征。我們還開發(fā)了一個概念驗證演示,證明使用神經(jīng)擬態(tài)傳感器完全可以實現(xiàn)駕駛員監(jiān)控解決方案。使用 1MP 神經(jīng)擬態(tài)傳感器,我們可以推斷出與基于主動 NIR 照明 2MP 視覺傳感器的解決方案類似的性能。未來,我們將重點關(guān)注GenX320 神經(jīng)形態(tài)傳感器,它適用于隱私敏感的智能設(shè)備,將幫助我們進一步提升用戶體驗?!?
Petronel Bigioi
XPERI 首席技術(shù)官
ULTRALEAP
“通過在 Ultra Leap 的 TouchFree 應(yīng)用中的高精度手勢識別和手部跟蹤功能,我們看到了 Prophesee 事件視覺傳感器在實現(xiàn)無接觸交互方面的優(yōu)勢。Prophesee 事件視覺傳感器能夠在極具挑戰(zhàn)性的環(huán)境條件下,以極為高效的能耗水平和低系統(tǒng)延遲運行,從而增強我們無接觸用戶界面(UI)的整體用戶體驗和直觀性。隨著新款 Genx320 傳感器的推出,將有更多的應(yīng)用和設(shè)備,包括電池供電的小型系統(tǒng)以及不斷增加的無接觸式用例,都將受益于事件視覺傳感器的穩(wěn)健性、低功耗、低延遲以及高動態(tài)范圍的優(yōu)勢,進一步提升各類數(shù)字內(nèi)容交互的便利性和易用性?!?
Tom Carter
ULTRALEAP 聯(lián)合創(chuàng)始人兼首席執(zhí)行官