技術(shù)
導(dǎo)讀:Prophesee 新款 Metavision? 事件視覺(jué)傳感器 GenX320性能達(dá)到新高,提供超低功耗、低延遲、高靈活性,適用于 AR/VR、機(jī)器人、筆記本電腦、物聯(lián)網(wǎng)等領(lǐng)域的高效集成。
Prophesee 新款 Metavision? 事件視覺(jué)傳感器 GenX320性能達(dá)到新高,提供超低功耗、低延遲、高靈活性,適用于 AR/VR、機(jī)器人、筆記本電腦、物聯(lián)網(wǎng)等領(lǐng)域的高效集成。
Prophesee Metavision? 事件視覺(jué)傳感器 GenX320
2023年10月20日,中國(guó)上海——領(lǐng)先的神經(jīng)擬態(tài)視覺(jué)傳感公司普諾飛思(Prophesee)今日宣布,推出業(yè)界首款專為超低功耗邊緣視覺(jué)設(shè)備集成設(shè)計(jì)的 Metavision? 事件視覺(jué)傳感器 GenX320。該新品為Prophesee第五代Metavision 傳感器產(chǎn)品,采用尺寸為 3x4mm 的裸片。GenX320的推出將 Prophesee開創(chuàng)性的事件視覺(jué)技術(shù)平臺(tái)的應(yīng)用范圍拓寬,擴(kuò)展至快速增長(zhǎng)的邊緣市場(chǎng)領(lǐng)域,覆蓋 AR/VR 設(shè)備、可穿戴設(shè)備、游戲、機(jī)器人、筆記本和平板電腦、物聯(lián)網(wǎng)設(shè)備等。
Prophesee Metavision? 事件視覺(jué)傳感器 GenX320裸片尺寸
Prophesee 聯(lián)合創(chuàng)始人兼首席執(zhí)行官 Luca Verre 表示:“事件視覺(jué)傳感器具備卓越的性能及能效,非常適合低功耗邊緣人工智能市場(chǎng)各式各樣的應(yīng)用。基于在其它應(yīng)用領(lǐng)域取得商業(yè)成功,我們開發(fā)了這款全新的 Metavision 事件視覺(jué)傳感器,專門滿足邊緣系統(tǒng)開發(fā)人員的需求。該款傳感器易于集成、配置和優(yōu)化,適用于運(yùn)動(dòng)和物體檢測(cè)、存在感知、手勢(shì)識(shí)別、眼動(dòng)追蹤,以及其它高增長(zhǎng)市場(chǎng)的多種用例?!?/p>
基于 Prophesee 豐富經(jīng)驗(yàn)和多年的技術(shù)積淀,GenX320 事件視覺(jué)傳感器能夠?yàn)楦鞣N應(yīng)用帶來(lái)速度、低延遲、動(dòng)態(tài)范圍和能效方面的優(yōu)勢(shì)。GenX320 事件視覺(jué)傳感器采用 BSI 堆棧式技術(shù),像素尺寸為 320x320 6.3μm,采用微型的 1/5” 光學(xué)格式,因此,在能源、計(jì)算和尺寸都受制約的嵌入式邊緣視覺(jué)系統(tǒng)中,GenX320 事件視覺(jué)傳感器正契合其對(duì)于高效集成事件視覺(jué)傳感的技術(shù)要求。即使在極具挑戰(zhàn)性的操作和照明條件下,GenX320 仍能以超低功耗提供穩(wěn)定、高速的視覺(jué)感知。
GenX320 帶來(lái)的優(yōu)勢(shì)包括:
? 低延遲的事件時(shí)間戳,分辨率為微秒,且數(shù)據(jù)格式靈活。
? 片上智能電源管理模式,可將功耗降至 36uW,并支持智能喚醒事件,同時(shí)支持深度睡眠和待機(jī)模式。
? 與標(biāo)準(zhǔn) SoC 輕松集成/連接,具備多個(gè)集成事件數(shù)據(jù)預(yù)處理、過(guò)濾和格式化功能,可最大程度地減少外部處理開銷。
? MIPI 或 CPI 數(shù)據(jù)輸出接口為嵌入式處理平臺(tái)(包括低功耗微控制器和現(xiàn)代神經(jīng)擬態(tài)處理器架構(gòu))提供低延遲連接。
? AI-ready:片上直方圖輸出可兼容多個(gè) AI 加速器。
? 傳感器級(jí)別隱私保護(hù):得益于事件傳感器固有的稀疏無(wú)框事件數(shù)據(jù),以及靜態(tài)場(chǎng)景去除功能,能夠從傳感器層面保護(hù)隱私。
? 與 Prophesee Metavision Intelligence 原生兼容,Metavision Intelligence 是當(dāng)前業(yè)界最全面的免費(fèi)事件視覺(jué)軟件套件,目前在全球擁有超過(guò) 10,000 名用戶。
潛在應(yīng)用場(chǎng)景
? 用于 AR/VR/XR 頭顯中的注視點(diǎn)渲染或無(wú)縫交互的高速眼動(dòng)追蹤
? 消費(fèi)電子設(shè)備(電視、PC、游戲機(jī)、智能家居等)中低延遲、無(wú)接觸的人機(jī)交互界面
? 物聯(lián)網(wǎng)攝像頭中的智能存在檢測(cè)和人數(shù)統(tǒng)計(jì)
? 超低功耗 always-on 區(qū)域監(jiān)控系統(tǒng)
? 家庭及醫(yī)療設(shè)備中檢測(cè)跌倒的攝像頭
Prophesee Metavision事件視覺(jué)傳感器 GenX320, 專為超低功耗邊緣視覺(jué)設(shè)備開發(fā)設(shè)計(jì)
商業(yè)可用
GenX320 現(xiàn)可從 Prophesee 及其銷售合作伙伴處購(gòu)買。GenX320 配套一整套開發(fā)工具,包括裝有板載芯片 (COB) GenX320 模組或緊湊型光學(xué)柔性模組的綜合評(píng)估套件 (Evaluation Kit),可幫助開發(fā)人員輕松探索和開展優(yōu)化工作。此外,Prophesee 還提供一系列適配器套件,可無(wú)縫連接到各種嵌入式平臺(tái)(例如 STM32 MCU),從而縮短產(chǎn)品上市時(shí)間(Time-to-Market)。
合作客戶
Zinn Labs
“基于 Prophesee Metavision 事件傳感器的獨(dú)特功能,Zinn Labs 正在開發(fā)新一代視線跟蹤系統(tǒng)。 Prophesee 新型 GenX320 傳感器能夠以毫秒為時(shí)間單位,捕捉眼睛和注視動(dòng)作的變化。相比傳統(tǒng)的基于視頻的視線跟蹤模式,使用 GenX320 傳感器,Zinn Labs 能夠以更小的功率及計(jì)算量來(lái)跟蹤眼睛的特征變化(視線追蹤系統(tǒng)的功率低于 20 mW)。此外,由于新款傳感器的封裝尺寸更小,使得事件視覺(jué)傳感器能夠首次應(yīng)用于空間有限的 AR/VR 頭顯設(shè)備中。Zinn Labs 很高興能與 Prophesee 合作,我們正在將 GenX320 傳感器集成到即將推出的客戶項(xiàng)目中?!?/p>
Kevin Boyle
Zinn Labs 創(chuàng)始人兼首席執(zhí)行官
YunX
“YunX 是一家致力于物聯(lián)網(wǎng)技術(shù)與醫(yī)療應(yīng)用的企業(yè)。隨著全球人口老齡化現(xiàn)象日益加劇和醫(yī)療科技的快速發(fā)展,照護(hù)市場(chǎng)迎來(lái)前所未有的機(jī)遇。如何在注重隱私保護(hù)的同時(shí)實(shí)時(shí)提供對(duì)人體更精準(zhǔn)、更可靠的 AI 監(jiān)測(cè)分析,成為當(dāng)前的最主要的挑戰(zhàn)。基于 Prophesee 所開發(fā)的事件傳感 EVS 的 Metavision影像技術(shù),YunX 為這一市場(chǎng)提供了兩種需求兼顧的理想方案,并在其高階產(chǎn)品中已得到功能驗(yàn)證。全新面市的第五代 GenX320 傳感器在緊湊性、低功耗和邊緣 AI 能力及降低成本方面實(shí)現(xiàn)了重大突破,同時(shí)通過(guò)算法革新在性能上也保持了巨大的優(yōu)勢(shì)?!?/p>
鮑柏君
YunX 首席執(zhí)行長(zhǎng)
XPERI
“每當(dāng)將視覺(jué)技術(shù)應(yīng)用于駕駛員監(jiān)控解決方案(DMS)和電視服務(wù)等產(chǎn)品中時(shí),隱私總是消費(fèi)者最關(guān)心的問(wèn)題之一。通過(guò) Prophesee Metavision 事件視覺(jué)技術(shù),我們無(wú)需對(duì)場(chǎng)景進(jìn)行明確的視覺(jué)表征即可理解場(chǎng)景,將我們的“隱私設(shè)計(jì) (PbD)”原則提升至更安全的水平。只需捕獲每個(gè)像素的變化,無(wú)需像傳統(tǒng)圖像傳感器那樣捕獲整個(gè)場(chǎng)景,我們的算法可通過(guò)捕獲的內(nèi)容來(lái)感知到場(chǎng)景中的細(xì)節(jié),不用再對(duì)其進(jìn)行詳細(xì)表征。我們還開發(fā)了一個(gè)概念驗(yàn)證演示,證明使用神經(jīng)擬態(tài)傳感器完全可以實(shí)現(xiàn)駕駛員監(jiān)控解決方案。使用 1MP 神經(jīng)擬態(tài)傳感器,我們可以推斷出與基于主動(dòng) NIR 照明 2MP 視覺(jué)傳感器的解決方案類似的性能。未來(lái),我們將重點(diǎn)關(guān)注GenX320 神經(jīng)形態(tài)傳感器,它適用于隱私敏感的智能設(shè)備,將幫助我們進(jìn)一步提升用戶體驗(yàn)?!?/p>
Petronel Bigioi
XPERI 首席技術(shù)官
ULTRALEAP
“通過(guò)在 Ultra Leap 的 TouchFree 應(yīng)用中的高精度手勢(shì)識(shí)別和手部跟蹤功能,我們看到了 Prophesee 事件視覺(jué)傳感器在實(shí)現(xiàn)無(wú)接觸交互方面的優(yōu)勢(shì)。Prophesee 事件視覺(jué)傳感器能夠在極具挑戰(zhàn)性的環(huán)境條件下,以極為高效的能耗水平和低系統(tǒng)延遲運(yùn)行,從而增強(qiáng)我們無(wú)接觸用戶界面(UI)的整體用戶體驗(yàn)和直觀性。隨著新款 Genx320 傳感器的推出,將有更多的應(yīng)用和設(shè)備,包括電池供電的小型系統(tǒng)以及不斷增加的無(wú)接觸式用例,都將受益于事件視覺(jué)傳感器的穩(wěn)健性、低功耗、低延遲以及高動(dòng)態(tài)范圍的優(yōu)勢(shì),進(jìn)一步提升各類數(shù)字內(nèi)容交互的便利性和易用性。”
Tom Carter
ULTRALEAP 聯(lián)合創(chuàng)始人兼首席執(zhí)行官
###
關(guān)于 PROPHESEE
Prophesee 是神經(jīng)擬態(tài)視覺(jué)系統(tǒng)的發(fā)明者和全球市場(chǎng)領(lǐng)導(dǎo)者。
Prophesee 為機(jī)器視覺(jué)開發(fā)了突破性的事件視覺(jué)(Event-Based Vision)解決方案。這種新的視覺(jué)方法可顯著降低功耗、延遲、及數(shù)據(jù)處理量,能夠獲得傳統(tǒng)基于幀的傳感器不能獲取的內(nèi)容。Prophesee 獲得專利的 Metavision 傳感器和 AI 算法,模仿人眼和大腦的工作方式,能夠顯著提高機(jī)器視覺(jué)在自動(dòng)駕駛汽車、工業(yè)自動(dòng)化、手機(jī)、物聯(lián)網(wǎng)和 AR/VR 等領(lǐng)域的效率。
Prophesee 全球總部位于巴黎,中國(guó)總部位于上海。公司還在東京和硅谷等全球多地設(shè)有辦事處。公司有 100 多位科研人員。擁有 50 多項(xiàng)國(guó)際專利, 并得到領(lǐng)先國(guó)際投資者的支持,包括 Intel、BOSCH、雷諾集團(tuán)、小米、韋爾股份等戰(zhàn)略投資人,及歐洲投資銀行 EIB、創(chuàng)新工場(chǎng)、韋豪創(chuàng)芯、Prosperity7 Ventures 等產(chǎn)業(yè)投資人。