近日，領(lǐng)先的融合視覺傳感器研發(fā)商銳思智芯? 正式發(fā)布全球首款將全局曝光圖像技術(shù)與EVS事件感知技術(shù)實(shí)現(xiàn)像素級融合的融合視覺傳感器——ALPIX-Pizol?。作為全球首款將出色的暗光性能、高幀率運(yùn)動捕捉、高光比動態(tài)成像和超低功耗感知特性集于一身的視覺傳感器，ALPIX-Pizol? 為低算力、低功耗端側(cè)AI感知、超低功耗成像、無人機(jī)、機(jī)器人與智慧城市領(lǐng)域的前沿客戶提供突破性的多模態(tài)融合視覺方案，賦能端側(cè)AI與空間智能產(chǎn)業(yè)生態(tài)。

GESP像素設(shè)計(jì)+三合一模式，重構(gòu)AI感知新維度

ALPIX-Pizol? 是一款1/4英寸、由1.3M GESP? （Global Event Sensing Pixel）像素組成的視覺傳感器，它提供了圖像、事件和融合等三種工作模式，每個工作模式下可以選擇常規(guī)與低功耗設(shè)置，模式間可實(shí)現(xiàn)毫秒級切換。通過這種3 × 2模式組合，實(shí)現(xiàn)視覺AI場景全覆蓋，構(gòu)建全新AI感知新維度：

1、高性能全局曝光圖像傳感模式（GS）：輸出1.3MP/120 fps圖像，其性能對標(biāo)市行業(yè)同規(guī)格全局曝光圖像傳感器。

ALPIX-Pizol（左）采用全局曝光，實(shí)現(xiàn)所有像素同時曝光，去除卷簾曝光（右）常見的果凍效應(yīng)帶來的畸變

2、提供低延時變化感知的事件模式（EVS）：輸出全分辨率下最高幀率1000 fps的事件信號，高效捕捉運(yùn)動信息。

低光高速環(huán)境中，ALPIX-Pizol可輸出高時間分辨率無模糊事件流，輔助提升影像質(zhì)量

ALPIX-Pizol可提供高質(zhì)量稀疏事件數(shù)據(jù)，輔助重構(gòu)高質(zhì)量影像

3、獨(dú)有融合視覺模式（eGS）：支持GS（圖像）、EVS（事件）和HVS（融合）三種模式，HVS模式支持同時輸出圖像和事件數(shù)據(jù)，也支持模式間快速切換，從而在各種光照環(huán)境下穩(wěn)定地為視覺AI提供高質(zhì)量圖像數(shù)據(jù)和高時間分辨率的變化/運(yùn)動數(shù)據(jù)。

針對AI視覺場景對低功耗的需求，ALPIX-Pizol提供上述三種工作模式對應(yīng)的低功耗設(shè)置，即低功耗全局圖像（LPGS）、低功耗事件（LPEVS）和低功耗融合模式（LPeGS），全面滿足低功耗場景需求。比如，LPEVS模式支持超低功耗感知（e.g. <1.5 mW @VGA 30 fps），支持直接提取機(jī)器需要的特征數(shù)據(jù)，在傳感器側(cè)和處理器側(cè)均可極大降低功耗和算力需求。LPGS模式的設(shè)計(jì)功耗可降至普通全局圖像傳感器功耗的1/30。--

獨(dú)有超低功耗/低功耗運(yùn)動檢測模式，輔助設(shè)備低功耗逐級觸發(fā)判斷

ALPIX-Pizol內(nèi)置銳思智芯獨(dú)有的超低功耗運(yùn)動檢測（ULPMD）和低功耗運(yùn)動檢測（LPMD）模式。在ULPMD模式下，可實(shí)持微瓦級（μW）的實(shí)時變化感知和觸發(fā)功能。在LPMD模式下，可實(shí)現(xiàn)毫瓦級（mW）的低功耗運(yùn)動檢測和觸發(fā)功能。同時芯片內(nèi)部集成的AON-ALS 和 FAST-AE 功能，可實(shí)現(xiàn)首幀圖像和事件數(shù)據(jù)可用。

關(guān)鍵技術(shù)優(yōu)勢：

1、優(yōu)越的暗光高速性能：低光環(huán)境（0.1 lux環(huán)境光，鏡頭參數(shù) 6 mm f/1.2）仍可輸出等效1000 fps的運(yùn)動信息，增強(qiáng)暗光場景設(shè)備的快速感知能力。

ALPIX-Pizol可于0.1lux環(huán)境光中感知運(yùn)動和變化

2、高動態(tài)范圍中的高速運(yùn)動捕捉能力：ALPIX-Pizol? 具備全分辨率、1000 fps高幀率下保持單幀120 dB動態(tài)范圍的極致能力，輕松應(yīng)對極端光照、高光比等復(fù)雜場景，超越同等級全局圖像傳感器。

ALPIX-Pizol在大光比場景中準(zhǔn)確感知運(yùn)動和變化

3、超低功耗優(yōu)勢：通過EvMo? 技術(shù)，實(shí)現(xiàn)像素內(nèi)運(yùn)動特征提取，在EVS模式下大幅降低傳感器功耗，功耗僅為傳統(tǒng)全局曝光圖像傳感器的1/20-1/5。

4、減少數(shù)據(jù)冗余和系統(tǒng)算力消耗：事件模式下，僅感知變化信息，提升系統(tǒng)實(shí)時性。單位時間生成的事件數(shù)據(jù)量僅為傳統(tǒng)圖像傳感器的10-20%，減少算力、傳輸帶寬和存儲壓力，推升系統(tǒng)能效。減少視覺AI系統(tǒng)碳足跡，大幅降低應(yīng)用成本。

全場景賦能：從消費(fèi)電子到工業(yè)4.0

手機(jī)/運(yùn)動相機(jī)：影像增強(qiáng)，實(shí)現(xiàn)EVS AI-enhanced 圖像/視頻去模糊、視頻插幀、AI-ISP等功能，利用多模態(tài)數(shù)據(jù)輔助生成AI-Motion運(yùn)動感知應(yīng)用。

AI-PC、平板和XR頭顯：實(shí)現(xiàn)高魯棒性的實(shí)時眼動追蹤、手勢識別與空間交互；降低傳感器延時、算法及系統(tǒng)功耗，提升產(chǎn)品使用友好度。

無人機(jī)、機(jī)器人、自動駕駛：支持快速避障、目標(biāo)追蹤，修正因運(yùn)動造成的畫質(zhì)問題，支持快速3D掃描和建模，尤其適應(yīng)復(fù)雜光照中的動態(tài)捕捉。

工業(yè)視覺：無畸變?nèi)制毓鈭D像 + 高時間分辨率的事件數(shù)據(jù)，支持低光、暗光場景高速產(chǎn)線檢測和快速3D掃描、建模等數(shù)據(jù)。