近日，視美泰正式推出了最新研發(fā)成果——EVS事件融合相機(jī)“靈光一號(hào)”。這款事件融合相機(jī)的發(fā)布標(biāo)志著視美泰在視覺(jué)事件捕捉技術(shù)領(lǐng)域邁出了重要的一步，為行業(yè)樹(shù)立了新的標(biāo)桿。 “靈光一號(hào)”作為視美泰精心打造的高端產(chǎn)品，基于APS（有源像素傳感器Active Pixel Sensor）+EVS（事件驅(qū)動(dòng)傳感器，Event-based Vision Sensor）的視覺(jué)融合相機(jī)，在像素級(jí)進(jìn)行融合，既支持輸出傳統(tǒng)圖像幀，又支持輸出事件流，兼顧了APS 下高質(zhì)量豐富視覺(jué)細(xì)節(jié)信息，以及EVS 下高動(dòng)態(tài)范圍、低延時(shí)、低數(shù)據(jù)冗余、低功耗等突出特點(diǎn)，特別適合在快速變化和復(fù)雜光照環(huán)境下工作。

什么是事件相機(jī)

事件相機(jī)（Event-based Camera）是一種新型的視覺(jué)傳感器，其設(shè)計(jì)受到了生物視覺(jué)系統(tǒng)的啟發(fā)。與傳統(tǒng)相機(jī)不同，事件相機(jī)并不以固定的幀率捕獲整個(gè)圖像，而是每個(gè)像素獨(dú)立工作，當(dāng)檢測(cè)到亮度變化超過(guò)預(yù)設(shè)閾值時(shí)，會(huì)立即生成一個(gè)被稱(chēng)為“事件”的數(shù)據(jù)點(diǎn)。這個(gè)事件包含了亮度變化的時(shí)間戳、位置（像素坐標(biāo)）和變化的方向（變亮或變暗）。因此，事件相機(jī)能夠以極高的時(shí)間分辨率（通常是微秒級(jí)）響應(yīng)環(huán)境中的變化，而不需要像傳統(tǒng)相機(jī)那樣周期性地獲取整個(gè)圖像。

APS與EVS融合視覺(jué)技術(shù)

傳統(tǒng)圖像傳感器工作原理

傳統(tǒng)圖像傳感器能提供色彩豐富、適應(yīng)人眼的圖像，其工作原理為按照固定幀率進(jìn)行圖像數(shù)據(jù)采集，無(wú)法進(jìn)行連續(xù)記錄，幀與幀之間數(shù)據(jù)缺失，單幀有效信息占比低，全局曝光模式限制了動(dòng)態(tài)范圍。對(duì)機(jī)器而言，其工作幀率低、功耗高、冗余數(shù)據(jù)量大、動(dòng)態(tài)范圍窄

事件傳感器工作原理

事件驅(qū)動(dòng)型傳感器模仿人類(lèi)視網(wǎng)膜神經(jīng)元工作原理，僅快速響應(yīng)物體運(yùn)動(dòng)中產(chǎn)生光照變化(事件)，輸出事件流，可以連續(xù)、低功耗地感知場(chǎng)景變化，并能自動(dòng)調(diào)整參數(shù)適應(yīng)各種光照條件和光照快速變化。對(duì)機(jī)器而言，其工作幀率高、功耗低、冗余數(shù)據(jù)量小、動(dòng)態(tài)范圍寬。

APS與EVS融合的獨(dú)特優(yōu)勢(shì)

動(dòng)態(tài)捕捉與高效應(yīng)用的完美結(jié)合

Hybrid Vision 融合視覺(jué)技術(shù)創(chuàng)造性地融合了圖像傳感和事件傳感器技術(shù)，實(shí)現(xiàn)了兩大核心功能的集成。該技術(shù)通過(guò)同一顆芯片，可以同時(shí)輸出高質(zhì)量圖像數(shù)據(jù)和事件流，為動(dòng)態(tài)場(chǎng)景的捕捉提供了前所未有的細(xì)膩度和精準(zhǔn)度。其中，圖像功能支持輸出高質(zhì)量圖像，延續(xù)了傳統(tǒng)圖像傳感的優(yōu)勢(shì)，保證了全幅畫(huà)質(zhì)和影像細(xì)節(jié)；而事件功能則模仿人眼視網(wǎng)膜神經(jīng)元的工作原理，以微秒級(jí)速度、全時(shí)域記錄并輸出光照變化，這一特性使得融合相機(jī)在快速移動(dòng)或劇烈光線變化的場(chǎng)景中能夠捕捉到更加細(xì)膩的動(dòng)態(tài)細(xì)節(jié)，遠(yuǎn)勝于普通相機(jī)。

超高動(dòng)態(tài)范圍

在超高動(dòng)態(tài)范圍方面，Hybrid Vision 融合視覺(jué)技術(shù)展現(xiàn)出了卓越的性能。相比普通相機(jī)，融合相機(jī)在極端光照條件下（如高亮度或黑暗場(chǎng)景）依然能夠輸出清晰穩(wěn)定的圖像，避免了傳統(tǒng)相機(jī)在此類(lèi)環(huán)境下容易出現(xiàn)的過(guò)曝或失去細(xì)節(jié)的問(wèn)題。這一特性使得融合相機(jī)在自動(dòng)駕駛、機(jī)器人視覺(jué)等對(duì)光照條件要求苛刻的場(chǎng)景中具有更廣泛的應(yīng)用前景。

低延遲與實(shí)時(shí)響應(yīng)

Hybrid Vision 融合視覺(jué)技術(shù)還具備低延遲與實(shí)時(shí)響應(yīng)的優(yōu)勢(shì)。事件傳感器部分僅在亮度變化時(shí)捕捉信息，有效減少了無(wú)效數(shù)據(jù)的處理，從而確保了低延遲的實(shí)時(shí)響應(yīng)。這一特性使得融合相機(jī)在捕捉快速運(yùn)動(dòng)的物體時(shí)表現(xiàn)更加出色，進(jìn)一步提升了其在時(shí)間要求苛刻場(chǎng)景中的適用性。

節(jié)能高效

在節(jié)能高效方面，Hybrid Vision 融合視覺(jué)技術(shù)通過(guò)減少不必要的數(shù)據(jù)處理，不僅降低了系統(tǒng)算力需求，還有效降低了能耗。這一特性使得搭載該技術(shù)的芯片能夠更廣泛地應(yīng)用于手機(jī)、消費(fèi)電子、安防、汽車(chē)等領(lǐng)域，為這些領(lǐng)域提供了更加高效、節(jié)能的視覺(jué)解決方案。

更優(yōu)性能,無(wú)縫兼容現(xiàn)有框架

值得一提的是，Hybrid Vision 融合視覺(jué)技術(shù)還具備更優(yōu)的性能和無(wú)縫兼容現(xiàn)有框架的能力。該技術(shù)從采集側(cè)消除冗余數(shù)據(jù)，減少數(shù)據(jù)處理量，節(jié)約系統(tǒng)成本，同時(shí)自動(dòng)參數(shù)調(diào)節(jié)以適應(yīng)復(fù)雜多變的光照條件，達(dá)到更高動(dòng)態(tài)范圍。此外，該技術(shù)還適配傳統(tǒng)圖像傳感系統(tǒng)，兼容現(xiàn)有圖像處理算法和架構(gòu)，為用戶(hù)提供了更加靈活、便捷的應(yīng)用體驗(yàn)。

專(zhuān)利化的芯片架構(gòu)與先進(jìn)工藝

專(zhuān)利化的芯片架構(gòu)與先進(jìn)工藝為Hybrid Vision 融合視覺(jué)技術(shù)提供了堅(jiān)實(shí)的支持。憑借專(zhuān)利化的芯片架構(gòu)和像素設(shè)計(jì)，輔以先進(jìn)的3D堆疊和BSI背照式工藝，該技術(shù)賦予機(jī)器更低的系統(tǒng)延時(shí)、更快的響應(yīng)速度、更優(yōu)質(zhì)的暗光性能、更高的信噪比與更低的系統(tǒng)成本。這些優(yōu)勢(shì)使得Hybrid Vision 融合視覺(jué)技術(shù)在未來(lái)具有更加廣闊的發(fā)展前景和應(yīng)用空間。

技術(shù)亮點(diǎn)

超低延遲

憑借EVS傳感器的亮度變化檢測(cè)能力，融合相機(jī)比傳統(tǒng)相機(jī)有顯著更低的延遲，使其能夠即時(shí)反饋場(chǎng)景變化。

高動(dòng)態(tài)范圍 (HDR)

融合相機(jī)可在極端明暗對(duì)比的環(huán)境中準(zhǔn)確捕捉圖像，而不因過(guò)亮或過(guò)暗而損失細(xì)節(jié)。

精準(zhǔn)捕捉高速運(yùn)動(dòng)

對(duì)于高速移動(dòng)的物體，融合相機(jī)比傳統(tǒng)RGB相機(jī)有更好的捕捉和處理能力，適合需要精確跟蹤的應(yīng)用場(chǎng)景。

典型應(yīng)用場(chǎng)景

眼球追蹤/手勢(shì)交互/車(chē)內(nèi)隱私監(jiān)控

HDR
解決普通攝像頭在黑間或明暗快速變化的復(fù)雜光照條件下失靈的問(wèn)題，提高汽車(chē)系統(tǒng)安全.

自動(dòng)駕駛

融合相機(jī)在自動(dòng)駕駛系統(tǒng)中展現(xiàn)出卓越的性能，利用EVS的快速響應(yīng)特性和RGB相機(jī)的精細(xì)成像能力，顯著降低數(shù)據(jù)處理負(fù)擔(dān)，并在復(fù)雜的光線條件下提供更安全的駕駛保障。

工業(yè)檢測(cè)：

在工業(yè)生產(chǎn)中，融合相機(jī)可對(duì)生產(chǎn)線上快速移動(dòng)的物體進(jìn)行精準(zhǔn)檢測(cè)和跟蹤，極大提高了檢測(cè)效率和產(chǎn)品質(zhì)量控制水平，傳統(tǒng)相機(jī)在這類(lèi)高速場(chǎng)景下往往難以勝任。

無(wú)人機(jī)和航空：

在無(wú)人機(jī)導(dǎo)航、避障和飛行器姿態(tài)控制中，融合相機(jī)因其高速響應(yīng)和強(qiáng)大光照適應(yīng)性，為飛行安全和穩(wěn)定性提供了關(guān)鍵支持。

智能監(jiān)控與物聯(lián)網(wǎng)：

融合相機(jī)可實(shí)現(xiàn)對(duì)室內(nèi)外環(huán)境的實(shí)時(shí)監(jiān)控，尤其適用于快速變化的場(chǎng)景與光線復(fù)雜的環(huán)境，有效識(shí)別異常情況，減少安全事故的發(fā)生。

事件融合相機(jī)配置參數(shù)