?事件相機(jī)的工作原理和應(yīng)用場(chǎng)景
電子發(fā)燒友網(wǎng)報(bào)道（文/李彎彎）事件相機(jī)最早誕生于1990年，那時(shí)候，許多研究人員探討動(dòng)物感知環(huán)境的方式，發(fā)現(xiàn)對(duì)變化更為敏感，所以設(shè)計(jì)出了實(shí)驗(yàn)室用的事件相機(jī)。2008年，誕生了第一款商用的事件相機(jī)。如今國(guó)內(nèi)外都有企業(yè)和機(jī)構(gòu)進(jìn)行事件相機(jī)的研究。
事件相機(jī)的工作原理和優(yōu)勢(shì)
傳統(tǒng)相機(jī)，無(wú)論是CMOS傳感器，還是CCD傳感器，亦或是RGBD相機(jī)，都有一個(gè)參數(shù)：幀率。它們是以恒定的頻率拍攝獲取圖像。這樣，即使幀率能夠達(dá)到1KHz，那也具有1ms的延時(shí)。所以傳統(tǒng)相機(jī)存在一定的延遲問(wèn)題。 此外，傳統(tǒng)相機(jī)需要通過(guò)一定時(shí)間的曝光，使感光器件積累一定的光子，那么在曝光時(shí)間之內(nèi)如果物體在高速運(yùn)動(dòng)，則會(huì)產(chǎn)生模糊，這也是傳統(tǒng)相機(jī)的一個(gè)問(wèn)題。 另外，傳統(tǒng)相機(jī)的攻臺(tái)范圍較低，具體表現(xiàn)為在光線極差或者亮度極高時(shí)，相機(jī)獲取的信息有限。這些問(wèn)題極大的限制了傳統(tǒng)相機(jī)在一些應(yīng)用場(chǎng)景中的應(yīng)用。 而事件相機(jī)則可以很好的解決這些問(wèn)題。事件相機(jī)，也稱神經(jīng)形態(tài)像機(jī)，或動(dòng)態(tài)視覺(jué)傳感器（DVS，Dynamic Vision Sensor)，是一種能夠響應(yīng)局部亮度變化的成像傳感器。 事件相機(jī)不像常規(guī)相機(jī)那樣使用快門捕獲圖像。相反，事件相機(jī)中的每個(gè)像素都獨(dú)立且異步地運(yùn)行，并在發(fā)生亮度變化時(shí)輸出這些變化，否則保持沉默。 下圖可以非常形象的展示出事件相機(jī)和傳統(tǒng)相機(jī)在工作原理上的不同。左側(cè)：假設(shè)拍攝的是一個(gè)圓盤轉(zhuǎn)動(dòng)（圓盤此時(shí)逆時(shí)針轉(zhuǎn)動(dòng)一段時(shí)間然后停止）。右側(cè)：上面是傳統(tǒng)相機(jī)，圓盤停止時(shí)，標(biāo)準(zhǔn)相機(jī)輸出不間斷，然而這些信息其實(shí)不是我們關(guān)注信息。下面是事件相機(jī)，其輸出信息為亮度動(dòng)態(tài)變化的位置，并且當(dāng)圖片無(wú)變化時(shí)即為 no events，無(wú)輸出。 此前有業(yè)內(nèi)人士對(duì)電子發(fā)燒友表示，基于這樣的工作原理，事件相機(jī)有幾個(gè)典型的特點(diǎn)：一是它的動(dòng)態(tài)范圍非常高，可以達(dá)到140dB；二是因?yàn)樗惠敵鲇行畔?，不輸出無(wú)效信息，它的數(shù)據(jù)量非常?。蝗撬乃俣确浅？?，可以達(dá)到1/10000s，甚至更高。 因?yàn)檫@些特點(diǎn)，事件相機(jī)可適用于傳統(tǒng)相機(jī)難以解決的一些場(chǎng)景中。比如城區(qū)場(chǎng)景中的鬼探頭，傳統(tǒng)相機(jī)在面對(duì)橫向的鬼探頭場(chǎng)景時(shí)，無(wú)法快速做出反應(yīng)，而事件相機(jī)可以更快感知到危險(xiǎn)信號(hào)；再比如高速場(chǎng)景下的避障，車輛在高速上快速行駛時(shí)，遇到前方路面有一個(gè)輪胎，傳統(tǒng)相機(jī)不能及時(shí)做出反應(yīng)，事件相機(jī)可以依靠低時(shí)延優(yōu)勢(shì)，快速識(shí)別并做出避障的動(dòng)作。事件相機(jī)的研究企業(yè)和應(yīng)用目前，不少公司都在致力于事件相機(jī)的發(fā)展，包括iniVation、prophesee（普諾飛思）、索尼（收購(gòu)Insightness）、芯侖光電（韋爾股份子公司）、銳思智芯（Alpsentek）等。 iniVation起源于瑞士，由基于事件視覺(jué)的發(fā)明者創(chuàng)立。該公司已經(jīng)推出多款產(chǎn)品，熱門型號(hào)包括：DAVIS346 Color / Mono、DVXplorer、DVXplorer Lite / Mini、Stereo Kit等。 iniVation的動(dòng)態(tài)視覺(jué)平臺(tái)可為諸多應(yīng)用和行業(yè)提供支持和解決方案，包括物聯(lián)網(wǎng)（超低功耗監(jiān)控和智慧城市）、自動(dòng)駕駛（車輛測(cè)距、SLAM和乘員監(jiān)控）、機(jī)器人技術(shù)（場(chǎng)景理解與定位）、工業(yè)視覺(jué)（過(guò)程監(jiān)控和基礎(chǔ)設(shè)施檢測(cè)）等。 Prophesee于2014年成立于法國(guó)巴黎，專注于神經(jīng)擬態(tài)視覺(jué)傳感技術(shù)，目前基于事件的視覺(jué)技術(shù)推出多款傳感器。其研發(fā)的普諾飛思原視覺(jué)（Metavision）傳感器可應(yīng)用于手機(jī)、自動(dòng)駕駛、工業(yè)自動(dòng)化、物聯(lián)網(wǎng)、AR/VR、醫(yī)療設(shè)備等領(lǐng)域。 比如在智能駕駛領(lǐng)域，Xperi旗下子公司DTS基于普諾飛思原視覺(jué)（Metavision）傳感技術(shù)提供的事件數(shù)據(jù)，開(kāi)發(fā)了基于神經(jīng)擬態(tài)視覺(jué)系統(tǒng)的駕駛員監(jiān)控解決方案（DMS），提供了更優(yōu)的微光性能，以及新的檢測(cè)功能，如眼跳或微表情檢測(cè)等。再比如，高級(jí)駕駛輔助軟件開(kāi)發(fā)商Terranet AB與梅賽德斯-奔馳共同開(kāi)發(fā)的VoxelFlow傳感器，采用了普諾飛思原視覺(jué)（Metavision）傳感器，可掃描車輛周圍半徑為40米的區(qū)域，反應(yīng)時(shí)間為3毫秒。 銳思智芯成立于2019年，擁有一支兼?zhèn)湫酒?a target="_blank">算法、軟件和硬件研發(fā)經(jīng)驗(yàn)與能力的團(tuán)隊(duì)，核心專家來(lái)自全球頂尖機(jī)構(gòu)。在高端視覺(jué)傳感器領(lǐng)域擁有超過(guò)16年的技術(shù)積累，在事件相機(jī)領(lǐng)域擁有超過(guò)8年的研究經(jīng)驗(yàn)。 2021年10月，銳思智芯（Alpsentek）發(fā)布了首款融合仿生事件視覺(jué)傳感器芯片——ALPIX-Pilatus（簡(jiǎn)稱 ALPIX-P）。專為機(jī)器感知設(shè)計(jì)的傳感器，可廣泛應(yīng)用于機(jī)器人、智能手機(jī)、無(wú)人駕駛、無(wú)人機(jī)、安防等場(chǎng)景。 ALPIX-P 采用銳思智芯自主研發(fā)的 Hybrid Vision融合式仿生事件視覺(jué)傳感技術(shù)，即將仿生事件視覺(jué)技術(shù)與傳統(tǒng)圖像傳感技術(shù)在像素級(jí)別進(jìn)行融合。芯片可以在傳統(tǒng)圖像傳感器模式和仿生事件相機(jī)模式之間快速切換，實(shí)現(xiàn)事件相機(jī)與 CIS 相機(jī)功能 “二合一”。 在圖像模式下，ALPIX-P 是一款最高幀率為 120 幀的全局曝光傳感器，其圖像質(zhì)量與現(xiàn)有的商化的 CIS 輸出的圖像質(zhì)量一致，兼容現(xiàn)有成熟的視覺(jué)系統(tǒng)。在仿生事件相機(jī)模式下，ALPIX-P 具有超高幀率，高有效信息占比，大動(dòng)態(tài)范圍的特點(diǎn)。
小結(jié) 事件相機(jī)的核心是神經(jīng)擬態(tài)，神經(jīng)擬態(tài)技術(shù)最早源于瑞士蘇黎世聯(lián)邦理工學(xué)院（ETH Zurich）。目前研究的企業(yè)主要有兩個(gè)方向，一是傳感器，即事件相機(jī)，就是文章提到的幾家公司；另一個(gè)是神經(jīng)擬態(tài)計(jì)算，主要是SoC芯片，如九天睿芯、時(shí)識(shí)科技。目前從兩個(gè)方向來(lái)看，神經(jīng)擬態(tài)在產(chǎn)品和應(yīng)用上都有不錯(cuò)的進(jìn)展。
?
- 車載大屏產(chǎn)業(yè)鏈分析，主要玩家都有誰(shuí)？
- 谷歌3D全息電話亭，顛覆現(xiàn)有視頻通話！宛如真人面對(duì)面
- 富士康Model B/V正式發(fā)布，ALL IN電動(dòng)車代工，全產(chǎn)業(yè)鏈布局格局顯現(xiàn)
- 半導(dǎo)體TOP 10廠商股價(jià)集體腰斬，臺(tái)積電再傳危機(jī)信號(hào)
- 2026年交付！索尼造車終于塵埃落定，本田成代工廠
原文標(biāo)題：?事件相機(jī)的工作原理和應(yīng)用場(chǎng)景
文章出處：【微信公眾號(hào)：電子發(fā)燒友網(wǎng)】歡迎添加關(guān)注！文章轉(zhuǎn)載請(qǐng)注明出處。
聲明：本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人，不代表電子發(fā)燒友網(wǎng)立場(chǎng)。文章及其配圖僅供工程師學(xué)習(xí)之用，如有內(nèi)容侵權(quán)或者其他違規(guī)問(wèn)題，請(qǐng)聯(lián)系本站處理。
舉報(bào)投訴
-
相機(jī)
+關(guān)注
關(guān)注
5文章
1601瀏覽量
56005
原文標(biāo)題：?事件相機(jī)的工作原理和應(yīng)用場(chǎng)景
文章出處：【微信號(hào)：elecfans，微信公眾號(hào)：電子發(fā)燒友網(wǎng)】歡迎添加關(guān)注！文章轉(zhuǎn)載請(qǐng)注明出處。
發(fā)布評(píng)論請(qǐng)先 登錄
相關(guān)推薦
熱點(diǎn)推薦
Neway電機(jī)方案在電機(jī)控制的應(yīng)用場(chǎng)景
Neway電機(jī)方案在電機(jī)控制的應(yīng)用場(chǎng)景Neway電機(jī)方案在電機(jī)控制領(lǐng)域的應(yīng)用場(chǎng)景廣泛且效果顯著，其核心優(yōu)勢(shì)在步進(jìn)電機(jī)、伺服電機(jī)控制及CNC機(jī)床主軸驅(qū)動(dòng)等場(chǎng)景中得到了充分驗(yàn)證。一、步進(jìn)電機(jī)與伺服電機(jī)
發(fā)表于 01-04 10:10
請(qǐng)問(wèn)C語(yǔ)言中整形溢出對(duì)哪些應(yīng)用場(chǎng)景影響較大？
C語(yǔ)言中整形溢出對(duì)哪些應(yīng)用場(chǎng)景影響較大
發(fā)表于 12-24 08:24
請(qǐng)問(wèn)MOSFET在電源管理中有哪些應(yīng)用場(chǎng)景？
MOSFET在電源管理中有哪些應(yīng)用場(chǎng)景？
發(fā)表于 12-23 07:07
DC-DC與AC-DC電源芯片區(qū)別解析：核心差異、應(yīng)用場(chǎng)景與選型指南
深入剖析DC-DC和AC-DC電源管理芯片的本質(zhì)區(qū)別，包括工作原理、技術(shù)架構(gòu)、應(yīng)用場(chǎng)景及設(shè)計(jì)難點(diǎn)，幫助工程師精準(zhǔn)選型，提升電源系統(tǒng)效率與可靠性。
Switch的應(yīng)用場(chǎng)景
Switch的應(yīng)用場(chǎng)景如下：
調(diào)用一到多個(gè)函數(shù)
設(shè)置變量值或者返回一個(gè)值
執(zhí)行一到多個(gè)代碼片段
如果case標(biāo)簽很多，在switch的前兩個(gè)使用場(chǎng)景中，使用查找表可以更高效的完成。例如下面的兩種
發(fā)表于 12-12 07:28
藍(lán)牙網(wǎng)關(guān)是什么？都有哪些功能？應(yīng)用場(chǎng)景有哪些？
點(diǎn)，更構(gòu)建起“設(shè)備互聯(lián)-數(shù)據(jù)流轉(zhuǎn)-智能管控”的完整鏈路，成為物聯(lián)網(wǎng)生態(tài)中不可或缺的核心組件。本文將系統(tǒng)解析藍(lán)牙網(wǎng)關(guān)的核心價(jià)值、技術(shù)架構(gòu)、應(yīng)用場(chǎng)景、現(xiàn)存挑戰(zhàn)及未來(lái)趨勢(shì)，為讀者呈現(xiàn)這一關(guān)鍵技術(shù)的全貌
發(fā)表于 12-11 15:21
請(qǐng)問(wèn)CW32L011有哪些應(yīng)用場(chǎng)景？
請(qǐng)問(wèn)CW32L011有哪些應(yīng)用場(chǎng)景？
發(fā)表于 11-17 06:25
CW32L0系列都有哪些應(yīng)用場(chǎng)景？有哪些優(yōu)勢(shì)？
目前芯源的低功耗MCU比較火爆，就是CW32L0系列都有哪些應(yīng)用場(chǎng)景？有哪些優(yōu)勢(shì)？
發(fā)表于 11-14 06:03
Leadway微波產(chǎn)品有哪些應(yīng)用場(chǎng)景?
。Leadway微波產(chǎn)品的應(yīng)用場(chǎng)景如下：5G/6G通信測(cè)試毫米波基站與終端設(shè)備測(cè)試：Leadway的測(cè)試級(jí)柔性/鎧裝毫米波線纜（DC-110GHz）支持高頻段信號(hào)傳輸與校準(zhǔn)，確保通信質(zhì)量。其低插損特性
發(fā)表于 09-26 09:14
廣州唯創(chuàng)電子錄音語(yǔ)音芯片IC：工作原理與應(yīng)用場(chǎng)景全解析
錄放音芯片解決方案，廣泛應(yīng)用于智能家居、醫(yī)療設(shè)備、工業(yè)控制等領(lǐng)域。本文將深入解析其工作原理和典型應(yīng)用場(chǎng)景。01錄音芯片的核心作用與技術(shù)價(jià)值錄音芯片是一種可實(shí)現(xiàn)重復(fù)
光耦的工作原理、應(yīng)用場(chǎng)景、分類
一、工作原理 光耦是一種采用光學(xué)原理進(jìn)行信號(hào)傳輸和轉(zhuǎn)換的電子元件，其工作原理基于光電效應(yīng)。光耦主要由發(fā)光器件（如發(fā)光二極管LED）和受光器件（如光敏晶體管、光敏電阻等）兩部分組成，兩部分通過(guò)
三相穩(wěn)壓器的工作原理、工作流程及應(yīng)用場(chǎng)景
三相穩(wěn)壓器作為一種穩(wěn)定電壓的關(guān)鍵設(shè)備，在工業(yè)、商業(yè)以及家庭場(chǎng)景中都有著極為廣泛的應(yīng)用。它能夠精準(zhǔn)調(diào)節(jié)電網(wǎng)電壓的波動(dòng)，讓設(shè)備始終在穩(wěn)定的電壓環(huán)境中運(yùn)行，有效避免因電壓起伏而對(duì)設(shè)備造成損害。接下來(lái)，本文將深入剖析三相穩(wěn)壓器的工作原理，并著重探討其在現(xiàn)實(shí)應(yīng)用中的重要意義。
UWB應(yīng)用場(chǎng)景
鴻合智遠(yuǎn)｜捷揚(yáng)微-產(chǎn)品簡(jiǎn)介介紹：UWB應(yīng)用場(chǎng)景
評(píng)論