事件相机的工作原理和应用场景

时间: 2024-02-03 23:20:20 |   作者: 五星体育app官网下载

  事件相机最早诞生于1990年,那时候,许多研究人员探讨动物感知环境的方式,发现对变化更为敏感,所以设计出了实验室用的事件相机。2008年,诞生了第一款商用的事件相机。如今国内外都有企业和机构进行事件相机的研究。传统相机,无论是CMOS传感器,还是CCD传感器,亦或是RGBD相机,都有一个参数:帧率。它们是以恒定的频率拍摄获取图像。这样,即使帧率能达到1KHz,那也具有1ms的延时。所以传统相机存在一定的延迟问题。此外,传统相机需要通过一段时间的曝光,使感光器件积累一定的光子,那么在曝光时间之内如果物体在高速运动,则会产生模糊,这也是传统相机的一个问题。另外,传统相机的范围较低,具体表现为在光线极差或者亮度极高时,相机获取的信息有限。这样一些问题极大的限制了传统相机在一些应用场景中的应用。而事件相机则能很好的解决这样一些问题。事件相机,也称神经形态像机,或动态视觉传感器(DVS,Dynamic Vision Sensor),是一种能够响应局部亮度变化的成像传感器。事件相机不像常规相机那样使用快门捕获图像。相反,事件相机中的每个像素都独立且异步地运行,并在发生亮度变化时输出这些变化,否则保持沉默。下图可以非常形象的展示出事件相机和传统相机在工作原理上的不同。左侧:假设拍摄的是一个圆盘转动(圆盘此时逆时针转动一段时间然后停止)。右侧:上面是传统相机,圆盘停止时,标准相机输出不间断,然而这一些信息其实不是我们关注信息。下面是事件相机,其输出信息为亮度动态变化的位置,并且当图片无变化时即为no events,无输出。此前有业内人士对电子发烧友表示,基于这样的工作原理,事件相机有几个典型的特点:一是它的动态范围非常高,能够达到140dB;二是因为它只输出有效信息,不输出无效信息,它的数据量非常小;三是它的速度很快,能够达到1/10000s,甚至更高。因为这些特点,事件相机可适用于传统相机难以解决的一些场景中。比如城区场景中的鬼探头,传统相机在面对横向的鬼探头场景时,无法快速做出一定的反应,而事件相机可以更快感知到危险信号;再比如高速场景下的避障,车辆在高速上快速行驶时,遇到前方路面有一个轮胎,传统相机不能及时做出一定的反应,事件相机可以依靠低时延优势,快速识别并做出避障的动作。目前,不少公司都在致力于事件相机的发展,包括iniVation、prophesee(普诺飞思)、索尼(收购Insightness)、芯仑光电(韦尔股份子公司)、锐思智芯(Alpsentek)等。iniVation起源于瑞士,由基于事件视觉的发明者创立。该公司已推出多款产品,热门型号包括:DAVIS346 Color/Mono、DVXplorer、DVXplorer Lite/Mini、Stereo Kit等。iniVation的动态视觉平台可为诸多应用和行业提供支持和解决方案,包括物联网(超低功耗监控和智慧城市)、无人驾驶(车辆测距、SLAM和乘员监控)、机器人技术(场景理解与定位)、工业视觉(过程监控和基础设施检测)等。Prophesee于2014年成立于法国巴黎,专注于神经拟态视觉传感技术,目前基于事件的视觉技术推出多款传感器。其研发的普诺飞思原视觉(Metavision)传感器可应用于手机、无人驾驶、工业自动化、物联网、AR/VR、医疗设施等领域。比如在智能驾驶领域,Xperi旗下子公司DTS基于普诺飞思原视觉(Metavision)传感技术提供的事件数据,开发了基于神经拟态视觉系统的驾驶员监控解决方案(DMS),提供了更优的微光性能,以及新的检测功能,如眼跳或微表情检测等。再比如,高级驾驶辅助软件开发商Terranet AB与梅赛德斯-奔驰共同开发的VoxelFlow传感器,采用了普诺飞思原视觉(Metavision)传感器,可扫描车辆四周半径为40米的区域,反应时间为3毫秒。锐思智芯成立于2019年,拥有一支兼备芯片、算法、软件和硬件研发经验与能力的团队,核心专家来自全球顶尖机构。在高端视觉传感器领域拥有超过16年的技术积累,在事件相机领域拥有超过8年的研究经验。2021年10月,锐思智芯(Alpsentek)发布了首款融合仿生事件视觉传感器芯片——ALPIX-Pilatus(简称 ALPIX-P)。专为机器感知设计的传感器,可大范围的应用于机器人、智能手机、无人驾驶、无人机、安防等场景。ALPIX-P 采用锐思智芯自主研发的 Hybrid Vision融合式仿生事件视觉传感技术,即将仿生事件视觉技术与传统图像传感技术在像素级别进行融合。芯片可以在传统图像传感器模式和仿生事件相机模式之间快速切换,实现事件相机与 CIS 相机功能 “二合一”。在图像模式下,ALPIX-P 是一款最高帧率为 120 帧的全局曝光传感器,其图像质量与现有的商化的 CIS 输出的图像质量一致,兼容现有成熟的视觉系统。在仿生事件相机模式下,ALPIX-P 具有超高帧率,高有效信息占比,大动态范围的特点。事件相机的核心是神经拟态,神经拟态技术最早源于瑞士苏黎世联邦理工学院(ETH Zurich)。目前研究的企业主要有两个方向,一是传感器,即事件相机,就是文章提到的几家公司;另一个是神经拟态计算,主要是SoC芯片,如九天睿芯、时识科技。目前从两个方向来看,神经拟态在产品和应用上都有不错的进展。

  三星新一代的旗舰机Galaxy S7和S7 Edge还有十天就要在MWC 2016之前的一天正式对外发布了,最近有关这两款机型的传闻在网络上也是铺天盖地。尽管在目前三星S系列的强势下,Note系列已经不如以前那么抢眼了,不过有关三星Note系列新一代的机型Note 6近日还是慢慢的开始曝光了。 三星Note系列最大的特点是该系列手机都配备的S Pen手写笔,在之前的Note 5身上,三星为其增添了按压弹出的功能,使其更为人性化与便捷,而根据目前的消息,Note 6上的S Pen将在这个道路上再进一步,具备更多的人性化功能。   根据最新曝光的三星专利,未来的三星S Pen将具备弯折功能,而借助该功能从机

  电子网消息,(文/罗明)随着联发科将重心转移到中端处理器市场,高通的骁龙6系列处理器将迎来挑战,作为联发科今年力推的处理器,P70的性能备受手机生产厂商与消费者的关注,近日关于它的跑分情况被曝光了。 今天知名数码博主i冰宇宙放出了一张联发科P70的安兔兔跑分图,我们来分析一下: 总分高达15万分,这与高通的骁龙820处理器的16万分差距缩短了不小,强于骁龙625的7万分。 在CPU跑分方面,7万分的成绩完胜5万分的骁龙820,骁龙821预计为6万分。 在UX与MEM方面,联发科P70的表现也不俗,分别以4万分与1万分的成绩压制了骁龙820。 从左至右依次为骁龙820、联发科P40、骁龙625跑分情况 在GPU跑分方面,

  最近一款代号为X00GD的华硕新机通过了WiFi行业联盟的认证,这款手机其实早在去年12月就已经通过了中国工信部的认证,但后来很长一段时间没有了下文。 华硕神秘新机曝光:八核芯片超大电池(图片来自gsmarena) WiFi联盟上面显示,这款手机出厂预装Android 7.0系统,WiFi联盟的习惯就是如此,你无法从中一窥更多的参数配置,不过还好有工信部… 其它的参数只好援引工信部了:这款手机内置1.5GHz主频八核处理器、5.2英寸720p屏幕、前置800万像素+后置1300万像素镜头。2GB/3GB/4GB RAM+16GB/32GB/64GB ROM,电池容量4850毫安时。不过目前还无法确认这款手机的具体上市时

  三星推出的曲面屏手机,在这个设计同质化的手机行业就像一股清流,大家纷纷为它的魅力所倾倒,一时间火爆不已。于是乎,其他的手机生产厂商就坐不住了,求爷爷告奶奶纷纷推出自家的曲面屏手机,今天索尼首款曲面屏手机曝光了渲染图,我们共同来领略下吧。 索尼曲面屏手机 这款手机采用了全金属机身的设计,正面双曲面屏圆润大气、科技感十足。屏占比非常高,应该会超过90%,机身正面没有一点多余的设计,而标志性的SONY标志则被放在了机身顶部。背部大大的“ZEUS”宙斯字母很是抢眼,难道这款手机的名字就是它?背部还拥有双摄像头,只是不知道手机下方那个黑色的模组是啥作业。 大家认为这次颜值有没有重回巅峰呢?

  集微网消息(文/ANSON),近日国外知名爆料人士Steve Hemmerstoffer携手PriceBaba在网上放出了一段OnePlus 7的独家360度渲染视频。 从渲染视频中能够正常的看到机身边框已经被收窄到极限,并且摄像头将采用弹出式设计的具体方案,类似vivo NEX那样。参数方面,可能会采用1600万像素摄像头,支持f/2.0 光圈。 另外,一加7的机身背面会采用后置三摄方案。它应该会采用背部居中的竖直排布、48MP主摄+ 5MP副摄+至少一颗LED闪光灯(像素尺寸0.8/1.12μm、光圈f/1.79和f/2.4)。另外,拍照方面一加7的功能包括AI场景检测、人像模式、专业模式、夜景模式、全景、延时

  一加7高清渲染视频 /

  4月11日消息,关于iPhone 7的传闻不少,引起业内广泛关注的一条则是“ 英特尔 或也将成为苹果iPhone 7基带芯片供应商”,而这不免让包揽苹果iPhone 6s基带芯片的Qualcomm(美国高通)黯然神伤,当时也让国内偏爱Qualcomm的用户担心起来。近日,上述传闻再起,但国内用户却已不必为此担心。 国外有分析师Steve Mullane称,自本月起,台湾半导体制造公司TSMC(台积电)代工的Intel XMM 7360 LTE基带芯片产能将提升一倍,而这一时间点恰与iPhone 7的A10处理器增产时间一致。该分析师大胆预测,iPhone 7部分基带芯片由英特尔提供,占比约30%。 同时,由

  根据近期的消息,微软正在总部研发一款神秘的设备,而这款设备很可能就是此前一直传闻的Surface Phone,尽管微软对外并没有证实这款手机的存在,但是现在外媒MSPU发现的一份新专利披露了Surface Phone的更多细节。 微软“无线通信设施”专利曝光 据MSPU报道,MSPU日前发现了微软一项名为“无线通信设施”的新专利,该专利描述了一种支持LTE的折叠式手机,专利显示了该设备是采用了分离无线组件的特殊外形,因此能从更强的信号中受益。如图所示,能够正常的看到这款设备是采用了折叠式设计,隔离无线元件后能够大大减少信号干扰风险。 不过值得一提的是,这一些细节只是为申请专利而用,目前尚不清楚这种设计是否会最终能够适用于大规模生产类

  继台湾之后,今天香港媒体也带来消息称,三星已经选定的Galaxy S III首批发售的国家和地区中也包含香港,而该机开卖时间则定在了本月29日。 报道中还提到了,目前已经有香港商家开启了它的预定,而至于大家关心的价格问题,目前 GALAXY S III ( 参数 图片 论坛 软件 )港版的预定价格为5688港币(16GB版本),约合人民币4630元,相比之前的台湾版略便宜。 除了售价外,用户最关心的还是港版Galaxy S III的处理器是否还是Exynos 4412四核,遗憾的是,目前官方还没有公布其具体配置。 此前曾有消息称,港版将会与日版、美版保持一致,即为越来越好的支持4G网络,三星打算为其搭载

  21天学通HTML+CSS+JavaScript Web开发-第7版(带目录)

  中的图像传感器和信号处理

  有奖直播 同质化严重,缺乏创新,ST60毫米波非接触连接器,赋予你独特的产品设计,重拾市场话语权

  电源小课堂 从12V电池及供电网络优化的角度分析电动汽车E/E架构的趋势

  MPS电机研究院 让电机更听话的秘密! 第一站:电机应用知识大考!跟帖赢好礼~

  智能家居是在物联网的影响之下物联化体现。智能家居通过物联网技术将家中的各种设备(如音视频设备、照明系统、窗帘控制、空调控制、安防系 ...

  语音识别技术是让机器通过识别把语音信号转变为文本,进而通过理解转变为指令的技术。目的是给机器赋予人的听觉特性,听懂人说什么,并作 ...

  在音视频直播系统中,云服务器降低了硬件接入的门槛,在搭建云服务器过程中有很多问题提前了解能够尽可能的防止踩雷,音视频服务提供商及开发团队都 ...

  智能家居的概念起源很早,在中国也慢慢变得受到大家的欢迎。有很多的家庭都已经安装智能家居了,那么智能家居真的那么好吗?今天小编带大家来 ...

  从红外线被发现以来,红外线技术不断推陈出新,被大范围的应用于我们的生活中。物联网随着网络技术的进步而不断被人们提到,智能家居是在互联 ...

  嵌入式操作系统开发相关FPGA/DSP总线与接口数据处理消费电子工业电子汽车电子其他技术存储技术综合资讯论坛电子百科词云:

返回产品列表