基于事件的视觉传感器发展现状与趋势

2022-04-28
关注

传统相机使用一种基于帧的视觉传感器,它通过预置一定的曝光时间,来逐帧获取场景信息,这种基于帧的视觉传感器有着诸多不足。而基于事件的视觉传感器是一种新型的仿生型视觉传感器,它更类似于人眼的工作机制使其广受关注。

与基于帧的传统相机的工作机制和输出方式不同,基于事件的视觉传感器的像素可以单独检测光照强度对数的变化,并在变化量超过一定阈值时输出包含位置、时间、极性的事件信息,拥有低延迟、高动态范围、低功耗的优点,其独特的输出方式和工作特性使其特别适应于有高速运动、光照条件变化较大、较小能耗的场合。

据麦姆斯咨询报道,中国科学院长春光学精密机械与物理研究所徐伟研究员课题组在《液晶与显示》期刊上发表了以“事件视觉传感器发展现状与趋势”为主题的综述文章。徐伟研究员主要从事新型高分辨率空间有效载荷总体设计等方面的研究工作。

这项研究介绍了事件相机的发展历程、分类和工作原理、优缺点,以及事件相机在快速运动的跟踪与监测、目标识别、即时定位与地图构建(SLAM)等领域近些年的应用情况。最后总结了事件相机在不同应用领域仍存在的挑战,并展望其未来的发展。事件相机的广泛应用将为目前传统相机仍很棘手的高速运动和高动态范围场合提供新的解决方案,在未来的不断更新和发展下,它将能够在更多复杂的应用场景发挥作用。

立体事件PTV框架的架构概述


目前被广泛应用的事件相机可大致分成3类:动态视觉传感器(DVS)、基于异步时间的图像传感器(ATIS)、动态主动像素视觉传感器(DAVIS)。DVS是最基本的也是最先发展的一种事件相机。ATIS像素结构分成两个部分(A和B),包含两个感光器,能够在提供事件信息的同时还能提供一定灰度信息的需求。DAVIS相机将DVS相机和传统的有源像素传感器(APS)相机结合起来,能够同时输出场景事件和灰度信息。


DVS像素电路结构


ATIS像素电路结构


DAVIS像素电路结构


传统相机存在的缺陷限制了一些特殊场合的应用,事件相机的独特性能可以为这些难题提供新的解决方案。针对事件相机的特点,可以应用于一些与之契合的视觉应用领域,比如快速运动的跟踪与监测、小数据量的目标识别、即时定位与地图构建(SLAM),均已有了较大的突破。

事件相机有着非常突出的优点:低延迟、高时间分辨力、高动态范围、低功耗。然而在不同的应用领域,又有不同的缺陷阻碍着它的发展。在诸多应用中,事件相机低带宽通信、低重量、低功率和高速的特点,使其充分满足航空航天领域对传感器的苛刻要求。如果将事件相机应用在导弹、航天飞机、超快速战斗机、海上军舰等军事目标的追踪上,由于这些目标有着显著的外观特征,而且它们的运动速度一般很快,或许可以获得比传统遥感相机更好的效果。另外,将事件相机应用于天基空间态势感知,也为监测卫星和星体提供了新的解决方案。未来,在航空航天和军事领域上,事件相机也将会有更加迅猛的发展。

该项目获得钱学森空间技术实验室创新工作站开放基金(NO.GZZKFJJ20220003)的支持。该研究第一作者为中国科学院长春光学精密机械与物理研究所硕士研究生方应红,主要从事智能成像方向的研究。

延伸阅读:
《新兴图像传感器技术、应用及市场-2021版》



您觉得本篇内容如何
评分

相关产品

Hypernano 海谱纳米 短波红外高光谱工业相机 视觉传感器

海谱短波红外高光谱工业相机主要由MEMS-FPI可调滤波器和短波红外相机组成,可探测波段范围为950nm-1650nm。该款相机体积小巧,使用简捷,获取的波段数值连续可调,且可根据需求裁剪波段数量以增加高光谱数据的采集帧率,可应用于环境监测、水质检测、工业产品分选、食品品质检测、医学制药检测等多个领域。

Percipio.XYZ 图漾科技 TM461-E2 3D ToF工业相机 视觉传感器

TM461-E2 是一款采用飞行时间法(ToF 技术)测距的深度相机,机身小巧轻盈,能快速生成被测场景的 3D 图像,帧率可灵活配置,PoE供电,支持第三方嵌入式开发,可应用于工业测量、工业安全、安防监控

OMRON SENTECH 欧姆龙先特克 STC-MBE132U3V 视觉传感器

这款STC-MBE132U3V USB 3.0彩色相机拥有一个1\/1.8\" e2v CMOS传感器,1.3万像素分辨率,60帧每秒,以及一个28 (W) x 28 (H) x 33.8 (D)毫米的超小型化相机利用强大的USB3视觉标准,这款相机是机器视觉准备!

Pixelink PL-B762F-BL 视觉传感器

该PL-B762是一款高性能宽VGA彩色相机,设计用于广泛的工业成像应用。该相机基于Micron MV022 CMOS全球渐进扫描传感器,1\/3光学格式,60fps输出。工厂校正的数字像素校正和车载平场校正(FFC)提供的图像质量类似于高端CCD相机。这款相机非常适合需要优秀图像质量的机器视觉应用,如:"," PL-B762具有丰富的功能和能力,所有功能和能力都可以通过软件控制。一个全局快门和外部触发器允许同步要求机器视觉应用。CMOS传感器结构提供了优异的抗晕屏能力。

ON Semiconductor 安森美 KLI-2113-RAA-ED-AA 图像传感器

安森美半导体线性电荷耦合器件 (CCD) 图像传感器具有高分辨率和高动态范围。这些线性CCD图像传感器具有高数据速率和每色单输出特性,包括多读取寄存器架构。该款线性CCD图像传感器设有钉扎光电二极管,可实现低滞后和低暗电流。这些CCD图像传感器非常适合用于平板扫描仪、高速文档扫描仪和复印机、机器视觉相机及卫星成像等应用。

Teledyne DALSA 特利丹 BVS-XX 摄像机

它将工业机器视觉系统的所有元素都包含在一个小巧的智能相机式组件中。,Teledyne DALSA的BOA利用了Teledyne DALSA的设计、工程和制造专业知识(包括传感器、摄像机和,图像处理和视觉软件开发,提供下一代智能相机技术。BOA提供可扩展的视觉解决方案,以满足从定位机器人操作手到完成装配验证的广泛应用需求。BOA是一款真正卓越的一体式智能视觉系统,专为恶劣的工厂地面部署而设计和加固。

海伯森技术 HPS-HS系列 CMOS图像传感器

HPS-HS系列是一款高端高分辨率的黑白CMOS工业相机,包括线阵工业相机和面阵工业相机两种类型。产品采用业界顶级超高速图像传感器,具有大像元尺寸、低噪音、超高帧率、远距离传输等特点;万兆以太网光纤接口,满足工业视觉应用中对数据传输实时性和同步性的严苛要求;高集成化的设计,确保产品运行稳定,坚固耐用并保持优异的散热性能海伯森超高速工业相机适用于机器视觉,高速工业检测,高速运动分析等领域,为工业智能制造和科学项目研究提供极大助力。

Omron 欧姆龙 B5T-007001-010 生物传感器

Omron B5T HVC-P2 多功能传感器模块可提供的最大识别速度比前几代居家保全模块 (HVC) 系统传感器快 10 多倍。HVC-P2 传感器将用于识别人的面部表情、性别、年龄、凝视、眨眼动作的 OKAO® 视觉技术集成到相机模块中。HVC-P2 传感器每秒可对人体检测四次,持续不断地对检测区的人进行追踪而不会出现偏差。 Omron B5T HVC-P2 提供长距离和广角检测型号摄像头。

Allied Vision Technologies (AVT) Prosilica GC1380CH 视觉传感器

高灵敏度140万像素CCD相机-每秒30帧GC1380H,以及它的彩色对应物GC1380H,是非常流行的GC1380的高速版本。GC1380h是目前市场上性能最高的基于GigE视觉的摄像头。它采用了无与伦比的Sony ICX285 CCD传感器,该传感器采用ExView技术,提供高灵敏度、出色的防晕和卓越的图像质量。

评论

您需要登录才可以回复|注册

提交评论

MEMS

这家伙很懒,什么描述也没留下

关注

点击进入下一篇

低能量水平下的电压转换

提取码
复制提取码
点击跳转至百度网盘