EvLight++:用事件摄像头进行低光视频增强:一个大规模的真实世界数据集,新的方法,以及更多

科学领域:

• 计算机视觉 计算机视觉
• 机器人技术 机器人技术 机器人技术
• 图像处理 图像处理

背景情况:

• 事件摄像机提供高动态范围,有利于低光视频增强.
• 现有研究受到缺乏大规模,现实世界,时空一致的事件视频数据集的阻碍.

研究的目的:

• 介绍一种新的,大规模的数据集,用于基于事件的低光视频增强.
• 提出EvLight++,一种以事件为导向的方法,用于强大的低光视频增强.
• 评估 EvLight++ 对增强和下游任务的性能.

主要方法:

• 策划了超过30,000个事件对的数据集,使用机器人手臂进行精确的空间和时间对齐.
• 开发了EvLight++,具有多尺度整体融合分支和SNR引导的区域特征选择.
• 集成了一个循环模块和时间损失,以增强时间连贯性.

主要成果:

• EvLight++显著优于现有方法的1.37dB (单一图像) 和3.71dB (基于视频).
• 下游任务的改进结果显示,语义细分的mIoU有15.97%的改进.
• 该数据集有助于在具有挑战性的照明条件下对基于事件的视觉进行研究.

结论:

• 新的数据集和EvLight++方法推进了使用事件摄像头的低光视频增强.
• EvLight++展示了卓越的性能和现实应用的潜力.
• 进一步的数据集扩展支持相关计算机视觉任务的探索.