红外和强光可见图像融合使用环境光感知网络
Aiyun Yan1, Shang Gao1, Zhenlin Lu2
1College of Information Science and Engineering, Northeastern University, Shenyang 110167, China.
Entropy (Basel, Switzerland)
|August 29, 2024
概括
这项研究引入了一个新的图像融合网络,用于夜间驾驶. 它改善了红外和可见图像的融合,在恶劣的照明条件下增强了细节和稳定性,以更好地感知车辆.
科学领域:
- 计算机视觉 计算机视觉
- 图像处理 图像处理
- 人工智能的人工智能
背景情况:
- 标准的图像融合算法在恶劣的夜间照明下扎,产生低质量的融合图像.
- 在这些条件下的可见光图像具有低信息和高像素强度,从而产生矛盾.
- 这限制了融合在高水平视觉任务 (如智能驾驶) 的有效性.
研究的目的:
- 开发一个强大的图像融合网络,能够抵御强烈的光干扰.
- 增强信息和保留关键细节的融合红外和可见图像.
- 为了提高夜间智能驾驶应用的性能.
主要方法:
- 设计了一个边缘特征提取模块,以优化融合信息.
- 提出了一个严厉的光环境意识 (HLEA) 模块,以解决图像质量下降的问题.
- 开发了一个边缘引导的层次融合 (EGHF) 模块,用于强大的特征融合.
主要成果:
- 拟议的方法在恶劣的照明下显著提高了融合图像中的信息.
- 与现有的先进算法相比,融合结果包含了更多有用的信息.
- 在具有挑战性的夜间条件下,在高水平视觉任务中表现出卓越的表现.
结论:
- 这种新的图像融合网络有效地克服了在恶劣的夜间环境中现有方法的局限性.
- 该方法为夜间汽车智能驾驶系统提供了大量帮助.
- 和信息理论原则的整合提高了核聚变的稳定性和信息保留.
更多相关视频
相关概念视频
Total Internal Reflection Fluorescence Microscopy
5.7K
Total internal reflection fluorescence microscopy or TIRF is an advanced microscopic technique used to visualize fluorophores in samples close to a solid surface with a higher refractive index, such as a glass coverslip. TIRF only allows fluorophores in proximity to the solid surface to be excited. When light from a medium with a lower refractive index (such as air) hits the glass coverslip at a critical angle, the light undergoes total internal reflection stead of passing through the glass.
5.7K
Super-resolution Fluorescence Microscopy
6.9K
Super-resolution fluorescence microscopy (SRFM) provides a better resolution than conventional fluorescence microscopy by reducing the point spread function (PSF). PSF is the light intensity distribution from a point that causes it to appear blurred. Due to PSF, each fluorescing point appears bigger than its actual size, and it is the PSF interference of nearby fluorophores that causes the blurred image. Various approaches to achieving higher resolution through SRFM have recently been...
6.9K


