一个改进的TransMVSNet算法用于无人机遥感领域的三维重建
Jiawei Teng1, Haijiang Sun1, Peixun Liu1
1Changchun Institute of Optics, Fine Mechanics and Physics (CIOMP), Chinese Academy of Sciences, Changchun 130033, China.
Sensors (Basel, Switzerland)
|April 13, 2024
概括
这项研究增强了TransMVSNet算法用于无人机遥感图像的3D重建. 改进的方法通过优化特征提取和深度预测网络来提高准确性和稳定性.
科学领域:
- 计算机视觉 计算机视觉
- 这是一种摄影计量技术 (photogrammetry).
- 遥感 遥感 遥感 遥感
背景情况:
- 无人机遥感图像的精确3D重建对于各种应用至关重要.
- 无人机图像中的挑战,例如缺乏纹理和详细的边缘,阻碍了传统的多视图立体 (MVS) 方法中的特征点匹配和深度估计.
- 现有的深度学习MVS算法经常与无人机数据的特定特征作斗争.
研究的目的:
- 提高TransMVSNet算法的性能和准确性,用于3D重建无人机遥感图像.
- 为了解决MVS中特征提取和深度预测在低纹理无人机图像中的局限性.
- 为了提高无人机数据的3D重建的稳定性和可靠性.
主要方法:
- 优化了TransMVSNet算法,通过集成非对称金字塔网络 (AFPN) 来进行增强的特征提取.
- 实现了非对称空间特征融合 (ASFF) 模块,以赋予不同特征级别的自适应权重,强调关键信息.
- 利用一个UNet结构化的网络与注意力机制准确的深度地图预测,专注于关键的图像区域.
主要成果:
- 改进的TransMVSNet在与其他算法进行的比较实验中表现出卓越的性能和稳定性.
- 对DTU数据集和大型无人机遥感图像数据集的定量评估验证了算法的有效性.
- 优化的特征提取和深度预测网络显著提高了无人机图像3D重建的准确性.
结论:
- 增强的TransMVSNet算法在无人机遥感图像的3D重建方面取得了重大进展.
- 拟议的方法有效地克服了低纹理和边缘差的无人机数据所带来的挑战.
- 这项研究为未来的研究和基于无人机的3D绘图和建模的实际应用提供了宝贵的参考.


