一种视觉问答方法,以增强机器人在室内环境中的定位
Juan Diego Peña-Narvaez1, Francisco Martín2, José Miguel Guerrero2
1Intelligent Robotics Lab, Signal Theory, Communications, Telematics Systems, and Computation Department, International Doctoral School, Rey Juan Carlos University, Fuenlabrada, Spain.
Frontiers in neurorobotics
|December 13, 2023
概括
本研究介绍了一种使用视觉问题答案 (VQA) 的新机器人本地化方法,用于在复杂环境中提高准确性. 该方法通过将语义理解与映射集成来改善机器人导航,从而实现更可靠的定位.
科学领域:
- 机器人技术 机器人技术 机器人技术
- 人工智能的人工智能
- 计算机视觉 计算机视觉
背景情况:
- 在家庭和办公室等动态和复杂环境中的机器人本地化带来了重大挑战.
- 传统的绘图方法通常在复杂的空间中难以准确和可靠.
研究的目的:
- 在动态和复杂的环境中提高机器人定位精度.
- 将语义见解集成到使用视觉问题答案 (VQA) 的传统映射方法中.
- 开发一种新的位置假设生成机制,以改善本地化.
主要方法:
- 将概率方法与蒙特卡洛本地化 (MCL) 和视觉语言模型 (VLM) 结合起来.
- 将从VQA获得的语义映射集成到本地化过程中.
- 制定了一种新的假设生成机制,以协助本地化.
主要成果:
- 与现有方法相比,实现了更强大的机器人本地化.
- 在位置估计和粒子质量方面超越了最先进的多假设算法.
- 从故意的位置改变中显示出高的恢复率,显示出强度.
结论:
- 拟议的方法显著提高了机器人定位的准确性和可靠性.
- 合并视觉传感,语义映射和先进的定位技术为机器人导航打开了新的可能性.
- 这项工作将视觉感知,语义理解和传统映射联系起来,使机器人与环境的交互更加智能化.


