视觉 - 骨架双模态框架,用于对帕金森病步态的概括性评估
Weiping Liu1, Xiaozhen Lin2, Xinghong Chen3
1Key Laboratory of OptoElectronic Science and Technology for Medicine of Ministry of Education, Fujian Normal University, Fuzhou 350007, China; Fujian Key Laboratory of Pattern Recognition and Image Understanding, School of Computer and Information Engineering, Xiamen, University of Technology, Xiamen 361024, China.
Medical image analysis
|July 13, 2025
概括
这项研究引入了一种新的双模式框架,用于使用视觉和骨数据评估帕金森病 (PD) 步态. 这种新的方法显著提高了步态分析的准确性,为家庭监控提供了潜力.
科学领域:
- 生物医学工程 生物医学工程
- 计算机视觉 计算机视觉
- 神经学 神经学
背景情况:
- 步行异常是帕金森病 (PD) 进展和治疗反应的关键指标.
- 目前基于视频的PD步态评估方法仅仅侧重于骨运动和单个视角而受到限制.
研究的目的:
- 开发一种新的视觉骨双模式框架,以更准确,更全面地评估帕金森病的步态.
- 克服现有的单模和单视角PD步态分析技术的局限性.
主要方法:
- 介绍关键点视觉转换器,从人类关键点中提取视觉特征,考虑空间和连接信息.
- 开发一个时间融合编码器,以整合关键点视觉特征与骨架运动,以增强时间特征提取.
- 在241名PD参与者的数据集上进行验证,从前方视图和一般视角数据集.
主要成果:
- 拟议的框架在前视图数据集上实现了78.05%的准确性,优于现有方法.
- 在一般视角数据集上获得了73.07%的准确性,证明了强大的交叉视图概括.
- 特性可视化分析提供了对模型评估机制的见解.
结论:
- 视觉骨双模式框架在帕金森病步行评估方面取得了重大进展.
- 该模型的稳定性和准确性支持其无限制的潜力,基于家庭的PD步态监测.
- 这种方法为更容易获得和更全面的PD管理铺平了道路.
