CodePhys:通过隐藏的代码库查询进行强大的基于视频的远程生理测量
IEEE journal of biomedical and health informatics
|March 3, 2025
概括
通过将信号测量作为代码查询任务来处理,CodePhys增强了远程光电脉冲扫描 (rPPG). 这种新的方法产生高保真性rPPG信号,即使有杂的面部视频,也优于现有的方法.
科学领域:
- 生物医学工程 生物医学工程
- 计算机视觉 计算机视觉
- 信号处理 信号处理
背景情况:
- 远程光电血湿学 (rPPG) 测量来自面部视频的生理信号.
- 现实世界的干扰,如噪音和运动模糊,降低了rPPG信号质量.
- 现有的方法在噪音较大的rPPG信号恢复方面扎.
研究的目的:
- 开发一种强大的rPPG测量方法,能够抵御现实世界的干扰.
- 为了提高从退化的面部视频中提取的rPPG信号的保真度.
- 为rPPG信号估计引入一种基于代码书的新方法.
主要方法:
- 拟议的CodePhys方法将rPPG测量视为代码查询任务.
- 使用地面真实PPG信号构建了一个无噪声的代理空间 (代码库).
- 采用了具有注意力和蒸损失的空间感知编码器来处理干扰.
主要成果:
- CodePhys通过将噪声特征与无噪声代码簿条目相匹配来生成高保真rPPG特征.
- 该方法有效地减少了非周期性视觉干扰的影响.
- 在四个基准数据集上,在最先进的方法上表现出优越的性能.
结论:
- 在非接触式生理信号测量方面,CodePhys提供了显著的进步.
- 基于代码书的方法在具有挑战性的条件下提供了强大的rPPG提取.
- 在数据集内部和跨数据集评估中,CodePhys 取得了最先进的结果.
更多相关视频
06:32Author Spotlight: Automated Deep Brain Stimulation for Parkinson's Disease - Exploring the Possibilities and Challenges of Home Monitoring
Published on: July 14, 2023
1.2K
04:06Author Spotlight: Enhancing Remote Rehabilitation with Virtual Reality and Electromyography
Published on: January 12, 2024
539
