实现人工智能智能镜的可行性 集成MA-rPPG,面部影响和实时对话指导
Mohammad Afif Kasno1,2, Jin-Woo Jung1
1Department of Computer Science and Artificial Intelligence, College of Advanced Convergence Engineering, Dongguk University, Seoul 04620, Republic of Korea.
Sensors (Basel, Switzerland)
|September 27, 2025
概括
这项研究引入了实时智能镜来监测健康状况,使用人工智能进行面部分析和远程光电显微镜 (rPPG) 来跟踪心率和SPO2. 它还有一个心理健康聊天机器人,展示了环境健康意识的新方法.
科学领域:
- 人工智能的人工智能
- 生物医学工程 生物医学工程
- 人与计算机的交互
背景情况:
- 多模式健康监测系统正在发展,提供持续的,非侵入性的生理和心理评估.
- 现有的远程光多聚体图 (rPPG) 模型通常需要离线处理,限制实时健康反.
- 将各种AI功能集成到用户友好的界面中,对于可访问的健康意识至关重要.
研究的目的:
- 开发和评估一个实时智能镜子系统,集成面部表情分析,远程光电显微镜 (rPPG) 和多式联络健康监测的对话性AI.
- 调整移动平均数rPPG (MA-rPPG) 算法以实现连续的,实时流动的心率和SPO2监测.
- 创建一个环境,交互平台,提供实时健康反和同情支持.
主要方法:
- 开发一个智能镜像原型,结合触摸屏GUI.
- 实时实施MA-rPPG模型通过网络摄像头进行生理监测 (心率,SpO2).
- 集成DeepFace图书馆用于面部表情和年龄分析.
- 整合基于GPT-4o的双语 (英语/韩语) 会话AI,用于用语音合成支持心理健康.
主要成果:
- 展示了实时智能镜的可行性,集成多式联络人工智能用于健康监测.
- 成功调整了MA-rPPG用于连续的rPPG信号采集和分析.
- 在智能镜面界面内启用实时情绪检测,年龄估计和对话支持.
- 提供环境,低中断的用户交互和反.
结论:
- 开发的智能镜子系统展示了整合多式传感和对话AI的潜力,以实现实时健康意识.
- 原型作为可行性阶段的演示,突出了整合能力而不是临床准确性.
- 未来的工作应该集中在广泛的生理验证和用户研究上,以概括发现并提高准确性.
