混合现实和人工智能:多式可视化和膝关节骨切除术中的扩展交互的整体方法
Andrea Moglia1, Luca Marsilio1, Matteo Rossi1,2
1Department of ElectronicsInformation and BioengineeringPolitecnico di Milano 20133 Milan Italy.
IEEE journal of translational engineering in health and medicine
|February 27, 2024
概括
使用人工智能和混合现实 (MR) 的HoloKnee原型显示了膝关节骨切除术手术培训和规划的前景. 这一创新系统帮助外科医生进行手术前的规划,并提供潜在的手术内指导.
科学领域:
- 整形外科手术 整形外科手术
- 医学技术 医学技术 医学技术
- 人与计算机的互动.
背景情况:
- 增强现实 (AR) 已经推进了骨科手术的规划和导航.
- 在骨科中混合现实 (MR) 应用的探索较少.
- 人工智能 (AI) 可以通过自动化和个性化来增强MR的能力.
研究的目的:
- 评估Holoknee原型,一种基于AI和MR的系统,用于多模式数据可视化和膝关节骨切除术中的手术规划.
- 为了评估它在HoloLens 2耳机上的可用性.
主要方法:
- 两次临床前试验,共11名参与者 (外科医生,住院医生,医学学生).
- 参与者执行了六项与全息数据交互和手术前规划相关的任务.
- 用户的感知和可用性通过问卷进行了评估.
主要成果:
- 参与者在不同会议中表现出更好的任务执行时间.
- 对MR在术前规划中的有效性达成高度一致 (90.9%).
- 对手术培训的MR的积极反以及手术内指导的潜力.
结论:
- Holoknee是第一个整体AI和MR应用程序,用于膝关节骨切割手术规划.
- 在外科培训,手术前规划和手术内指导方面显示出有前途的潜力.
- 旨在支持外科医生,并加强住院人员的培训.
