面向以用户为中心的互动医疗图像细分在虚拟现实中,使用辅助人工智能代理

科学领域:

• 医疗成像医学成像
• 人工智能的人工智能
• 虚拟现实 虚拟现实 虚拟现实

背景情况:

• 体积医学扫描的手动细分是耗时且容易出现错误的.
• 完全自动的细分算法可以通过用户反来改进.
• 整合AI和VR为医学图像分析提供了一种新的方法.

研究的目的:

• 开发SAMIRA,一个用于医疗VR的对话性AI代理,以协助本地化,细分和可视化3D医疗概念.
• 评估SAMIRA在一个人入循环细分工作流程中的可用性和有效性.
• 为了比较不同的交互模式 (控制器,头部,眼睛跟踪) 在VR中改进细分面具.

主要方法:

• 开发SAMIRA,一种对话式AI代理,利用放射性AI基础模型和VR.
• 实现基于语音的交互,以理解放射性特征并生成细分面具.
• 虚拟现实控制器指向,头部指向和眼睛跟踪的比较,以改进交互式细分.
• 用户研究评估系统可用性,任务负载和培训潜力.

主要成果:

• 萨米拉证明了高可用性,系统可用性量表 (SUS) 的得分为90.0±9.0.
• 该系统实现了用户的整体任务负载较低.
• 评估显示,对SAMIRA的指导,培训潜力和AI集成在放射性细分方面的强有力的支持.

结论:

• 萨米拉为医疗图像细分和可视化提供了一种有效和直观的AI驱动的VR解决方案.
• 对话代理增强了对放射学特征和患者特定解剖学的理解.
• 拟议的人在循环中的VR系统显示了改善放射性细分任务的重大前景.