模拟胸部放射图的临床特征,用于医学图像探索和CNN可解释性,使用基于风格的生成对抗自编码器
Kyle A Hasenstab1,2, Lewis Hahn3, Nick Chao4
1Department of Mathematics and Statistics, San Diego State University, 5500 Campanile Drive, San Diego, CA, 92182, USA. kylehasenstab@gmail.com.
我们开发了SEE-GAAN,这是一个新的AI可解释性框架,用于医学成像. 它可视化了AI模型如何解释特征,提高对临床AI应用程序的理解和信任.
科学领域:
- 人工智能的人工智能
- 医疗成像医学成像
- 放射学 放射学是一门学科.
背景情况:
- 卷积神经网络 (CNN) 的解释性对于放射学中的临床采用至关重要.
- 目前的归因方法突出显示图像区域,但无法解释图像的基本特征,阻碍了临床使用.
- 在了解CNN如何解释复杂的医学图像及其临床相关性方面存在差距.
研究的目的:
- 通过基于风格的生成对抗自编码网络 (SEE-GAAN) 引入语义探索和可解释性.
- 开发一个AI可解释性框架,在医学图像中语义上可视化临床和AI特征.
- 在放射学实践中提高CNN预测的可解释性.
主要方法:
- 开发了SEE-GAAN,这是一个新的框架,在基于样式的生成对抗性自动编码网络中利用潜伏空间操纵.
- 生成合成图像的序列,以可视化特征的表现和变化.
- 应用SEE-GAAN对大量的胸部X射线图 (26,664张图像,15,409名患者) 进行临床特征和AI预测分析.
- 使用NT-pro B型性尿素 (BNPP) 预测作为急性心力衰竭的代理来测试框架.
主要成果:
- SEE-GAAN序列有效地可视化了与临床和AI预测相关的解剖学和病理形态学的变化.
- 该框架澄清了传统归因方法识别的模两可的地区.
- 放射学解释证实SEE-GAAN能够捕捉临床相关的成像特征.
- 与现有的可解释性技术相比,人工智能模型的透明度有所提高.
结论:
- 在医学成像中,SEE-GAAN显著提高了CNN的可解释性.
- 该框架有助于理解用于成像生物标志物发现的临床特征.
- SEE-GAAN提高了AI的透明度,促进了其在临床放射学中的采用.
- 这种方法为标准AI可解释性方法提供了更易于解释的替代方案.
更多相关视频
02:09Multi-modal Pulmonary Imaging: Using Complementary Information from CT and Hyperpolarized 129Xe MRI to Evaluate Lung Structure-Function
Published on: April 12, 2024
09:57Development and Evaluation of 3D-Printed Cardiovascular Phantoms for Interventional Planning and Training
Published on: January 18, 2021
相关概念视频
Radiological Investigation I: X-ray and CT
Imaging Studies for Cardiovascular System III: X-Ray
Definition and Purpose
An X-ray, or radiograph, is a non-invasive method that uses ionizing radiation to take images of internal structures. It is mainly used in cardiac imaging to examine the heart, lungs, and major blood vessels, aiming to identify abnormalities in the heart's size, shape, and position, such as heart failure, congenital defects, and vascular...
Computed Tomography
The technique was invented in the 1970s and is based on the principle that as X-rays pass through the body, they are absorbed or reflected at different levels. In the technique, a patient lies on a motorized platform while a computerized axial tomography (CAT) scanner rotates...
X-ray Imaging
Imaging Studies for Cardiovascular System V: CT
