在无线囊内镜中模拟高光谱和窄带成像用于深度学习驱动的胃肠道疾病检测
Chu-Kuang Chou1,2, Kun-Hua Lee3,4, Riya Karmakar4
1Division of Gastroenterology and Hepatology, Department of Internal Medicine, Ditmanson Medical Foundation Chia-Yi Christian Hospital, Chia-Yi 60002, Taiwan.
一种新的频谱辅助视觉增强器 (SAVE) 通过增强无线囊内镜图像来改善胃肠道疾病诊断. 这种软件解决方案可以提高诊断准确度,用于诸如多等疾病,帮助进行非侵入性胃肠道成像.
科学领域:
- 医疗成像医学成像
- 胃肠病学 胃肠病学
- 计算机视觉 计算机视觉
背景情况:
- 诊断胃肠道疾病 (GID) 是一个挑战,特别是无线囊内镜 (WCE) 缺乏先进的成像.
- 在内镜中,标准的白光成像 (WLI) 限制了精确诊断至关重要的详细光谱信息.
研究的目的:
- 引入光谱辅助视觉增强器 (SAVE),这是一个用于增强WLI内镜图像的新型框架.
- 从标准RGB输入中模拟高光谱成像 (HSI) 和窄带成像 (NBI) 的光谱特征.
- 提高胃肠道成像诊断的准确性,特别是在WCE.
主要方法:
- 开发了使用颜色校准 (Macbeth Color Checker),马校正,CIE 1931 XYZ转换和主要组件分析 (PCA) 的SAVE框架.
- 应用 SAVE 将标准 WLI 图像转换为光谱丰富的表示.
- 使用Kvasir-v2数据集和训练有素的深度学习模型 (Inception-Net V3,MobileNetV2,MobileNetV3,AlexNet) 对原始和增强图像进行性能评估.
主要成果:
- 移动NetV2通过使用SAVE增强图像实现了96%的F1分数来分类聚.
- 在SAVE增强图像上,AlexNet的平均精度显著增加到84%.
- 高结构相似性指数 (SSIM) 评分 (93.99% 奥林巴斯,90.68% WCE) 证实了光谱转换后的图像保真性.
结论:
- SAVE框架提供了一个实用的,基于软件的解决方案,用于增强GI内镜图像.
- SAVE显著提高了诊断准确度,为低成本,非侵入性WCE诊断提供了潜力.
- 这种光谱丰富技术解决了标准WLI的局限性,并提高了检测胃肠道疾病的能力.
更多相关视频
09:42Murine Endoscopy for In Vivo Multimodal Imaging of Carcinogenesis and Assessment of Intestinal Wound Healing and Inflammation
Published on: August 26, 2014
10:40Label-free, High-Resolution 3D Imaging and Machine Learning Analysis of Intestinal Organoids via Low-Coherence Holotomography
Published on: August 12, 2025
相关概念视频
Endoscopic Procedures III: Video Capsule Endoscopy
Imaging Studies III: Gastrointestinal Motility Studies and Virtual Colonoscopy
Radionuclide Testing
Radionuclide testing is a sophisticated medical technique for assessing gastrointestinal motility. It focuses on gastric emptying and colonic transit time. Radioactive markers track the movement of food through the digestive system, providing insights into gastrointestinal disorders.
In gastric emptying studies, a meal's liquid and...
