微调GLIDE稳定扩散模型用于基于人工智能的皮肤镜像的文字条件图像合成
Veronika Shavlokhova1, Andreas Vollmer2, Christos C Zouboulis3
1Maxillofacial Surgery University Hospital Ruppin-Fehrbelliner Straße Neuruppin, Neuruppin, Germany.
Frontiers in medicine
|November 6, 2023
概括
通过对GLIDE模型进行微调,使用10,015张皮肤镜图像,生成了真实的合成数据. 这种人工智能生成的数据改善了诊断模型的性能,超过了皮肤病的皮肤科医生分类准确度.
科学领域:
- 皮肤病学 皮肤病学
- 人工智能的人工智能
- 医疗成像医学成像
背景情况:
- 人工智能 (AI) 和医疗领域的进步需要大型数据集.
- 文本到图像生成人工智能模型GLIDE (用于生成和编辑图像扩散的引导语言) 已经显示出希望,但需要对医疗应用进行改进.
研究的目的:
- 微调GLIDE模型用于医学应用,特别是皮肤病学.
- 评估人工智能生成的合成皮肤镜像对改善诊断模型性能的实用性.
主要方法:
- 在GLIDE模型中,使用7个诊断实体的10,015张皮肤镜像进行了微调.
- 对于每个诊断实体,生成了光现实的合成图像.
- 一位经验丰富的皮肤科医生评估了原始和人工智能生成图像的现实性和分类.
- 训练了一个深度学习模型来比较AI和皮肤科医生诊断性能.
主要成果:
- 生成的图像呈现出不同的质量,黑色素瘤和黑色素细胞瘤呈现出更高的现实性.
- 合成图像的加入提高了分类模型的准确性和精度.
- 与皮肤科医生评估相比,基于人工智能的分类显示出更高的性能.
结论:
- 由人工智能生成的合成图像在皮肤病学中具有培训和增强人工智能模型的巨大潜力.
- 这种方法可以帮助克服与医疗AI开发中的数据稀缺性相关的挑战.
更多相关视频
06:16Author Spotlight: Unraveling the Pathogenesis of Age-Related Macular Degeneration and Discovering Potential Therapies
Published on: July 28, 2023
2.5K
12:26Control of Cell Adhesion using Hydrogel Patterning Techniques for Applications in Traction Force Microscopy
Published on: January 29, 2022
5.7K
