聊天GPT提供高质量的答案常见问题关于高骨切除术尽管低的互评分协议
Serhat Akcaalan1, Yavuz Şahbat2, Glauco Loddo3
1Department of Orthopaedics and Traumatology Ankara Bilkent City Hospital Ankara Turkey.
Journal of experimental orthopaedics
|December 1, 2025
概括
在高骨切除术 (HTO) 上的ChatGPT反应通常是高质量的. 然而,使用评分系统的外科医生之间一致性较低,这表明需要标准化的AI评估工具和专家监督患者教育.
科学领域:
- 整形外科手术 整形外科手术
- 人工智能在医学中的应用
- 医疗信息质量 医疗信息质量
背景情况:
- 高骨切除术 (HTO) 是年轻患者膝关节位不整的常见手术程序.
- 越来越多地使用在线资源来获取健康信息,需要评估人工智能生成的医疗内容.
- 评估人工智能工具对患者教育的可靠性至关重要.
研究的目的:
- 评估ChatGPT生成的关于高骨切除术 (HTO) 的常见问题 (FAQ) 答案的质量.
- 评估骨科外科医生用于评估人工智能生成的医疗信息的两个评分系统的可靠性.
- 确定对人工智能生成的HTO信息的专家意见的一致性.
主要方法:
- 有关HTO的24个常见问题提交给ChatGPT (GPT-4-turbo).
- 四位整形外科医生独立地使用4点分类尺度和100点数值尺度对AI反应进行了评分.
- 观察者内部和观察者间的可靠性使用加权的卡帕和类内相关系数 (ICC) 进行评估.
主要成果:
- 超过70%的ChatGPT回复被评为"优秀"或需要最小的澄清.
- 外科医生之间的观察者内部一致性是可变的 (kappa = 0.3330.864,ICC = 0.6900.922).
- 在两种评级表中,观察者间的一致性始终很低 (ICC ≤ 0.390).
结论:
- 聊天GPT提供高质量的响应与HTO相关的常见问题.
- 低的观察者间协议强调了在骨科中需要标准化AI评估工具的需要.
- 专家监督对于将AI产生的内容整合到患者教育材料中至关重要.
更多相关视频
09:01Treatment of Ankle Osteoarthritis with Total Ankle Replacement Through a Lateral Transfibular Approach
Published on: January 24, 2018
12.2K
06:28Anterior Cruciate Ligament Transection and Synovial Fluid Lavage in a Rodent Model to Study Joint Inflammation and Posttraumatic Osteoarthritis
Published on: September 2, 2025
1.0K
