在线人工智能系统对关于宫融合的常见问题作出反应的适当性和一致性
Mark Miller1, William T DiCiurcio1, Matthew Meade1
1Jefferson Health-New Jersey, Stratford.
Clinical spine surgery
|February 10, 2025
概括
聊天GPT为宫手术问题提供了中度准确的答案,但可靠性很差. 需要进一步进行人工智能研究,以提高这些人工智能生成的患者询问答案的质量和一致性.
科学领域:
- 人工智能在医学中的应用
- 在医疗保健中的自然语言处理.
- 脊柱外科 知识传播 知识传播
背景情况:
- 人工智能 (AI) 和机器学习正在改变科学研究和临床实践.
- 像ChatGPT这样的大型语言模型在回答医疗问题方面表现有前途,之前的研究验证了对骨科手术的反应.
- 关于ChatGPT对宫手术相关查询的准确性和可靠性的知识差距存在.
研究的目的:
- 评估ChatGPT对常见宫手术问题的答案的准确性和实用性.
- 确定AI语言模型在这个特定的外科领域提供的信息的质量和一致性.
主要方法:
- 采用了前性调查研究设计.
- 对ChatGPT-3.5提出了20个不同的宫手术问题,每个问题被问了三次 (共60个答案).
- 三名经过培训的脊椎外科医生使用5分评级表来评估答案的准确性和实用性,并计算了可靠性的类内相关系数 (ICC).
主要成果:
- 聊天GPT回复的平均质量分数为3.17,其中66.7%的回复被至少一个评论员评为至少"中等"质量.
- 45%的问题得到了所有三位审稿人的"中等"或更高的质量评分.
- 测试-再测试可靠性很差,由0.0941.1的ICC表示.
结论:
- 聊天GPT可以对患者关于宫手术的常见问题产生适度准确的答案.
- 目前的ChatGPT代表现出对宫手术的反应的一致性不佳.
- 在人工智能领域进行进一步的研究和开发对于提高人工智能生成的医疗信息的可靠性和准确性至关重要.
相关概念视频
Control Systems
1.7K
Control systems are everywhere in contemporary society, influencing diverse applications from aerospace to automated manufacturing. These systems can be found naturally within biological processes, such as blood sugar regulation and heart rate adjustment in response to stress, as well as in man-made systems like elevators and automated vehicles. A control system is essentially a network of subsystems and processes that collaboratively convert specific inputs into desired outputs.
At the heart...
At the heart...
1.7K
Automatic Processing and Automatic Social Behavior
376
Automatic processing refers to the cognitive operations that occur without conscious intent or awareness, playing a fundamental role in shaping social cognition and behavior. These processes enable individuals to navigate complex social environments efficiently by relying on mental shortcuts and pre-existing knowledge structures known as schemas. One of the most influential mechanisms underlying automatic processing is priming, which subtly activates mental representations through exposure to...
376


