调查人工智能程序在评估眼睛炎症,眼睛疾病和治疗方式方面的知识水平方面的比较优势
Eyupcan Sensoy1, Mehmet Citirik1
1Department of Ophthalmology, Ankara Etlik City Hospital, Ankara, Turkey.
Taiwan journal of ophthalmology
|October 21, 2024
概括
像ChatGPT,Bard和Bing这样的人工智能 (AI) 聊天机器人显示出对眼睛炎症和眼膜疾病的不同知识. 需要进一步开发,以确保为患者提供准确的AI产生的医疗信息.
科学领域:
- 眼科医生 眼科 眼科
- 人工智能的人工智能
- 医疗信息学 医疗信息学
背景情况:
- 人工智能 (AI) 聊天机器人越来越多地用于信息检索.
- 人工智能在眼科等专业医疗领域的准确性需要评估.
- 了解人工智能在眼睛炎症和眼膜疾病中的功能至关重要.
研究的目的:
- 评估ChatGPT,Bard和Bing AI聊天机器人的眼睛炎症,眼膜疾病和治疗方面的知识.
- 为了比较这些AI聊天机器人的性能.
主要方法:
- 对ChatGPT,Bard和Bing进行了36个问题,涵盖眼睛炎症,脑膜疾病和治疗方式.
- 正确和不正确的答案被记录和分析.
- 准确率使用Chi-平方测试进行了比较.
主要成果:
- 聊天GPT以52.8%的准确率达到最高,其次是Bing以44.4%的准确率,Bard以38.9%的准确率.
- 这三个AI聊天机器人对55.6%的问题提供了相同的答案,其中45%是正确的,55%是不正确的.
- 在三个人工智能聊天机器人 (P = 0.654) 之间的答案准确度方面,没有发现统计学上显著的差异.
结论:
- 人工智能聊天机器人需要进一步开发,以提供有关眼睛炎症和眼膜疾病的可靠信息.
- 提高人工智能聊天机器人的性能对于它们在医疗信息传播中的有效使用至关重要.
- 未来的研究应该专注于提高眼科人工智能准确度.
