人工智能在足手术研究中的辨别:一项调查调查调查
Steven R Cooperman1, Abisola Olaniyan2, Roberto A Brandão3
1Orthopedic Foot and Ankle Center Advanced Foot and Ankle Reconstruction Fellowship, 350 W. Wilson Bridge Rd, Ste. 200, Worthington, OH 43085, USA.
概括
在足手术中,区分人工智能生成和人类撰写的摘要是具有挑战性的,专家们的表现不胜过随机机会. 目前的人工智能摘要几乎无法与人类撰写的摘要区分.
科学领域:
- 医疗信息学医学信息学
- 医学中的人工智能
- 科学写作 科学写作
背景情况:
- 在科学领域,评估人工智能 (AI) 产生的摘要与人类撰写的摘要之间的区别至关重要.
- 脚手术文献越来越受到人工智能进步的影响.
研究的目的:
- 评估足外科医生区分人工智能生成的摘要与人类撰写的摘要的能力.
- 确定专家判断在识别人工智能产生的科学内容时的可靠性.
主要方法:
- 一个人工智能系统 (ChatGPT 3.0) 根据21个已发表的例子生成了六个案例摘要.
- 九名脚外科医生参与了一项盲目调查,评价他们区分人工智能和人类抽象的能力.
- 调查进行了两次,以评估观察者内部/观察者间的可靠性.
主要成果:
- 在区分人工智能产生的和人类抽象的整体准确率为50.5%,相当于随机机会.
- 外科医生的经验和对AI的熟悉程度并没有显著影响准确性.
- 评价者之间的可靠性最初是适度的,但随着时间的推移而下降,而评价者内部的可靠性则很差.
结论:
- 目前在足手术中人工智能生成的摘要在很大程度上无法与人类撰写的内容区分.
- 持续识别人工智能生成的摘要仍然是一个重大挑战.
- 需要进一步的研究来开发可靠的方法来区分人工智能产生的科学文献.
更多相关视频
02:15Predictive Measurement for Windlass Change in Length and Selected Treatment Outcomes in Chronic Plantar Fasciitis
Published on: March 1, 2024
469
07:24Autologous Microfractured and Purified Adipose Tissue for Arthroscopic Management of Osteochondral Lesions of the Talus
Published on: January 23, 2018
10.3K
