医学史の取扱訓練のための大規模な言語モデルベースのシステムの開発と検証:評価の安定性,人間-人工知能の一貫性,および透明性に関する将来的なマルチケース研究
Yang Liu1, Chujun Shi1, Liping Wu1
1Medical Simulation Center, Shantou University Medical College, No. 22 Xinling Road, Shantou, 515041, China, 86 754-88900459.
JMIR medical education
|August 29, 2025
まとめ
AI駆動の医療履歴調査訓練・評価システム (AMTES) は,医学生に一貫した透明なフィードバックを提供します. このAI駆動のツールは高い精度と安定性を示し,歴史を記録するシミュレーションにおける臨床スキルを高めています.
科学分野:
- 医療教育技術
- 医療における人工知能
- 臨床技能訓練
背景:
- 従来の医療歴調査の訓練には 一貫したフィードバックや 標準化された評価や 標準化された患者へのアクセスが欠けています
- 人工知能 (AI) 搭載のシミュレート患者は潜在的な解決策ですが,人間-AIの一貫性と評価の安定性についてはさらなる調査が必要です.
研究 の 目的:
- DeepSeek-V2.5 を使用したAI駆動医療履歴記録トレーニングおよび評価システム (AMTES) の開発と検証.
- 様々な臨床シナリオにおける AMTES の安定性,人間-AI の一貫性,および透明性を評価する.
主な方法:
- 対話の質と自動化された評価のための戦略を備えたAMTESを開発しました.
- 3つの症例 (単純,中等,複合) を評価した31人の医学部生を対象とした前向きな研究を実施した.
- 系統的なベースライン比較を行い,代替の大型言語モデル (LLM) で一般化性をテストした.
主要な成果:
- AMTESは高度なダイアログ精度 (97.9%~99.0%) と文脈的適切性 (>99%) を達成した.
- 自動化された評価では,例外的な安定性 (CVs ≤1. 2%) と高いヒトAI一貫性 (ICCs > 0. 923) が示された.
- 学生の87%がAMTESを有用だと認め,83%が再利用する意向を示した.
結論:
- AMTESは,本物の臨床対話と一貫した透明なフィードバックを通じて,重要な教育価値を提供します.
- このシステムは,様々な教育環境で医学史を学ぶ訓練に適応し,一般化できます.
- ユーザーからの強い支持は,AMTESが貴重なトレーニングツールとして持つ可能性を裏付けています.
関連する概念動画
Data Validation
5.3K
Data validation is an essential part of a comprehensive assessment. Validation is confirming or verifying and opening the door to gathering more assessment data as it clarifies vague or unclear data. The process of checking and verifying the collected information is called data validation. The primary purpose of data validation is to ensure data is as free from error, bias, and misinterpretation as possible.
Nursing assessment guides are generally based on holistic models rather than medical...
Nursing assessment guides are generally based on holistic models rather than medical...
5.3K
Improving Translational Accuracy
2.7K
2.7K
Language Development
444
Children master language quickly and with relative ease, supported by both biological predisposition and reinforcement. B. F. Skinner (1957) proposed that language is learned through reinforcement, while Noam Chomsky (1965) argued that language acquisition mechanisms are biologically determined.
The critical period for language acquisition suggests that the ability to acquire language is at its peak early in life. As people age, this proficiency decreases. Language development begins very...
The critical period for language acquisition suggests that the ability to acquire language is at its peak early in life. As people age, this proficiency decreases. Language development begins very...
444
Methods of Documentation VI: Case Management Model
628
The case management model is a multidisciplinary approach that involves healthcare professionals from diverse disciplines, such as physicians, nurses, therapists, social workers, and pharmacists, working collaboratively to address the various needs of patients. Each healthcare professional brings unique expertise and perspectives, contributing to a more comprehensive understanding of the patient's condition and tailoring treatment plans accordingly.
For example, a patient with a chronic...
For example, a patient with a chronic...
628
Data Collection II
8.5K
The nursing history captures and records the patient's health status, so that a care plan evolves to meet the patient's individual needs. The nursing health history is a part of the initial assessment. A comprehensive history covers all health dimensions and plays a significant role in the assessment process. A comprehensive history includes the patient's biographical information, reasons for seeking health care, expectations, present and past health history, medications, and...
8.5K


