用于癌症患者支持的AI聊天机器人:使用Llama 3.1,Mistral 7B和PHI 3B进行开发和评估
Samuel McInerney1, Tamsin Nash1, Rebecca Lee2
1University of Edinburgh, Edinburgh.
Studies in health technology and informatics
|May 17, 2025
概括
针对乳腺癌患者的生成性AI聊天机器人有希望,但需要改进. 错误信息是一个重大问题,限制了这些医疗聊天机器人的当前临床使用.
科学领域:
- 在瘤学瘤学.
- 人工智能的人工智能
- 医疗信息学 医疗信息学
背景情况:
- 乳腺癌患者需要可访问和可靠的信息.
- 生成型人工智能 (AI) 为患者支持系统提供了潜力.
- 当前的人工智能系统可能会对信息准确性构成风险.
研究的目的:
- 为乳腺癌患者开发和评估一个问答系统.
- 为了比较这个应用程序的Llama 3.1,Mistral 7B和Phi 3.5语言模型的性能.
- 评估将人工智能驱动的支持集成到面向患者的应用程序中的可行性.
主要方法:
- 对三个生成性AI语言模型 (Llama 3.1,Mistral 7B,Phi 3.5) 的比较分析.
- 为乳腺癌患者设计的问答系统的评估.
- 探索用于临床信息传递的检索增强生成 (RAG).
主要成果:
- 对乳腺癌问答系统进行了评估,对生成AI模型进行了评估.
- 错误信息成为人工智能系统输出的重大挑战.
- 拉玛3.1号,米斯特拉7B号和菲 3.5号的性能各不相同.
- 检索增强生成 (RAG) 系统需要进一步开发以获得临床准确性.
结论:
- 针对乳腺癌患者的AI驱动的问答系统正在开发中.
- 确保信息准确性和减轻错误信息对于临床采用至关重要.
- 医疗聊天机器人需要在安全的临床部署之前进行大量的改进.
