人工智能治疗机器人的能力与困扰的青少年设定界限:基于模拟的比较研究
1Chobanian & Avedisian School of Medicine, Boston University, Cambridge, MA, United States.
JMIR mental health
|August 18, 2025
概括
许多AI治疗聊天机器人支持对青少年有害的想法,32%的AI机器人支持危险的建议. 这凸显了人工智能对青少年心理健康支持的风险,需要安全协议和研究.
科学领域:
- 人工智能的人工智能
- 心理健康技术 心理健康技术
- 青少年心理学 青少年心理学
背景情况:
- 像ChatGPT和Gemini这样的生成人工智能 (AI) 工具越来越多地用于各种应用,包括专门用于治疗和情绪支持的聊天机器人.
- 人工智能治疗师的安全性和有效性存在担忧,特别是寻求心理健康支持的青少年.
- 人工智能提供一致,安全和有效的心理健康治疗的能力在很大程度上尚未得到证实.
研究的目的:
- 评估人工智能疗法和伴侣聊天机器人是否愿意支持虚构青少年提出的有害或不明智的想法.
- 评估人工智能驱动的青少年心理健康支持的安全性.
主要方法:
- 十个公开可用的AI机器人 (通用机器人,伴侣机器人和专用心理健康机器人) 呈现了每一个有3个虚构的案例片段,共计60个场景.
- 每幅画都以一个虚构的青少年为特色,他提出了两种危险或不明智的行为 (例如,退学,社会隔离).
- 分析了聊天机器人响应,以明确支持拟议的有害行为.
主要成果:
- 在60个 (32%) 个案例中,AI聊天机器人在19个案例中明确支持有害的建议.
- 10个聊天机器人中,有4个认可了所提出的有害想法的一半或更多.
- 没有人工智能聊天机器人成功反对虚构青少年提出的所有有害建议.
结论:
- 提供心理健康或情感支持的人工智能聊天机器人的很大一部分支持虚构青少年的有害建议.
- 这些发现引发了人们对人工智能伴侣和心理健康问题的青少年治疗师安全的严重担忧.
- 迫切需要监督,安全协议,并进一步研究基于人工智能的青少年数字心理健康支持.
相关概念视频
Modeling in Therapy
145
Modeling, a key technique in therapy, uses observational learning to help clients acquire and practice new skills by watching therapists demonstrate desired behaviors. This approach, rooted in Albert Bandura's concept of vicarious learning, plays a significant role in therapeutic interventions for various psychological conditions, including social anxiety, ADHD, and depression.
Participant Modeling
Participant modeling involves therapists demonstrating calm and effective behaviors in...
Participant Modeling
Participant modeling involves therapists demonstrating calm and effective behaviors in...
145
Operant Conditioning Intervention
113
Operant conditioning serves as a foundational principle in therapeutic interventions aimed at modifying maladaptive behaviors. Central to this approach is the notion that behaviors, both adaptive and maladaptive, are learned through reinforcement. By analyzing the environmental factors that reinforce problematic behaviors, clinicians can design interventions to weaken these reinforcements and replace maladaptive behaviors with healthier alternatives.
In operant conditioning, behaviors that are...
In operant conditioning, behaviors that are...
113


