一项测量情绪反应和对LLM生成问卷和人类生成问卷的感知测量的试点研究
Zhao Zou1, Omar Mubin1, Fady Alnajjar2
1School of Computer, Data and Mathematical Science, Western Sydney University, Sydney, Australia.
Scientific reports
|February 2, 2024
概括
这项研究发现,使用 ChatGPT,一个流行的 AI 聊天机器人,显著提高了用户的快乐,减少了悲伤. 虽然性别没有影响,但人工智能文本产生了积极的用户感知.
科学领域:
- 人工智能的人工智能
- 自然语言处理自然语言处理.
- 人与计算机的交互
背景情况:
- 像ChatGPT这样的人工智能聊天机器人的快速发展激发了大量的兴趣和研究.
- 了解用户对人工智能生成文本的感知和情绪反应对于未来的开发至关重要.
研究的目的:
- 调查聊天GPT对用户情绪体验的影响.
- 为了比较用户对人类生成的问卷的回复与ChatGPT.
- 评估ChatGPT在生成研究工具方面的有效性.
主要方法:
- 一项试点研究涉及14名参与者 (18-35岁),他们与ChatGPT互动.
- 管理两个不同的问卷:一个是人为生成的,一个是ChatGPT生成的.
- 使用情绪检测模型和差异分析 (ANOVA) 进行数据分析.
主要成果:
- 聊天GPT的使用与参与者的快乐增加和悲伤减少有关.
- 没有观察到情绪反应中基于性别的显著差异.
- 聊天GPT在生成广泛的调查问卷方面表现出有效性,并获得了积极的用户评价.
结论:
- 聊天GPT积极影响用户的情绪,增强幸福和减少悲伤.
- 该研究强调了ChatGPT作为研究工具的潜力,包括生成问卷.
- 局限性包括小样本规模和狭窄的人口范围,需要对多样化人口进行进一步研究.
