音乐,身体和机器:基于手势的同步在人机音乐互动的人机器人.
Xuedan Gao1, Amit Rogel1, Raghavasimhan Sankaranarayanan1
1Robotic Musicianship Lab, Center for Music Technology, Georgia Institute of Technology, Atlanta, GA, United States.
Frontiers in robotics and AI
|December 20, 2024
概括
机器人音乐家可以使用非语言的身体运动来改善与人类合作者的同步. 这些机器人手势增强了音乐协作,并创造了更积极的人机交互.
科学领域:
- 人与机器人的交互
- 音乐中的机器人技术
- 音乐中的非语言沟通
背景情况:
- 人类音乐家在表演期间使用非语言线索进行沟通.
- 机器人音乐家可以利用身体手势进行类似的沟通功能.
- 现有的研究缺乏一个框架来分类音乐手势及其对人类机器人同步的影响.
研究的目的:
- 为了引入一个理论框架来分类音乐手势.
- 为了评估机器人手势对人机同步的影响.
- 评估Shimon辅助和社交手势对同步和用户体验的影响.
主要方法:
- 开发了一个理论框架来分类音乐手势.
- 进行了一项研究,人类钢琴家与Shimon一起演奏,Shimon是一个机器人马林巴演奏者.
- 评估了参与者的同步准确度,并通过Shimon的手势来传达节奏变化.
主要成果:
- 机器人非仪器手势显著改善了人机同步.
- 辅助和社交手势有助于预测节奏和节奏的变化.
- 参与者在涉及这些手势的互动中报告了更多的积极感受.
结论:
- 非音乐制作的手势对于有效的人机器人音乐协作至关重要.
- 机器人手势增强预测,协调和音乐体验的整体参与.
- 将表达式手势整合到机器人音乐家中,可以带来更直观和愉快的人机器人音乐合作伙伴关系.


