验证系统可用性尺度作为可用性指标来评估语音用户界面的验证

科学领域:

• 人与计算机的交互
• 交互式系统设计 交互式系统设计
• 可用性工程可用性工程

背景情况:

• 用户体验 (UX) 对交互式系统至关重要,但评估语音用户界面 (VUI) 落后于图形用户界面 (GUIs). 对VUI评估的标准化工具尚未得到开发.
• 系统可用性尺度 (SUS) 是一种成熟的衡量标准,用于评估交互式系统的可用性,主要用于GUI.
• 像亚马逊Alexa和谷歌Nest Mini这样的语音助理越来越普遍,需要强大的评估方法.

研究的目的:

• 为了评估两个著名的语音助手,亚马逊Alexa Echo Dot和谷歌Nest Mini的可用性,使用系统可用性量表 (SUS).
• 为了比较这些语音助手的SUS分数和置信区间.
• 分析形容词评级得分 (ARS) 以获得定性见解,并验证其与VUIs的背景下与SUS得分的相关性.

主要方法:

• 进行了可用性评估,其中16名参与者在亚马逊Alexa Echo Dot和Google Nest Mini上执行预定义的任务.
• 系统可用性量表 (SUS) 调查问卷在任务完成后进行.
• 分析了形容词评分分数 (ARS),并使用了一种配对样本t测试来比较两个设备之间的SUS分数.

主要成果:

• 在亚马逊Alexa Echo Dot和谷歌Nest Mini之间的SUS分数中观察到显著的差异.
• 对于这两种设备,都得出了置信区间,为它们的真实可用性得分提供了一个范围.
• 在SUS分数和形容词评级分数之间发现了相关性,提供了互补的定性数据.

结论:

• 系统可用性尺度 (SUS) 是一个可行的和有效的指标来评估语音用户界面 (VUI) 的可用性.
• 该研究强调了领先的语音助理之间的显著可用性差异.
• 鼓励研究人员采用SUS进行一致和可靠的VUI可用性评估.