オーディオビジュアル・アングルと音声の不一致は,仮想現実におけるオーディオビジュアル・ヴァーバル・短期記憶に影響を与えない

科学分野:

• 認知心理学
• 仮想現実の研究
• 人とコンピュータの相互作用

背景:

• 仮想現実 (VR) 環境は,現実のシナリオをシミュレートするために研究においてますます使用されています.
• VRの視覚的要素は,聴覚情報の処理に影響を及ぼし,特にオーディオビジュアル情報が不一致である場合.
• ヘッドマウントディスプレイ (HMD) は,浸透的なVR体験を提供し,認知作業への影響について疑問を投げかけています.

研究 の 目的:

• VRにおけるオーディオビジュアル不一致が 言語的短期記憶に与える影響を調査する.
• HMDと従来のコンピュータモニターの間で 言語による短期記憶作業のパフォーマンスを比較する.
• 異なるオーディオビジュアル条件下でのオーディオビジュアル・シリアル・リコール (avVSR) タスクの堅実性を評価する.

主な方法:

• 2つの実験はHMDとコンピュータモニターを使って行われました.
• アングルと音声に関するオーディオビジュアル不一致が実装されました.
• 数字の配列を提示するエンボディド・会話・エージェント (ECA) を使用して,オーディオビジュアル・ベラル・シリアル・リコール (avVSR) タスクが開発されました.

主要な成果:

• HMDとコンピュータモニターのディスプレイの間で正しくリコールされた数字の有意な違いは見つかりませんでした.
• 主観的な評価は,HMD状態での存在感が高いことを示しました.
• モニターでの極端な角度不一致のリコールでは,軽微で軽微な増加が観察されましたが,応答時間は影響を受けませんでした.

結論:

• オーディオビジュアル・ベラル・シリアル・リコール・タスクは,HMDとコンピュータ・モニターの両方の角度と音声のオーディオビジュアル不一致に対して堅牢です.
• テストされたシナリオでは,HMDを含むVRディスプレイ技術は,言語短期記憶の性能に悪影響を及ぼさないようです.
• HMDは存在感を高めますが,avVSRタスクで測定された基本的な認知能力は変化しませんでした.