ハイブリッドBCI-VRシステムにおけるトリマニュアルインタラクション:視線を統合し,3Dオブジェクトの操作を強化するEEG制御

科学分野:

• 神経科学と人間とコンピュータの相互作用
• 仮想現実とBCI統合
• 支援技術開発

背景:

• 現在の脳コンピュータインターフェース (BCI) と仮想現実 (VR) システムは,直感的な多肢制御を達成する上で課題に直面しています.
• 既存のフレームワークはしばしば特殊なハードウェアまたは広範なトレーニングを必要とし,アクセシビリティを制限します.

研究 の 目的:

• 2つの生物学的手と仮想の第三の肢体を同時に制御するための消費者グレードのハイブリッドBCI-VRフレームワークを開発し,検証する.
• VRにおける直感的な超数値四肢制御のための注意の値と視線追跡の使用の可能性を調査する.
• システムの性能,作業量,および実施形態の神経生理学的相関性を評価する.

主な方法:

• Tobiiのアイトラッキング,NeuroSkyのEEG,ハイブリッドBCI-VRシステムの非ハプティックコントローラを統合した.
• 仮想ハンドアクティベーションと視線によるターゲティングのために,e-Senseの注意の値 (>300msで80%) を利用した.
• インプット衝突と適応的認知負荷管理を解決するために,ソフトな最大加重仲裁アルゴリズムを使用しました.

主要な成果:

• 92.4%の成功率と 87.5%の成功率を 達成しました
• 空間的な誤差が41%減 (σ = 0.23 mm 対 0.39 mm) され,NASA-TLXの作業量は22%減った.
• 観察された特徴的なベータ帯のエネルギー変調は,仮想の肢体の注意を介した実施形態を示しています.

結論:

• 洗練されたアルゴリズムは 消費者のハードウェアの限界を克服し 精密なVR制御を実現します
• 開発されたフレームワークは,リハビリテーション,トレーニング,および補助技術のためのアクセシブルなトリマニュアルVRアプリケーションを可能にします.
• VRにおける注意力駆動の超数値的肢体実施形態に関する神経生理学的証拠を証明した.