"誰"が"何を"言っているのか? 人間の声とスピーチの脳ベースのデコーディング
Elia Formisano1, Federico De Martino, Milene Bonte
1Department of Cognitive Neuroscience, Faculty of Psychology and Neuroscience, University of Maastricht, 6200 MD Maastricht, Netherlands. e.formisano@psychology.unimaas.nl
現在,研究者は,脳の活動からスピーチの内容とスピーカーのアイデンティティをデコードすることができます. この脳ベースの認識は,聴覚皮質の神経指紋を使用して,聞こえたスピーチや声を識別することができます.
科学分野:
- 神経科学は神経科学である.
- コグニティブ・サイエンス コグニティブ・サイエンス
- コンピュータ言語学 コンピュータ言語学
背景:
- 言語のような複雑な聴覚情報を脳がどのように処理するかを理解することは,神経科学の重要な課題です.
- 音声の内容と音声者アイデンティティの異なる神経表現を特定することは,聴覚知覚の解読に不可欠です.
研究 の 目的:
- 聴衆の脳の活動から,スピーチの内容とスピーカーのアイデンティティが解読できるかどうかを調査する.
- "何"が言われているか,そして"誰が"話しているかを認識するための神経基盤を特定する.
主な方法:
- 機能性磁気共鳴画像 (fMRI) は,脳の活動を測定するために使用されました.
- 言語と音声信号によって誘発された神経パターンを分析するために,データマイニングアルゴリズムが適用されました.
主要な成果:
- 聴覚皮質内の神経の指紋は,スピーチの内容とスピーカーのアイデンティティの両方をコードすることが判明しました.
- これらの皮質の指紋は空間的に分布し,音響の変動に強い.
- この方法は,新しいスピーカーからの学習されたスピーチの脳ベースの認識と,新しい発話からの学習された声の認識を可能にしました.
結論:
- 聴衆の脳活動から,スピーチの内容とスピーカーのアイデンティティの両方を解読することが可能である.
- 聴覚皮質のニューラル表現は,人間のスピーチとスピーカーの認識のための基礎を提供します.
- 発見は,言語の聴覚的知覚の基礎となる皮質の組織と計算メカニズムを明らかにします.
さらに関連する動画
06:09P300-Based Brain-Computer Interface Speller Performance Estimation with Classifier-Based Latency Estimation
Published on: September 8, 2023
11:39Assessment of Audio-Tactile Sensory Substitution Training in Participants with Profound Deafness Using the Event-Related Potential Technique
Published on: September 7, 2022
関連する概念動画
Higher Mental Functions of the Brain: Language
Language formation and comprehension take place in the dominant hemisphere. The dominant hemisphere is responsible for understanding the meaning of spoken, written, or sign language, as well as the ability to communicate. For most people, the left hemisphere is the dominant one. The right hemisphere, then, gives tone and emotional context to the...
EPS and iPS Cells in Disease Research
Language and Cognition
Perceiving Loudness, Pitch, and Location
Place theory, or place coding, suggests that different pitches are heard because various sound waves activate specific locations along the cochlea's basilar membrane. The brain determines the pitch of a sound by identifying...
