スペクトル空間特徴融合によるリアルタイム顔表情認識
Jinjing Ma1, Yongcheng Lin2, Lanmei Qian2
1Nantong Institute of Technology, Nantong, 226001, Jiangsu, China. 843731114@qq.com.
Scientific reports
|December 17, 2025
まとめ
本研究では、空間情報と周波数情報を利用して特徴抽出を強化する顔表情認識(FER)のための新しいネットワークSPAYOLOを紹介します。このモデルは、リアルタイムアプリケーションで計算効率を維持しながら、ベンチマークデータセットで高い精度を達成します。
科学分野:
- コンピュータビジョン;感情コンピューティング;機械学習
背景:
- 顔表情認識(FER)は重要ですが、現在の方法では計算上の課題と特徴抽出の制限があります。;既存のFERモデルは、微妙な空間的および周波数ベースの識別特徴を効果的に捉えるのに苦労しています。
主な方法:
- 空間的特徴のための階層的受容野モデリング(HRM)と周波数特徴のための高速フーリエ変換(FFT)を使用した周波数強化パス(FEP)を統合したスペクトル認識知覚および集約モジュール(SPAM)を開発しました。;空間的および周波数的特徴の適応的融合のためのゲート付きアテンションメカニズム(GAM)を実装し、安定性を向上させました。;提案されたSPAYOLOネットワークのベースとしてYOLOv8アーキテクチャを利用しました。
結論:
- SPAYOLOは、顔表情認識のための計算効率が高く正確なソリューションを提供します。;提案されたSPAMモジュールは、空間ドメインと周波数ドメインの情報を効果的に統合し、FERパフォーマンスを向上させます。;調査結果は、コンピュータビジョンと感情コンピューティングの将来の研究に貴重な洞察を提供します。
関連する概念動画
Association Areas of the Cortex
8.7K
Association areas are regions of the cerebral cortex that do not have a specific sensory or motor function. Instead, they integrate and interpret information from various sources to enable higher cognitive processes such as memory, learning, and decision-making. Some key association areas include the following:
Prefrontal Association Area: This area is located in the frontal lobe and is involved in planning, decision-making, and moderating social behavior. It connects with primary motor areas,...
Prefrontal Association Area: This area is located in the frontal lobe and is involved in planning, decision-making, and moderating social behavior. It connects with primary motor areas,...
8.7K
Facial Feedback Hypothesis
532
Charles Darwin proposed that facial expressions are an evolutionary adaptation for communication. He argued that these expressions are not influenced by culture but are universal across species. For example, a snarling expression with exposed teeth signals a threat in many animals, including humans. Darwin also suggested that displaying an emotion can intensify the feeling. Smiling, for example, could enhance one's sense of happiness. This idea laid the foundation for understanding the role...
532
Muscles for Facial Expressions
4.6K
The craniofacial muscles are a collection of approximately 20 thin skeletal muscles situated beneath the skin of the face and scalp. These muscles, primarily responsible for the vast array of human facial expressions, originate from the bones or fibrous structures of the skull and extend outwards to connect with the skin. While most skeletal muscles in the body are enveloped in thick fascia, facial muscles generally have a more delicate fascial covering, with the buccinator muscle being a...
4.6K
IR Frequency Region: Fingerprint Region
1.8K
IR spectra are divided into two main regions: the diagnostic region and the fingerprint region. The diagnostic region of the spectrum lies above 1500 cm−1. The absorptions resulting from single-bond vibrations of the N–H, C–H, and O–H stretch at higher wavenumbers and appear on the left side of the spectrum. The stretching absorptions of the C≡C and C≡N occur between 2100–2300 cm−1. In contrast, those arising from stretching absorptions of the...
1.8K


