エッジAIコンピューティングのためのイベントベースのマシンビジョン
Paul K J Park1,2, Junseok Kim1, Juhyun Ko1
1Samsung Electronics, Hwaseong 18448, Republic of Korea.
Sensors (Basel, Switzerland)
|February 13, 2026
まとめ
イベントベースのセンサーと効率的なAIアルゴリズムは,リアルタイムのスマートホームの認識を可能にします. このアプローチは,エッジデバイスのヒト検出,ポーズ推定,および手のジェスチャー認識のためのデータと計算を大幅に削減します.
科学分野:
- コンピュータビジョン コンピュータビジョン
- 物の人工知能 (AIoT) とは
- エッジコンピューティング エッジコンピューティング
背景:
- ダイナミック・ビジョン・センサ (DVS) のようなイベントベースのセンサは,低帯域幅の,常にオン状態の知覚に理想的な稀少な,運動中心のデータを提供します.
- リソースが制限されているエッジデバイスには,リアルタイムのAIタスクのための効率的なアルゴリズムが必要です.
研究 の 目的:
- スマートホームのAIoTアプリケーションのためのイベントベースの機械ビジョンフレームワークを開発する.
- 効率的な人間/オブジェクト検出, 2D 人間ポーズ推定,およびイベントデータを用いた手姿勢認識を可能にするために.
主な方法:
- タイムスタンプベースの,極性アグノスティックリセンシーエンコーディングを開発し,運動構造を保存し,背景騒音を軽減しました.
- アーキテクチャの削減と稀なイベント画像のための混合ビット定量化を通じて,タスク固有のニューラルネットワークを最適化します.
- 人体検知,ポーズ評価,手姿勢認識タスクの評価性能.
主要な成果:
- 原始DVSのデータストリームサイズは,従来のCMOSビデオと比較して約30倍減少しました.
- 人間の検出計算は11倍以上 (5.8Gから81MのFLOP) 減少し,ランタイムスピードが172msから15msに増加しました.
- ポーズ推定モデルのサイズは127MBから19MBに縮小され,推論時間は70msから6msに短縮され,高い精度を維持しました.
- 手の姿勢認識は99.19%のリコールを達成し,遅延時間は14.31msでした.
結論:
- イベントベースのセンシングと軽量な推論を組み合わせたイベントベースのセンシングは,エッジデバイスのプライバシーに配慮したリアルタイム認識のための実用的なソリューションです.
- 提案されたフレームワークは,スマートホームAIoTのデータ効率とコンピューティングパフォーマンスの有意な改善を示しています.
関連する概念動画
Vision
60.3K
Vision is the result of light being detected and transduced into neural signals by the retina of the eye. This information is then further analyzed and interpreted by the brain. First, light enters the front of the eye and is focused by the cornea and lens onto the retina—a thin sheet of neural tissue lining the back of the eye. Because of refraction through the convex lens of the eye, images are projected onto the retina upside-down and reversed.
60.3K
Color Vision
1.5K
Color perception begins in the retina, the light-sensitive layer at the back of the eye. Two main theories explain how colors are seen: the trichromatic theory and the opponent-process theory. The trichromatic theory, proposed by Thomas Young in 1802 and extended by Hermann von Helmholtz in 1852, suggests that color vision is based on three types of cone receptors in the retina. These cones are sensitive to different but overlapping ranges of wavelengths corresponding to red, blue, and green.
1.5K
Machines
581
Machines are complex structures consisting of movable, pin-connected multi-force members that work together to transmit forces. One example of a machine is the cutting plier, which is used to cut wires by applying forces to its handles. When equal and opposite forces are exerted on the handles of the cutting plier, they cause the cutting edges to come together and apply equal and opposite reaction forces on the wire, which are greater than the applied forces.
A free-body diagram of the...
A free-body diagram of the...
581
Machines: Problem Solving II
678
Machines are complex structures consisting of movable, pin-connected multi-force members that work together to transmit forces. Consider a lifting tong carrying a 100 kg load. It comprises movable sections DAF and CBG linked together with member AB.
678
Machines: Problem Solving I
727
A toggle clamp is a mechanical device commonly used for holding and clamping objects in various applications, such as woodworking, metalworking, and assembly operations. Consider a toggle clamp subjected to a force of 200 N at the handle. The vertical clamping force can be calculated, provided the dimensions of the toggle clamp are known.
The toggle clamp system is a machine structure consisting of movable, pin-connected multi-force members that form a stabilized system to transmit forces. The...
The toggle clamp system is a machine structure consisting of movable, pin-connected multi-force members that form a stabilized system to transmit forces. The...
727
Integration of Synaptic Events
4.2K
Synaptic integration mainly includes the summation of graded potentials. Graded potentials, regardless of their type, cause subtle alterations in membrane voltage, resulting in either depolarization or hyperpolarization. These incremental changes, when combined or summed, can propel the neuron toward its threshold. Consider, for example, a membrane experiencing a +15 mV shift, causing it to depolarize from -70 mV to -55 mV. In this scenario, graded potentials govern the membrane's ability to...
4.2K


