UAVベースのマルチスペクトル物体検出のためのクロスモーダルエッジ強化検出器

科学分野:

• コンピュータビジョン
• リモートセンシング
• 人工知能

背景:

• 無人航空機（UAV）ベースのマルチスペクトル物体検出は、スマートシティの交通管理と災害対応にとって非常に重要です。
• 既存の方法では、赤外線画像のエッジのぼやけが見過ごされることが多く、前景と背景の区別と物体検出の精度が複雑になっています。

研究 の 目的:

• UAVベースのマルチスペクトル物体検出における課題に対処するために、新しいクロスモーダルエッジ強化検出器を開発すること。
• エッジ特徴を強化することにより、悪条件下での物体検出の堅牢性と精度を向上させること。

主な方法:

• 差分畳み込みを使用したエッジ特徴強化モジュールを提案し、赤外線画像内の物体エッジをシャープにします。
• 拡大畳み込みを使用したマルチスケール特徴融合モジュールを実装し、さまざまなサイズの物体を検出し、解像度の変化に適応させます。
• 視覚スペクトルと赤外線スペクトルの相補的な情報を効果的に融合するために、自己注意メカニズムを使用したクロスモーダル特徴融合モジュールを導入しました。

主要な成果:

• 提案されたCMEE-Detはエッジ特徴を大幅に強化し、物体と背景の区別を改善します。
• このモデルは、さまざまなスケールの物体の検出とUAVの飛行ダイナミクスへの適応において優れたパフォーマンスを示します。
• 実験結果は、CMEE-DetがDroneVehicleのようなベンチマークデータセットで既存の方法を上回ることを示しています。

結論:

• 新しいクロスモーダルエッジ強化検出器は、UAVベースのマルチスペクトル物体検出における既存の方法の制限を効果的に対処します。
• エッジ強化とマルチモーダル融合戦略の統合により、より堅牢で正確な物体検出機能が実現します。
• この研究は、マルチスペクトルUAV画像からの信頼性の高い物体検出を必要とするアプリケーションに有望な進歩を提供します。