TransUTD: 水中クロスドメインの協働型時空変圧器検出器
Bingxun Zhao1, Xiao Han1, Ruihao Sui1
1School of Mechanical, Electrical & Information Engineering, Shandong University, Weihai, 264209, China.
まとめ
Transformer Underwater Spatial-Temporal Cross-domain Collaborative Detection (TransUTD) は,水中のオブジェクトの検出を改善するためにビデオシーケンスを利用しています. 水中のオブジェクトの検出を改善するためにビデオシーケンスを利用しています. 時間の情報を使用して劣化した画像を強化し,ベンチマークデータセットで最先端の結果を得ます.
科学分野:
- コンピュータビジョン コンピュータビジョン
- ロボット工学 ロボット工学 ロボット工学
- 海洋技術技術について
背景:
- 水中のオブジェクト検出は,画像の品質が劣化しているため,課題に直面しています.
- シングルフレームまたは共同強化/検出を使用する既存の方法は,限界があります.
- ビデオシーケンスからの時間的な情報は,検出を改善するための有望な解決策を提供します.
研究 の 目的:
- 空間時間情報を利用した水中物体の強力な検出のための新しいフレームワーク,TransUTDを導入する.
- 時間の文脈的なモデリング問題として,水中劣化した特徴の表現を再構成する.
- 手作りモジュールを排除することで検出パイプラインを簡素化します.
主な方法:
- トランスフォーマー水中空間時間クロスドメイン協同検出 (TransUTD) を提案する.
- 拡張された意味表現のために,マルチフレームの機能を集約するために,時空融合エンコーダーを使用します.
- 複雑な水中シーンにおける精巧なローカライゼーションのための空間時間的なクエリインタラクションを活用する.
- テンポラル・ハイブリッド・コラボレーティブ・デコーダーを実装し,テンポラル・ポジティブ・クエリによる密度の高い監視を行う.
主要な成果:
- TransUTDは,水中物体検出において最先端の性能を達成しています.
- DUOでは1.5%,UVIDのデータセットでは1.9%のAP改善が実証されました.
- ImageNetVIDでは86.0%のAP50で最先端に近いパフォーマンスを達成しました.
結論:
- TransUTDは,水中画像の特徴の劣化を補うために時空情報を効果的に利用します.
- 提案された方法は,検出パイプラインを簡素化し,優れた性能を達成します.
- UVIDデータセットの導入は,水中ビデオオブジェクト検出に関するさらなる研究を促進します.
関連する概念動画
Continuous -time Fourier Transform
957
The Fourier series is instrumental in representing periodic functions, offering a powerful method to decompose such functions into a sum of sinusoids. This technique, however, necessitates modification when applied to nonperiodic functions. Consider a pulse-train waveform consisting of a series of rectangular pulses. When these pulses have a finite period, they can be accurately represented by a Fourier series. Yet, as the period approaches infinity, resulting in a single, isolated pulse, the...
957
Uniform Depth Channel Flow: Problem Solving
543
To calculate the flow rate for a trapezoidal channel, first, identify the bottom width, side slope, and flow depth of the channel. The cross-sectional area (A) corresponding to the depth of flow (y), channel bottom width (B), and side slope (θ) is determined by:Next, calculate the wetted perimeter, which includes the bottom width and the sloped side lengths in contact with the water. Using the values of the cross-sectional area and the wetted perimeter, determine the hydraulic radius by...
543


