OmniHD-Scenes: 次世代自動運転向けマルチモーダルデータセット

科学分野:

• コンピュータビジョン
• ロボティクス
• 人工知能

背景:

• 自動運転向けのディープラーニングには、広範で高品質なマルチモーダルデータセットが必要です。
• 現在のデータセットは、次世代システムに必要な包括的なデータカバレッジと詳細なアノテーションを欠いていることがよくあります。
• 高度なセンサーと多様なシーン表現は、効果的な自動運転ソリューションに不可欠です。

研究 の 目的:

• 自動運転研究向けの Лаarge-scaleマルチモーダルデータセットであるOmniHD-Scenesを紹介します。
• 複数の高度なセンサーからの包括的な全方向高精細データを提供します。
• 3D検出およびセマンティック占有予測のベンチマークと評価指標を確立します。

主な方法:

• OmniHD-Scenesデータセットは、128ビームLiDAR、6台のカメラ、6台の4Dイメージングレーダーシステムからのデータを統合しています。
• 正確な3Dバウンディングボックスとセマンティックセグメンテーションを含む、新しい4Dアノテーションパイプラインが開発されました。
• キーフレーム以外のフレームを活用した、密な占有グラウンドトゥルース生成のための自動パイプラインが導入されました。

主要な成果:

• データセットは、1501個のクリップと450K以上の同期フレーム、5.85M以上の同期センサーデータポイントで構成されています。
• 200個のクリップは、514K以上の3Dバウンディングボックスとセマンティックセグメンテーションでアノテーションされています。
• 実験により、低コストのセンサー構成とその悪条件下での堅牢性の有効性が検証されました。

結論:

• OmniHD-Scenesは、自動運転アルゴリズムの開発とテストのための貴重なリソースを提供します。
• このデータセットは、サラウンドビューカメラと4Dイメージングレーダーを使用した費用対効果の高いセンサーソリューションの研究をサポートします。
• 提案されたベンチマークとメトリクスは、3D検出およびセマンティック占有予測の進歩を促進します。