形状認識型クロスモーダル領域適応型セグメンテーションモデル

科学分野:

• 医用画像解析
• コンピュータビジョン
• 人工知能

背景:

• クロスモーダル教師なしドメイン適応（UDA）は、形状事前情報と中間特徴の利用不足による一般化能力の制限に苦労しています。
• クロスモーダルセグメンテーションにおける既存の方法は、グローバルおよびローカル情報を効果的に捉えられず、パフォーマンスに影響を与えることがよくあります。

研究 の 目的:

• クロスモーダルUDAパフォーマンスを向上させるための新しいセグメンテーションモデル、形状認識型適応重み付け（SAWS）を提案すること。
• セグメンテーションを改善するために、モデルのターゲット領域認識能力を高め、グローバルおよびローカル情報の両方を捉えること。

主な方法:

• 角度プーリングを使用して形状特徴を複数の方向から捉えるための、マルチアングルストリップ形状認識（MSSP）モジュールを開発しました。
• 中間特徴を活用し、小さな構造のセグメンテーションを改善するために、適応重み付け階層的コントラスト（AWHC）損失を導入しました。
• クロスモーダル心臓セグメンテーションのために、マルチモーダル全心臓セグメンテーション（MMWHS）データセットでSAWSモデルを評価しました。

主要な成果:

• SAWSモデルは、クロスモーダル心臓セグメンテーションタスクにおいて優れた性能を達成しました。
• CT→MRIでは、SAWSは70.1%のダイススコアと4.0の平均対称表面距離（ASSD）を達成しました。