SurgLaVi: 外科の視覚言語表現学習のための大規模な階層データセット
Alejandra Perez1, Chinedu Nwoye2, Ramtin Raji Kermani2
1Intuitive Surgical, Inc., Sunnyvale, CA, United States; Center for Research and Formation in Artificial Intelligence (CinfonIA), Universidad de los Andes, Bogotá, Colombia.
Medical image analysis
|February 20, 2026
まとめ
研究者は,手術ビデオのAI理解を改善するために,大規模な外科視野言語データセットであるSurgLaViを開発しました. このデータセットにより,よりよい外科ワークフロー分析と,より優れた外科ケアのためのAIモデルトレーニングが可能になります.
科学分野:
- コンピュータビジョン コンピュータビジョン
- 人工知能 (AI) とは,人工知能 (AI) のことです.
- 医療情報工学 医療情報工学
背景:
- 視覚言語の予備訓練 (VLP) は,外科ビデオ分析の有望性を示しているが,小さな,多様性のないデータセットによって制限されている.
- 既存の外科VLPデータセットには,スケール,手順の多様性,意味の深さ,階層的な構造が欠けている.
研究 の 目的:
- "SurgLaVi"は,最大かつ最も多様性の高い外科視覚言語データセットです.
- 手術のワークフローの理解と一般化のための高度なAIモデルを有効にします.
- より広範な研究のために,アクセス可能なオープンソースのデータセット (SurgLaVi-β) を提供します.
主な方法:
- 精細な外科ビデオトランスクリプションとセグメンテーションを生成するための完全に自動化されたパイプラインを開発しました.
- 高品質で,意味学的に豊かな注釈を確保するために,実装された二次モードフィルタリング.
- データセットの有用性を評価するために,CLIPスタイルのビデオ・テキスト対照的フレームワークであるSurgCLIPを作成しました.
主要な成果:
- SurgLaViには,階層的な注釈を持つ200以上の手順で約240kのクリップ-キャプションペアが含まれています.
- SurgLaVi-βは,公開データから113kのクリップ・キャプション・ペアを提供しており,以前のデータセットよりも大幅に大きい.
- SurgCLIPは,手術段階,ステップ,アクション,およびツール認識において大幅な改善を示しました.
結論:
- 大規模で,意味学的に豊かで,階層的に構造化されたデータセットは,堅牢な外科AIの開発に不可欠です.
- SurgLaViは,外科基礎モデルとAI主導の外科アプリケーションの進歩のための重要なリソースです.
- このデータセットは,外科ビデオ分析における理解と一般化の改善を促進します.
関連する概念動画
Genetic Lingo
Overview
Higher Mental Functions of the Brain: Language
Language is a system of communication that allows the expression of thoughts, ideas, and feelings. The brain processes language in both hemispheres.
Language formation and comprehension take place in the dominant hemisphere. The dominant hemisphere is responsible for understanding the meaning of spoken, written, or sign language, as well as the ability to communicate. For most people, the left hemisphere is the dominant one. The right hemisphere, then, gives tone and emotional context to the...
Language formation and comprehension take place in the dominant hemisphere. The dominant hemisphere is responsible for understanding the meaning of spoken, written, or sign language, as well as the ability to communicate. For most people, the left hemisphere is the dominant one. The right hemisphere, then, gives tone and emotional context to the...
Introduction to Language of Pathophysiology l
Pathophysiology investigates how biological mechanisms—typically starting at the cellular level—disrupt normal bodily functions. It bridges anatomy and physiology to explain the progression of disease. With this foundation, it is important to understand the following key terms used to describe disease processes: Diagnosis:The process of identifying a disease using clinical evaluation, including signs (objective evidence like rashes), symptoms (subjective experiences like pain), laboratory test...
Introduction to Language of Pathophysiology ll
This lesson explores key terms that describe how diseases progress, their outcomes, and their distribution in populations.Diagnostic tests identify diseases and monitor treatment. These include blood and urine tests, biopsies, imaging (X-ray, MRI), and detection of infectious agents.Remission is a reduction or disappearance of symptoms.Exacerbation refers to the worsening of symptoms, such as increased wheezing during an asthma attack.A precipitating factor triggers an acute episode, while a...


