関連する実験動画
診断システムの精度を測定する
1BBN Laboratories Incorporated, Cambridge, MA 02238.
まとめ
相対操作特性 (ROC) は,意思決定バイアスに影響を受けることなく,診断精度の信頼性の高い尺度を提供します. しかし,試験データの品質は,さまざまな分野において報告された正確性値に対する信頼性に影響を及ぼします.
科学分野:
- 決定の分析 決定の分析
- シグナル検出理論
- 定量的な方法 定量的な方法
背景:
- 診断システムは,信号とノイズを区別する.
- 診断の正確性を評価することは,様々な分野において極めて重要です.
- 既存の測定は,意思決定バイアスや事前の確率によって影響を受けることがあります.
研究 の 目的:
- 診断の精度の堅実な尺度として,相対動作特性 (ROC) を導入する.
- ROCの意思決定バイアスや事前の確率からの独立性を実証する.
- 共通のスケールを使用して,さまざまなアプリケーションにおける診断精度を比較します.
主な方法:
- 信号検出理論と相対操作特性 (ROC) を用いた分析.
- 様々なテストシステムからの代表的なROC値のレビュー.
- 診断精度テストに影響を与えるデータ品質の問題の評価.
主要な成果:
- ROCは,診断精度の正確な,偏見のない測定手段を提供します.
- ROC分析は,医療イメージング,材料テスト,天気予報,情報検索,ポリグラフテスト,能力テストの性能比較を標準化しています.
- 試験データの品質は,測定された診断精度の信頼性に大きく影響します.
結論:
- 相対的な動作特性 (ROC) は,診断システムを評価するための優れたメトリックです.
- 診断の精度測定に対する信頼性は,その基礎となる試験データの品質に左右されます.
- すべての分野における精度評価の信頼性を向上させるために,標準化されたテストプロトコルが必要である.