ピアレビューを評価する. 格付け器具のパイロットテスト
I D Feurer1, G J Becker, D Picus
1Journal of Vascular and Interventional Radiology, Nashville, TN.
JAMA
|July 13, 1994
まとめ
この研究は,ピアレビューの質を評価するための信頼できる格付けツールを開発しました. このツールは,強力なインターレーター信頼性と予備的な有効性を実証し,編集者による使用を支持しました.
科学分野:
- 医学書と科学コミュニケーション.
- 研究の完全性と質の評価.
背景:
- ピアレビューの質を評価することは,科学的厳格性を維持するために極めて重要です.
- ピアレビューの一貫性と客観的な評価を確保するために,標準化されたツールが必要です.
研究 の 目的:
- 編集者向けに設計された新しい格付けツールの信頼性と予備的な有効性を評価する.
- 編集者に,ピアレビューの質を評価するための構造化された方法を提供する.
主な方法:
- 23本の原稿から53件のピアレビューの連続したサンプルを使用した.
- インターレーターの信頼性は,クラス内相関係数とANOVA (n=41) を使用してテストされました.
- 予備的な基準関連有効性は,ケンドールのコンコンダンス係数 (n=12) を用いて評価されました.
主要な成果:
- 格付け器具は,高レベルのインターレーター信頼性 (イントラクラス相関係数 = 0.84,P < .001) を示した.
- バリアンス分析は,平均スコアにおける有意な差異を示さなかった (P = .46).
- 予備的な基準に関連する有効性は示されました (ケンドールの一致係数 = 0.94,P = 0.038).
結論:
- 開発された格付け器具は,ピアレビューの質を評価する上で信頼性が高い.
- コンテンツの検証は完了し,さらなる基準関連の検証が推奨されています.
- このツールは,編集者がピアレビュー評価を強化するための有望なツールを提供します.
関連する概念動画
01:29Self-Evaluation Maintenance Model
The Self-Evaluation Maintenance (SEM) model offers a psychological framework to understand how individuals’ self-esteem is influenced by the achievements of others, particularly those with whom they share close personal bonds. The SEM model operates when personal rather than social identity guides individuals. Central to this model is the notion that individuals have an inherent desire to preserve a favorable self-image, which is continuously shaped by interpersonal comparisons and...
01:24Sources of Self-Esteem II: Performance Feedback
Self-esteem is intricately tied to our perception of competence and our ability to exert control over our lives. One of the primary sources of this perception is performance feedback — the ongoing evaluation of our actions in terms of success and failure. According to Franks and Marolla (1976), people derive self-worth from experiencing themselves as causal agents, capable of achieving goals and overcoming obstacles. This process nurtures a critical component of self-esteem: self-efficacy,...