関連する実験動画

同じ2つの手稿の複数の盲目レビュー. 審判の特徴と出版言語の影響

M Nylenna¹, P Riis, Y Karlsson

¹Journal of the Norwegian Medical Association, Lysaker.

|July 13, 1994

まとめ

経験豊富な審査員と若い審査員は,より厳格に原稿を評価します. 英語の原稿版は国語版よりも高い評価を得ており,ピアレビューにおいて言語のバイアスの可能性を示している.

科学分野:

ビビロメトリクス (Bibliometrics) とは
学術コミュニケーション
ピアレビューはピアレビューです.

背景:

手稿の評価に影響を与える要因を理解することは,科学的完全性にとって極めて重要です.
裁判官の特徴と原稿の言語は,ピアレビューの結果に影響を与える可能性があります.

研究の目的:

裁判官の特徴と原稿の評価との関連を調査する.
裁判官の判断に対する原稿言語の影響を判断する.
ピアレビューにおけるフリーテキストコメントの品質と有用性を評価する.

主な方法:

180人のスカンジナビアの裁判官に,方法論的な欠陥のある2つの現実的な原稿が送られました.
手稿は,英語版と国語版でランダムに選択されました.
裁判官の特徴と品質評価 (5点スケール) は,複数の線形回帰を用いて分析されました.

主要な成果:

裁判官の経験の増加は,質の低いスコア (P < .05) と相関していた.
若いレファリーは,より厳格な評価をする傾向がありました (P < .05).
手稿の英語版は,国語版よりも高い評価を受けました (P < .05).
方法論的な欠陥に関するフリーテキストのコメントは,しばしば存在しないか不完全であった (34%のコメントが欠けていた).

結論:

裁判官の経験と年齢は,原稿の審査の厳しさに大きな影響を与えます.
手稿言語はバイアスを導入し,英語版はより好意的にレビューされます.
ピアレビューでは,より詳細で建設的なフリーテキストコメントが必要である.

関連する概念動画