査読における著者バイアスの存在のテスト
査読プロセス中の盲検化については、生物医学雑誌の間でコンセンサスが存在しません。 ジャーナルの中には、査読のために査読に提出する前に潜在的な原稿から著者のすべての識別子を削除しようとするジャーナルもあれば、著者を透明にしておくことを好むジャーナルもあります。 査読は依然として原稿評価のゴールド スタンダードですが、編集局間の標準化された盲検化プロセスの欠如は、出版バイアスの原因となり、異なるジャーナルに掲載された原稿の比較を解釈することをより困難にする可能性があります。
盲検査読システムの支持者は、著者の知識が、著者の以前の研究、認識された専門知識、機関、国籍、または性別に関する偏見に対して査読者を無防備にする可能性があると信じています. これは、科学的研究のメリットから判断をそらし、著者の身元と背景に関する先入観をレビュー プロセスに導入します。 逆に、透明性のある著者の支持者は、著者の身元を知ることで、査読者がより適切な批評を提供しやすくなると主張しています。 公開著者識別により、査読者は現在の原稿を著者による以前に出版された研究と比較し、潜在的に重要な利益相反を認識または識別することができます。
したがって、研究者は、盲検化が査読者が査読されている研究の受け入れを推奨する可能性に影響を与えるかどうかという問題に対処するための実験的研究を提案しています。 研究者はジャーナルと協力して、でっち上げの原稿を多数の査読者に査読してもらう計画を立てています。著者は、この「テスト」原稿をブラインド形式(著者の名前/機関は査読者に表示されません)または公開形式で、著名で評価の高い著者とその機関の名前を査読者に表示して送信します。 . それ以外の場合、原稿は同一になります。
パートナー ジャーナルである Clinical Orthopaedics and Related Research では、オープン ピア レビューとブラインド ピア レビューの両方を許可しており、定期的に両方のアプローチを採用しています (著者は、CORR に投稿する際に、どちらの種類のレビューを好むかを選択できます)。いずれかの形式の原稿。
この研究の主な目的は、著名な著者グループ (オープンオーサーシップ) を持つ原稿の識別が、査読者がその原稿を出版に推薦する可能性に影響するかどうかを判断することです。
さらに、研究者は原稿に意図的にいくつかの誤りを置き、査読者がこれらの間違いを検出する頻度を集計して、査読者が著名な著者の作品をそれほど批判的に読んでいないかどうかを判断することを計画しています.
研究者はまた、(同一の)方法セクションの査読者の採点を比較して、著名な著者による原稿の識別が方法論的厳密さについてより高い査読者の採点をもたらすかどうかを判断します。
この調査では、次の特定の仮説を検証します。
- テスト原稿の著名な著者名と機関の可視性は、原稿が査読者によって出版を推奨される可能性が高くなることに関連しています。 (一次試験エンドポイント)
- 著名な著者名と機関の可視性は、実験原稿に意図的に配置された「エラー」が査読者によって検出される可能性の減少と関連しています。
- 著名な著者名と機関の可視性は、実験原稿の方法セクションが同一であるという事実にもかかわらず、方法セクションの査読者によって与えられるスコアの増加に関連付けられます。
ノート:
研究プロトコールのすべての要素は、評価した論文が研究の一部であることを査読者が知らないことが重要であると考えられたため、査読者募集のための研究のオプトアウト設計を含め、ワシントン大学のヒト被験者審査委員会によって承認されました。 危害の可能性を最小限に抑えるために、著者は、査読者自身のセンター (手術室での特定のチームトレーニングプロセス) ではすぐに実践できない介入を、偽造されたテスト原稿のトピックとして選択しました。 また、参加した査読者は、データ収集の完了時にどの論文がテスト原稿であるかが通知されたため、捏造された研究の結果に基づいてこの種のチームトレーニングを行うことはありませんでした.
オブザーバー (ホーソン) 効果のリスクを軽減するために、参加者のレビュアーが進行中に研究について知る可能性を最小限に抑えることが重要でした。 この目的のために、研究者は試験レジストリに研究を事前登録しないことを選択しました。
調査の概要
研究の種類
入学 (実際)
段階
- 適用できない
参加基準
適格基準
就学可能な年齢
健康ボランティアの受け入れ
受講資格のある性別
説明
包含基準:
- CORR のレビュアー データベースの関連サブスペシャリティ セクションに登録されたピア レビュアー。
除外基準:
- オプトアウトするレビュアー (電子的、電話、または郵送)。
研究計画
研究はどのように設計されていますか?
デザインの詳細
- 主な目的:ヘルスサービス研究
- 割り当て:ランダム化
- 介入モデル:並列代入
- マスキング:ダブル
武器と介入
参加者グループ / アーム |
介入・治療 |
|---|---|
|
実験的:盲目のレビュアー
レビューのために無作為化された偽原稿を受け取った被験者
|
偽原稿の盲検版
|
|
実験的:非盲検のレビュアー
レビューのために無作為化された偽原稿を受け取った被験者
|
偽原稿の非盲検版
|
この研究は何を測定していますか?
主要な結果の測定
結果測定 |
時間枠 |
|---|---|
|
原稿採択率
時間枠:13ヶ月
|
13ヶ月
|
二次結果の測定
結果測定 |
時間枠 |
|---|---|
|
エラー検出率
時間枠:13ヶ月
|
13ヶ月
|
|
メソッドセクションのスコア
時間枠:13ヶ月
|
13ヶ月
|
協力者と研究者
スポンサー
捜査官
- 主任研究者:Seth L Leopold, MD、University of Washington
出版物と役立つリンク
一般刊行物
- van Rooyen S, Godlee F, Evans S, Black N, Smith R. Effect of open peer review on quality of reviews and on reviewers' recommendations: a randomised trial. BMJ. 1999 Jan 2;318(7175):23-7. doi: 10.1136/bmj.318.7175.23.
- McNutt RA, Evans AT, Fletcher RH, Fletcher SW. The effects of blinding on the quality of peer review. A randomized trial. JAMA. 1990 Mar 9;263(10):1371-6.
- Justice AC, Cho MK, Winker MA, Berlin JA, Rennie D. Does masking author identity improve peer review quality? A randomized controlled trial. PEER Investigators. JAMA. 1998 Jul 15;280(3):240-2. doi: 10.1001/jama.280.3.240. Erratum In: JAMA 1998 Sep 16;280(11):968.
- Fisher M, Friedman SB, Strauss B. The effects of blinding on acceptance of research papers by peer review. JAMA. 1994 Jul 13;272(2):143-6. Erratum In: JAMA 1994 Oct 19;272(15):1170.
- Emerson GB, Warme WJ, Wolf FM, Heckman JD, Brand RA, Leopold SS. Testing for the presence of positive-outcome bias in peer review: a randomized controlled trial. Arch Intern Med. 2010 Nov 22;170(21):1934-9. doi: 10.1001/archinternmed.2010.406.
- Okike K, Hug KT, Kocher MS, Leopold SS. Single-blind vs Double-blind Peer Review in the Setting of Author Prestige. JAMA. 2016 Sep 27;316(12):1315-6. doi: 10.1001/jama.2016.11014. No abstract available.
研究記録日
主要日程の研究
研究開始
一次修了 (実際)
研究の完了 (実際)
試験登録日
最初に提出
QC基準を満たした最初の提出物
最初の投稿 (見積もり)
学習記録の更新
投稿された最後の更新 (見積もり)
QC基準を満たした最後の更新が送信されました
最終確認日
詳しくは
この情報は、Web サイト clinicaltrials.gov から変更なしで直接取得したものです。研究の詳細を変更、削除、または更新するリクエストがある場合は、register@clinicaltrials.gov。 までご連絡ください。 clinicaltrials.gov に変更が加えられるとすぐに、ウェブサイトでも自動的に更新されます。