Innovative Tech
「査読前論文は信用できない」はどこまで本当か? 査読前後での内容の変化、7万件の分析結果は
Innovative Tech:
2019年にスタートした本連載「Innovative Tech」は、世界中の幅広い分野から最先端の研究論文を独自視点で厳選、解説する。執筆は研究論文メディア「Seamless」(シームレス)を主宰し、日課として数多くの論文に目を通す山下氏が担当。イラストや漫画は、同メディア所属のアーティスト・おね氏が手掛けている。X:@shiropen2
ウェスタン大学と南カリフォルニア大学に所属する研究者らが発表した論文「Tracking claim changes from preprint to publication across 72,644 biomedical studies using large language models」は、プレプリント(査読前論文)の信頼性を検証した研究報告だ。
査読前の論文を公開するプレプリントは、研究内容をいち早く世界中に無料共有できるメリットがあり、プレプリント公開サイト(arXivやbioRxivなど)で膨大な件数が日々公開されている。しかし、査読を経ていないことから、その主張の信頼性を疑問視する声も一部に存在する。
そこで研究チームは、18年から25年の間にbioRxivに投稿され、その後査読済み論文として出版された7万2644件の論文ペアを対象に、大規模言語モデル(Claude Sonnet 4.6)を用いてその内容の変化を追跡した。
分析の結果、査読によって論文の主要な主張が大きく覆るケースは稀であることが判明した。抄録における主要な主張の内容は、全体の39.9%で変化がなく、50.0%が軽微な修正にとどまっており、大幅な修正が加えられたのは10.2%であった。
表現の確信度合いについて調べたところ、全体の85.6%は査読前後で変化がなかった。表現に変化があったものの中では、より慎重な表現になった割合が8.4%、より自信に満ちた表現になった割合が4.2%であり、査読を通じて論文の主張が2倍の割合で慎重なトーンへと修正されていることがわかる。
さらに、査読期間の長さやジャーナルの影響力と修正の度合いには関連が見られた。査読期間が最も短いグループでの大幅な修正の割合は7.0%だったのに対し、最も長いグループでは14.1%に上昇した。
また、プレプリントとして公開されたかどうかが、その後の論文撤回率に与える影響も調査された。その結果、プレプリントとして公開されたことのない論文は1万件あたり18.7件の割合で撤回されたのに対し、プレプリントとして公開された論文の撤回率は1万件あたり8.1件であった。つまり、プレプリントを経由しなかった論文は、経由した論文の約2倍の確率で撤回されていることになる。
Source and Image Credits: Yin, H., & Rust, R. (2026). Tracking claim changes from preprint to publication across 72,644 biomedical studies using large language models. bioRxiv. https://doi.org/10.64898/2026.06.30.735556
Copyright © ITmedia, Inc. All Rights Reserved.
Innovative Tech
2019年にスタートした本連載「Innovative Tech」は、世界中の幅広い分野から最先端の研究論文を独自視点で厳選、解説している。執筆は研究論文メディア「Seamless」(シームレス)を主宰し、日課として数多くの論文に目を通す山下氏が担当。イラストや漫画は、同メディア所属のアーティスト・おね氏が手掛けている。
この記事の著者
関連記事
こんなメディアも見られています
ITmedia NEWSに関連する情報をお探しであれば、こちらのメディアもお役に立てるかもしれません。
SpecialPR
本日の新着記事
アクセスランキング
-
1
Hugging Face侵害事件、OpenAIとMETRが最終報告書公開──約1200体のAIエージェントが“闇掲示板”で結託し700体が攻撃に参加
-
2
ダサいスライド資料を作る大会が開催中 応募フォームもダサい
-
3
「FANZAスタジオ」爆誕へ 成人向けAIマンガに違和感を覚えるマンガ家も期待する部分とは?
-
4
FANZA、成人向けAI創作・公開サービス「FANZAスタジオ」発表 先行体験は8月24日から
-
5
大人向け「スーパーカー自転車」は和テイストだった リトラクタブルライトにRFID認証など装備満載
-
6
OpenAI、Cursorへのモデル提供を11月12日に終了 SpaceXによる買収が理由
-
7
電車にスマホ貼り付け、ホーム全力疾走の様子を撮影……TikTokerの動画が物議 衣服ブランドの宣伝目的か
-
8
Anthropic、AIで物理機器を制御する共通規格「MHS」発表 将来オープンソース化へ
-
9
動画カメラは混沌の時代へ? ミラーレス一眼へ乗り出すアクションカムメーカーも現れた2026年前半の業界動向
-
10
Hugging Face、あひる型ロボット「Microduck」発表 399ドルで予約開始
ITmedia NEWS SNS
インフォメーション
注目情報をチェック
ITmediaNEWSをフォロー
あなたにおすすめの記事PR