Takeshi Ikemoto

医療 × 経営 × テクノロジー

·朝便 1本目·

AIの架空引用が医学論文に急増——12倍の発生率が示す、科学インフラの穴

PubMedCentralTheLancetAIの幻覚医学論文

AIが自然に見える架空引用を大量生成できるようになったが、科学の検証の仕組みはその前提で設計されていません。問題は論文の質ではなく、引用確認が査読(専門家による事前審査)に含まれていないことです。

一言で言うと

査読(同分野の専門家による事前審査)は、論文の論理を検証するプロセスです。引用文献が実在するかを体系的に確認するプロセスは、そこに含まれていません。AIが見分けのつかない架空引用を大量に生成できるようになったが、科学の検証の仕組みはその前提で設計されていない。それがこの問題の本質です。

何が起きているのか

コロンビア大学のMaxim Topaz氏らが、医学論文データベースPubMed Centralに収録された247万本の生物医学論文(2023年1月〜2026年2月)の引用文献を調査した結果を、医学誌『The Lancet(ランセット)』に発表しました。同種の調査として過去最大規模です。

9710万件の引用を、PubMed・Crossref・OpenAlex・Google Scholarの4つのデータベースと照合した結果、4,046件が架空の引用と判定されました。判定基準は「タイトルが4つのDBのいずれにも存在しない」こと。影響を受けた論文は2,810本です。

件数より注目すべきは増加の速度です。2023年を通じて「論文1万本に対し約4件」だった架空引用の発生率は、2025年末には51.3件、2026年初頭の7週間では56.9件に達しました。2023年比で12倍超の上昇です。

この急増とChatGPTなどの言語モデルが2022年末から普及した時期には相関があります。論文の投稿から掲載まで通常100〜200日かかるため、2022年末からAIを使って書かれた論文が大量にデータベースに現れ始めたのは2024年半ばで、架空引用の急増タイミングと一致します。

架空引用が見分けにくい理由の一つは偽造の精度にあります。ある泌尿器科の論文では、確認した30件の引用のうち18件が架空でした。いずれも論文のテーマに沿った内容で、実在する研究者の名前が使われ、引用フォーマットも正しいものでした。

調査時点で、影響を受けた論文の98.4%に対して出版社からの対応はなかったと報告されています。

AI業界の文脈では

「査読があるから科学論文は信頼できる」という前提が広く共有されています。その前提に立てば、今回の問題は「査読が機能しなかった粗悪な論文が混じっている」という話になります。

しかしそこには見落としがあります。査読とは本来、論文の論理・方法・結果の整合性を審査するプロセスです。引用先が本当に存在するかを一件ずつデータベース照合する工程は、通常の査読に含まれていません。査読者は多くの場合、関連研究を熟知しているからこそ文脈の怪しさに気づける、という前提で機能してきました。

ところが「関連トピックに沿い、正しいフォーマットで、実在する著者名を使い、もっともらしい出版年を持つ」架空引用をAIが自動生成できる環境では、この前提は成立しません。専門家であっても、文脈上自然に見える引用を疑うのは難しい。

もう一つ目立つのは、レビュー論文(複数の研究を統合・評価するタイプの論文)での架空引用率が他の論文より57%高かった点です。レビュー論文は治療指針(クリニカルガイドライン)の根拠として使われることが多く、そこに架空引用が入り込むと、医療上の意思決定を支える証拠の連鎖そのものが汚染されます。

私の見立て

今回の本質は、規模の問題と設計の問題の二つが重なっている点にあると思います。

規模の問題について言うと、9710万件の引用を人の手で確認することは不可能です。引用確認を自動化する仕組みがなければ、大量の架空引用が通過しても気づきようがありません。

設計の問題について言うと、現在の学術出版の仕組みは「著者が誠実に引用する」という前提で動いています。論文を手元にコピーして読み、実際に読んだ文献だけを引用欄に書く——執筆者自身が確認するのが基本だったから、存在しない論文名をそのまま載せることは、通常の執筆では起こりませんでした。

ところが情報収集をAIに頼むと、この確認が飛ばされやすくなる。AIは体裁の整った引用リストを返すが、中身が存在しない文献が混ざることが多い。著者が一件ずつデータベースで確認しない限り、そのまま流れ込む。

この二つが重なると、架空引用の検出は「できるが手間がかかる仕事」から「自動化なしには実質不可能な仕事」に変わります。出版社が98.4%の論文に対応できていないのは怠惰ではなく、対処のインフラが存在していないからだ、と読むのが妥当でしょう。

オープンソースの自動引用確認ツール「CiteAudit」のような取り組みは始まっていますが、商用の言語モデル自体が「自分が生成した架空引用を検出するのが不得意」という報告もあります。問題を生み出した技術と同じものを使って問題を検出しようとする、構造的な難しさがあります。

一点補足しておくと、今回の調査論文の著者自身が「コードの開発と文法確認にClaudeを使用した」と明記しています。架空引用の問題を告発する論文の執筆にもAIが使われている、という事実は、問題の対策がいかに複雑かをよく示しています。

→ 何が変わるか: 医療や生命科学の領域で論文を根拠に意思決定するとき、引用先の実在確認を人力・自動のどちらかで行う工程が、論文提出・査読のプロセスに組み込まれていくと思います。Topaz氏らが医学誌『The Lancet(ランセット)』に報告した今回の大規模調査は、その動きを加速させる可能性があります。

→ 何をすべきか: AIを使って論文やレポートを書く場合、引用文献は必ず元のデータベース(PubMed・Google Scholar等)で実在を確認してから記載することを勧めます。「AIが提示してくれた引用をそのまま使う」ことは、今後もっとも注意を要する行動の一つです。AIに文献探しを頼むのは便利ですが、返ってきたリストを信じるのではなく、確認作業の下書きとして扱うのが安全です。