初心者向け：論文査読で生成AIを使う前に必ず確認する6つの安全手順

初心者向け：論文査読で生成AIを使う前に必ず確認する6つの安全手順 研究支援

はじめに

TL;DR：生成AIは査読を効率化しますが、架空引用（偽の文献）や誤情報を出すリスクがあります。本記事では、実務ですぐ使える6つの安全手順と、DOI/CrossRef/PubMed/Google Scholarでの具体的照合手順、プロンプト例、機密性対策、架空引用が出た際の対応フローを示します。最終判断は必ず人間が行ってください。

生成AIは査読作業の効率化に役立つ可能性がありますが、架空引用や誤情報を提示することがあります。以下は初心者向けに整理した、生成AIを論文査読で使う前に必ず確認すべき6つの安全手順です。各手順は「何を」「なぜ」「どうやって」を具体的に示します。

6つの安全手順

1. 目的と役割を明確にする

まず、生成AIに期待する役割を明確にします。例：

  • 文献候補のリストアップ（初期候補）
  • 文章の言い換え支援（表現の改善）
  • 査読コメントの下書き作成（人間が編集）

なぜ：AIに丸投げすると架空引用や誤った結論を見落とすリスクが高まります。どうやって：各役割ごとに「AIは何を返すか（例：候補文献のタイトル・著者・出版年・DOIを必ず提示）」と「人間の最終チェック項目」を明文化したワークフローを用意してください。

2. 機密性とデータ共有の確認

査読中の原稿は多くの場合機密扱いです。所属機関やジャーナルの規程を確認してください。確認すべき具体的な指針・規程例：

  • 投稿先出版社の査読者ポリシー（出版社／ジャーナルのWebページ）
  • COPE（Committee on Publication Ethics）のガイドライン
  • ICMJEや所属大学・研究機関の情報管理ガイドライン

許可がない場合は原稿を外部クラウドAPIへ送らないでください。代替案：

  • オンプレミスのモデルやローカルで動作するLLMの利用（組織で承認された環境）
  • エンタープライズ向けのプライバシー保証付きAPI（ログ保存ポリシーやデータ利用条件を確認）
  • 仮名化（匿名化）して要旨・一部テキストだけを使う方法（ただし情報漏洩リスクを評価）

基本的なIT管理のポイント：通信の暗号化（TLS）、アクセス制御（最小権限）、ログ管理、契約書（DPA）でのデータ利用範囲確認を意識してください。

3. ツールの特性と設定を確認する

使用する生成AIのバージョンや設定は出力に影響します。確認すべき主な項目：

  • モデル名とバージョン、リリースノート
  • 外部知識ベースやウェブ検索との連携（RAGやソース参照の有無）
  • 出力に参照（ソース）を付す機能や確信度指標の有無
  • ログ保存やトレーニングデータの再利用ポリシー

これらは架空引用の発生確率や情報の鮮度に影響するため、事前に設定と挙動をテストし、期待する出力フォーマットをテンプレート化してください。

4. 出典（引用）の検証ワークフローを作る

生成AIが示した文献は必ず一次情報で確認します。以下は現場で使える具体的手順と操作例です。

基本の検証手順（順序）

  1. AIが出した情報（タイトル、著者、年、DOI）をリスト化してスクリーンショットまたはログを保存する。
  2. DOIが提示されていれば先にDOIで確認する（DOIが有効か、doi.orgで開けるかを確認）。
  3. CrossRefで検索してメタデータを照合する（以下参照の手順参照）。
  4. PubMed（生命科学・医学系）やGoogle Scholarでタイトル／著者名を検索して抄録・引用状況を確認する。
  5. 出版社のランディングページや図書館の電子ジャーナル経由で原文（抄録・本文）を確認する。
  6. 見つからない場合は「架空引用の可能性あり」としてフラグを立て、次の対応フローへ進む。

CrossRefでのDOI検索（操作例）

  1. CrossRefの検索サイト（https://search.crossref.org）にアクセス。
  2. AI提示のタイトルをコピーして検索窓に貼り付け（完全一致が見つからない場合は主要語で検索）。
  3. 該当エントリが見つかれば DOI を確認し、クリックして出版社のページへ飛ぶ。見つからない場合はAPI検索（https://api.crossref.org/works?query.title=…）で絞り込む手もある。
  4. DOIが存在し、出版社ページが開けるなら一次情報として十分に確認できる（本文や抄録が見られるかを確認）。

PubMedでの本文・抄録確認（操作例）

  1. PubMed（https://pubmed.ncbi.nlm.nih.gov）を開き、タイトルや著者名で検索。
  2. 該当エントリがあれば抄録を確認し、右側の“Full text links”や“PMC”リンクをたどって原文の所在を確認する。
  3. PubMedにない場合でも、DOIや出版社サイトで確認できるかをチェックする（PubMedはすべてのジャーナルをカバーしていないため）。

Google Scholarでの検索のコツ

  • タイトルを引用符で囲んで完全一致検索（例：“Exact Title Here”）。
  • 著者名と出版年を併記して絞り込む（例：”Title” Author 2020）。
  • site:doi.org や site:*.edu を使って出所を絞ることも有効（例：site:doi.org “Title”）。
  • ヒットした場合は“引用数”や“関連文献”を確認し、文献の存在性と影響度を把握する。

判定基準の例

  • DOIが有効で出版社ページに原文または抄録がある：一次情報で確認済み。
  • タイトル・著者は存在するがDOIや本文が確認できない：要注意（可能なら図書館経由で確認）。
  • 出典がまったく見つからない、あるいはDOIがランダム文字列：架空引用の可能性が高い。

5. プロンプト設計で誤情報リスクを下げる

出力の品質はプロンプト次第です。以下に即使えるテンプレートを示します。実務で使う際は、出力に常に一次情報の確認を行うことを明示してください。

プロンプト例：文献候補の提示（候補提示用）

以下のキーワードと要旨に基づいて、関連する査読に適した学術論文を5件挙げてください。各件について「タイトル／著者（姓）／出版年／雑誌名／DOI」を必ず出力してください。もしDOIが不明なら"DOI不明"と明記し、一次情報で確認できる出典のみを挙げてください。

プロンプト例：出典確認要求（検証用）

以下の文献リストについて、私が提示する「タイトル／著者／DOI」を順に受け取り、各項目についてCrossRef、PubMed、Google ScholarのいずれかでDOIまたは出版社ページを確認するための検索手順を示し、"確認済み"か"未確認"を出力してください。確認に使った検索語（正確な検索クエリ）も併記してください。

プロンプト例：不確実性の明示（応答指示）

分からない場合や一次情報で確認できない場合は推測で埋めず、必ず"不確実"または"一次情報未確認"と返答し、推測に基づく詳述はしないでください。

運用上の注意：AIがDOIや出版社名を自動生成することがあります。生成されたDOIは必ず上記ワークフローで検証してください。

6. 記録と責任の所在を明確にする

査読プロセスでは、AIの出力とそれに対する検証の記録を残すことが重要です。推奨する記録方法：

  • AIに投げたプロンプトとAIの回答（テキストログとスクリーンショット）を保存する。
  • 一次情報の検索結果（検索クエリ、ヒットURL、スクリーンショット）をまとめる。
  • 最終判断者（査読者）の氏名と最終判断日を記録し、AIは補助ツールである旨を明記する。

これにより後で出典や判断の根拠を遡りやすくなります。機関での保存ポリシーに従い、機密性に配慮して保存してください。

実務ですぐ使えるチェックリスト

  • AIに何を期待するか（役割）を定義したか
  • 原稿を外部に出してよいか出版社／機関規程を確認したか（例：COPE、所属機関のガイドライン）
  • 使用するモデルと設定（バージョン、RAG有無、ログ方針）を把握したか
  • AIが示した文献を必ず一次情報（DOI→CrossRef→出版社ページ／PubMed／Google Scholar）で照合したか
  • 検証記録（プロンプト、回答、検索クエリ、照合結果）を保存したか
  • 最終判断は人間が行うことを明確にしたか

架空引用が見つかった場合の対応フロー（具体例）

  1. 出典が見つからない場合はまず内部フラグを立て、検証ログを保全する（スクリーンショット含む）。
  2. 図書館／編集委員会に確認できるか問い合わせる（ローカルなサブスクリプションが必要な場合もある）。
  3. 著者に確認が可能なら、査読コメントで「提示された文献X（タイトル・著者・年・DOI）は一次情報で確認できなかった。原典を示してください」と丁寧に問い合わせる文面を送る。
  4. 編集部へエスカレーションする：編集部には検証ログを添付し、事実関係の確認を依頼する。
  5. 査読コメントに記載する例文（テンプレート）：
査読コメント例：AIが示した文献「［タイトル］（著者、年、提示されたDOI）」は、CrossRef／PubMed／出版社サイトで確認できませんでした。一次情報の提供をお願いします。また、提示された出典が確認できないため、本稿の該当箇所の主張の根拠は再検討が必要です。

実例（ケーススタディ）

ケース1（架空DOIの発見）：査読者AはAIが提示した5件の参考文献のうち1件のDOIをdoi.orgで開こうとしたところ404になった。CrossRef検索でもヒットせず、出版社ページは存在しなかった。査読者Aは検証ログを保存し、編集部に報告、著者に出典の再提示を求めた。結果、著者は参考文献リストのタイプミスを認め訂正した。

ケース2（部分的に正しいが抄録と食い違う例）：AIが提示した文献のタイトルと著者は実在したが、AIが要約した結論は原文の抄録と一致しなかった。査読者Bは原文を確認し、AIの要約を修正して査読コメントに反映した。

注意点（まとめ）

生成AIは便利ですが、架空引用や誤情報を提示する可能性があります。実務では必ず一次情報照合と人間による最終チェックを行ってください。上記の6つの手順を最低限のルールとして導入し、プロンプトテンプレートと検証ワークフロー、記録保存を運用することで安全性を高められます。

FAQ（よくある問い）

Q: AIが引用を出したがDOIがない場合どうする？

A: まずGoogle ScholarやCrossRefでタイトル・著者・年で検索し、それでも見つからなければ著者に出典の原典を求め、編集部に報告してください。査読コメントでは”一次情報未確認”を明記します。

Q: 機密性が厳しい原稿をAIで扱うことは可能か？

A: 出版社や機関のポリシーで禁止されている場合は不可です。代替としてオンプレミスモデルや組織内で管理されたエンタープライズAPIを検討してください。通信の暗号化とアクセス制御を確認することが重要です。

参考情報（実務向けリンク）

  • CrossRef（DOI検索）: https://search.crossref.org/
  • PubMed: https://pubmed.ncbi.nlm.nih.gov/
  • Google Scholar: https://scholar.google.com/
  • COPE（Committee on Publication Ethics）: https://publicationethics.org/
  • ICMJE（国際医学雑誌編集者委員会）: http://www.icmje.org/

関連記事

※この記事には広告が含まれています。

関連するおすすめサービス

外出先や在宅勤務で通信環境を整えたい方は、モバイル回線も選択肢になります。



コメント

タイトルとURLをコピーしました