マガジン

AIが出した数字を裏取りする:元データの調査年・定義・単位を確かめる手順

AIを使いこなす

執筆にClaudeを使用しています。

机上の統計資料の脚注を鉛筆で指しながら、手書きの確認シートと見比べて数字の条件を照合している場面
記事の内容をもとに制作したAI生成イメージです。実際の製品画面や検証結果の写真ではありません。

AIが出した統計の数字は、「値が合っているか」より先に「自分の用途と同じ条件の数字か」を確かめます。具体的には、元データを自分で開き、調査年・調査対象・定義・単位を値と並べて記入し、用途とずれていないかを照合します。この記事では、そのための確認表、AIへの依頼文、ずれたときの判断表を順に渡します。 数字の誤りは、桁違いや捏造だけではありません。見落としやすいのは、数字自体は元データ通りなのに、年が古い、対象が違う、単位や母数が違うといったずれです。値だけ見ても気づけないので、条件を確認する表を作ります。

この記事の目次
  1. 先に用途を一文で書く
  2. 確認表:値・出典・調査年・定義を記入する
  3. AIに任せる部分と、人が確認する部分
  4. 元データを開いて照合する手順
  5. 記入例(説明用の架空の例)
  6. 使うとき・使わないときの線引きと運用

先に用途を一文で書く

裏取りの基準は、AIの回答ではなく自分の用途です。数字を探す前に、次の一文を書いておきます。

用途:社内向け資料で「(対象)の(指標)は(いつ時点で)(どの範囲で)どれくらいか」を示す

たとえば「直近の、日本全国の、個人の、〇〇の利用率」というように、年・地域・対象・指標を決めます。法律や制度に関する数字を扱うなら、「日本の」のように管轄も入れてください。国や自治体で定義が異なるためです。後の照合は、この一文と元データの条件を比べる作業になります。

確認表:値・出典・調査年・定義を記入する

次の表を、AIの数字1件につき1セット作ります。「自分の用途」欄は、先に書いた一文から転記します。

  • 値、AIの回答:、元データで確認した内容:、自分の用途:、判定:
  • 単位(%・万人・千円など)、AIの回答:、元データで確認した内容:、自分の用途:、判定:
  • 出典(発行元・資料名・URL)、AIの回答:、元データで確認した内容:、自分の用途:、判定:
  • 調査年・調査時点、AIの回答:、元データで確認した内容:、自分の用途:、判定:
  • 調査対象(誰・何を数えたか)、AIの回答:、元データで確認した内容:、自分の用途:、判定:
  • 地域・範囲、AIの回答:、元データで確認した内容:、自分の用途:、判定:
  • 指標の定義(どう数えたか)、AIの回答:、元データで確認した内容:、自分の用途:、判定:
  • 実数か推計か/母数、AIの回答:、元データで確認した内容:、自分の用途:、判定:

判定欄は「一致」「ずれあり」「確認不能」の三つだけにします。「たぶん大丈夫」は使いません。

AIに任せる部分と、人が確認する部分

  • AIに任せる:出典候補の探索、確認表の下書き、元データの該当箇所の案内
  • 人が確認する:出典URLを開くこと、数字と条件が原文に載っているか、用途とのずれの判定

AIに出典を示させても、それで裏取りが済んだことにはなりません。OpenAIのヘルプは、ChatGPTの検索結果や引用が不完全・古い・誤りの場合があるとして、引用元を開いて回答を裏付けているか確認し、公開日や更新日も見て、正確さが重要なときは権威ある情報源を使うよう案内しています。Claudeのウェブ検索のヘルプも、回答に引用が付く一方で、引用元を照らし合わせて確認し、重要な判断には権威ある情報源を使うよう勧めています(いずれも2026年10月28日に閲覧。機能や表示はプランや設定で異なる場合があります)。

AIへの依頼文(そのまま使えます)

次の数字について、元データを確認するための表を作ってください。

【確認したい数字】(AIが先に出した文をそのまま貼る)
【私の用途】(先に書いた一文を貼る)

条件:
1. 出典は、政府・自治体・調査機関などの一次資料を優先してください。
   まとめサイトや解説記事しか見つからない場合は、その旨を書いてください。
2. 次の項目を表にしてください:値、単位、出典名、発行元、URL、
   調査年または調査時点、調査対象、地域・範囲、指標の定義、実数か推計か。
3. 資料中の該当箇所(表番号や見出し)を書いてください。
4. 確認できなかった項目は空欄にせず「確認できず」と書いてください。
   推測で埋めないでください。
5. 最後に、私の用途と食い違う可能性がある点を箇条書きにしてください。

3と4が肝心です。該当箇所を指定させると、人が原文を開いたときに探す時間が減ります。「確認できず」を認めておくのは、AIが条件を推測で埋めてもっともらしく見せることを抑える狙いです。ただし、AIの表の内容が正しい保証はないので、次の手順で必ず原文と照らします。

元データを開いて照合する手順

  1. 出典URLを自分で開く。 開けない、別の内容だった、見出しが違うといった場合は、その行を「確認不能」にします。
  2. 数字を原文で探す。 表やグラフの数字がAIの値と一致するか見ます。一致しなければ、その数字は使いません。
  3. 注記・凡例・調査概要を読む。 定義と調査対象は、本文でなく脚注や調査概要に書かれていることが多いです。
  4. 単位と母数を揃える。 同じ「%」でも、全体に対する割合か、回答者に対する割合かで意味が変わります。
  5. 確認表の「元データ」欄に、原文の言葉で書く。 自分の言い換えにすると、ずれを見落としやすくなります。
  6. 用途と並べて判定する。 次の判断表を使います。

ずれの判断表

  • 調査年が古い、例:用途は直近なのに数年前のデータ、対処:「〇〇年調査」と年を明記して使うか、新しい調査を探す
  • 対象が違う、例:用途は個人なのに調査は事業所、対処:使わない。同じ対象の調査を探す
  • 範囲が違う、例:用途は全国なのに調査は一部地域、対処:範囲を明記して限定的に使う
  • 定義が違う、例:「利用者」が「月1回以上」か「過去1年に一度でも」か、対処:定義を併記する。用途と合わなければ使わない
  • 単位・年度の違い、例:万人と人、暦年と年度、対処:換算して原文の単位も残す
  • 推計・標本調査、例:実数でなく推計値、対処:「推計」と書く。端数は丸めすぎない
  • 出典が見つからない、例:二次資料しかない、対処:「確認不能」とし、本文に載せない

「調査年が古い」は即不採用ではありません。「2019年時点」と書けば使える場面があります。一方、「対象が違う」「定義が違う」は、数字の見かけが似ていても別物なので、基本的に流用しません。

記入例(説明用の架空の例)

以下は仕組みを示すための架空の例です。実在の調査ではなく、実際に検索や確認をした結果でもありません。

用途:「直近の、全国の、個人の、Aサービス利用率(日常的に使っている人の割合)を紹介する」

AIの回答:「Aサービスの利用率は68%です。」

  • 値、AIの回答:68%、元データで確認した内容:68.0%(表3)、自分の用途:—、判定:一致
  • 出典、AIの回答:〇〇研究所の調査、元データで確認した内容:〇〇研究所「Aサービス利用実態調査」、自分の用途:一次資料、判定:一致
  • 調査年、AIの回答:記載なし、元データで確認した内容:2021年11月実施、自分の用途:直近、判定:ずれあり
  • 調査対象、AIの回答:記載なし、元データで確認した内容:18〜39歳のインターネット調査モニター、自分の用途:個人全体、判定:ずれあり
  • 地域・範囲、AIの回答:記載なし、元データで確認した内容:三大都市圏、自分の用途:全国、判定:ずれあり
  • 定義、AIの回答:記載なし、元データで確認した内容:過去1年に1回以上利用、自分の用途:日常的な利用、判定:ずれあり
  • 母数、AIの回答:記載なし、元データで確認した内容:回答者に対する割合、自分の用途:個人全体に対する割合、判定:ずれあり

この例では、68%という値自体は原文と合っています。それでも、対象が若年層で、範囲が三大都市圏、調査年も古く、定義も用途と違うため、「全国の個人の直近の利用率」としては使えません。使うなら「2021年11月、三大都市圏の18〜39歳のモニター調査で、過去1年に利用した人が68%」と条件ごと書くか、別の調査を探します。

使うとき・使わないときの線引きと運用

  • 値や出典が「一致」でも、対象・定義・調査年のどれかが「ずれあり」なら、その数字は本文で断定しません。
  • 条件を書き添えれば成立する場合は、数字の直後に年・対象・出典を括弧で添えます。
  • AIが挙げた出典が実在しても、ページ内に該当の数字が見当たらなければ「確認不能」です。
  • 複数のAIや検索結果で同じ数字が出ても、元が同じ二次資料なら裏取りにはなりません。元データまでさかのぼります。

数字を何件も扱う場合は、確認表を1ファイルにまとめ、「確認日」の列を足します。ウェブ上の統計は改訂されることがあるので、いつ元データを見たかが後で役に立ちます。「確認不能」の行は資料から外します。根拠のない数字を残すより、空白のほうが後で直しやすいからです。

出典・参考資料