情報確認日:2026年10月15日
複数のAIが同じ答えを返しても、それだけでは事実を独立に裏付けたことになりません。同じ資料を参照したり、似た誤りを繰り返したりする場合があるためです。多数決で採用する前に、答えを支える原資料や、別の方法による計算・実行結果を確認します。
AIの人数と、証拠の数を分ける
3つのAIが同じ記事を根拠にしていれば、回答は3つでも、直接の情報源は1つです。その記事が古かったり、条件を省略していたりすれば、全員の答えに同じ問題が残る可能性があります。
別のAIへ先の回答を渡して「正しいですか」と聞く場合も、元の答えを見ずに調べた評価とは違います。追認した文章が増えたことと、新しい証拠が得られたことを区別してください。
| 確認できたこと | そこからは確定しないこと |
|---|---|
| 複数AIの結論が一致 | その結論が事実であること |
| 複数AIが同じ資料を引用 | 独立した複数資料での裏付け |
| 別会社のモデルを使用 | 誤りが互いに独立していること |
| AIが「問題なし」と評価 | 原資料や成果物の検査が完了したこと |
違うモデルでも、同じ誤答になる研究がある
2025年のKimらの一次研究「Correlated Errors in Large Language Models」は、複数のモデルの誤りがどの程度重なるかを調べています。選択式問題の既存データと、履歴書・職務記述の評価課題を扱った研究です。
同論文のHELMのデータでは、モデルの組が両方とも間違えた場合に、同じ誤答を選ぶ割合は平均で約60%でした。これは「AIの全回答の60%が誤り」「3つのAIが一致すると60%間違い」という数値ではありません。両モデルが誤った問題に限った一致の指標です。
同じ提供元や基盤のモデルで誤りが重なる関係が見られ、異なる提供元等でも重なりは残ると報告しています。ただし、当時のモデルと課題の評価です。現在使う特定のサービスで同じ割合になると読み替えません。
この研究は、複数モデルを使うことが無意味だと結論するためではなく、「違うAIなら自動的に独立した証拠」という前提を置かないための参考になります。
検証役には、元の答えの言い換えを頼まない
AIを分担して使うなら、作成役と点検役の仕事を具体的に変えます。点検役には、結論の賛否だけでなく、主張と原資料が一致するかを調べてもらいます。
この文章の主張を一文ずつ確認してください。対象者、日付、数字、除外条件を原資料の該当箇所と比べ、相違だけを示してください。リンク先を読めなかった場合は、読んだことにせず残してください。
根拠を先に調べさせたい場合は、作成役の結論を渡す前に、同じ問いと原資料から必要な事実を整理してもらう方法もあります。それでも、AIであることや資料が共通であることによる限界は残ります。
点検結果は「合格」の表示だけでなく、何を読んだか、どの条件を照合したか、未確認は何かまで受け取ります。
内容によって、別の確認方法を使う
計算なら、元データから表計算や電卓で再計算します。プログラムなら、確認用の小さな入力を使い、実際の出力と変更ファイルを調べます。制度なら、現行の公式案内・法令と、自分の対象条件を比べます。
実際に操作していないAIの説明を、実機で成功した記録と同じに扱わないでください。テストが成功しても、テストしなかった例外まで網羅したとは限りません。何を確認するための検査だったかを残します。
また、複数のウェブ記事が同じ発表を転載している場合も、記事数だけを証拠数に数えません。元の発表へたどり、別の観測や根拠があるのかを見ます。
意見が割れたときは、結論が変わる条件を探す
AI同士が違う答えを出した場合は、多数の側をそのまま選ぶより、前提の違いを取り出します。対象年度、地域、契約プラン、用語の定義などが違うことがあります。
「どの条件ならAで、どの条件ならBか」を資料で確認し、答えを条件付きに直します。資料が見つからない部分は未確認として残し、重要な法務・医療・金銭の判断は担当窓口等へ具体的に相談します。
最後に保存するのは、投票数だけでなく、採用した答え、原資料、検査方法、確認日、未確認事項です。複数AIは見落としを探す補助に使えますが、結論の根拠は確認できた資料と結果へ戻します。
参照資料
あわせて読みたい記事
執筆・検証:カネさん(政経プラスチャンネル運営)+ ChatGPT
