競合調査
AIのハルシネーションを確かめる方法|競合情報を一行ずつ検証する3つの手順
生成AIが返した競合情報のハルシネーションを確かめる手順です。出典を開き、事実を書いた一文を探し、日付を確かめる。食い違う情報源の扱いと、確認できない主張の保留の仕方まで解説します。
生成AIが返した競合情報は、出典のページを開く、その事実を書いた一文を探す、ページの日付が主張に必要な新しさを満たすかを確かめる、の3段階で確認します。3つすべてを通った主張だけを営業資料やバトルカードに載せます。通らない主張は、何が足りないかを書き添えて未確認のまま保留します。
ハルシネーションは、生成AIが事実と異なる内容を、もっともらしく書いてしまう現象です。一般的な解説は原因やプロンプトの工夫を扱いますが、競合調査で実際に困るのは別の形です。出典のリンクは開くのに、そのページには回答のとおりのことが書かれていない。この誤りは、リンクが付いているぶん見逃されやすくなります。
ClaudeはWeb検索を使った回答に出典を付けます。AnthropicのWeb検索のヘルプは、すべての回答に引用が含まれるので出典を確かめられると説明し、重要な情報は引用元を相互参照するよう勧めています。Geminiも出典がある回答には「ソース」ボタンを表示しますが、Geminiアプリのヘルプによれば、すべての回答に出典が付くわけではありません。どのAIを使っても、出典を開いて読むのは利用者の作業です。
競合情報で起きるハルシネーションの4つの型
競合について返ってくる誤りは、ほぼ次の4つに分かれます。
| 型 | 例 | 見つけ方 |
|---|---|---|
| ページに書いていない | 連携ページを出典に「Salesforceと双方向同期」と書くが、ページにあるのは「CSVでエクスポート」 | 主張の言葉でページ内を検索する |
| 範囲がずれている | 「月額4,000円から」が「月額4,000円」になる、ベータ版の機能が正式提供になる、別プランの機能が混ざる | 数字、プラン名、提供状況を原文と比べる |
| 古い | 価格改定前の金額、退任した役員、終了した提携 | ページの日付と、より新しい発表の有無を確かめる |
| 出典が確かめられない | 媒体名だけでURLがない、URLが存在しない、社名が似た別会社のページ | URLを求め、正式な社名と所在地を照合する |
4つ目の型は、日本の会社名で特に起きやすくなります。似た社名の会社や、同じ社名の別会社が珍しくないためです。社名が怪しいときは、国税庁の法人番号公表サイトで正式な商号と本店所在地を確かめます。上場企業の売上や従業員数のような数字は、EDINETで有価証券報告書の原文に当たります。どの問いをどの情報源で確かめるかの一覧は、競合調査のやり方にまとめています。
1件ずつ、3段階で確かめる
主張1件ごとに、この順番で進めます。最初に失敗した段階で止めます。
出典のページを開き、本文を読む
リンクを自分で開きます。主張に出てくる会社と製品について、主張と同じプラン、地域、時期のことを書いたページなら合格です。ベンダーのブログ一覧や、別の会社が書いた比較記事に飛ぶリンクは、開けても不合格です。
その事実を書いた一文を探す
主張に含まれる数字、機能名、日付でページ内を検索します。同じ内容を同じ範囲で書いた一文があれば合格です。「1ユーザー月額4,000円から」は「1ユーザー月額4,000円」の裏付けになりません。ベータ版として載っている機能は「正式提供中」の裏付けになりません。該当する一文がなければ、どれほどもっともらしくても不合格です。
ページの日付を、主張の有効期間と比べる
ページの公開日や更新日、プレスリリースやレビューの日付を探します。価格は90日、機能は6か月のように、主張の種類ごとに許せる古さを決めておき、それより古ければ再確認します。創業年のように変わらない事実は、日付のないページでも合格にできます。
合格した主張には、URL、根拠の一文、ページの日付、確認した日の4つを添えて記録します。この4つがあれば、同僚は同じ作業を繰り返さずにその主張を使え、いつ再確認すべきかも分かります。主張が増えてきたら、競合調査のやり方で紹介している競合ファクト管理表に1件1行で移します。
根拠の一文を先に引用させる
2段階目は、AIに根拠の一文を原文のまま引用させておくと、ページ内検索だけで済みます。次の依頼は、引用がない場合の答え方まで指定しています。
主張「[主張を貼り付け]」について、[出典のURLを貼り付け]の中で
この主張を裏付けている一文を、原文のまま一字一句引用してください。
該当する一文がない場合は「このページには記載なし」とだけ答え、
言い換えや要約はしないでください。
引用された一文でページ内を検索します。ページにあれば2段階目は合格です。なければ、その引用自体もAIが作った文で、主張は不合格です。出典が媒体名だけでURLが見えない場合は、まずURLを求めます。URLが手に入らない主張は、1段階目を通過できません。
出典どうしが食い違うとき
2つの情報源が食い違ったら、どちらかを選ぶ前に、同じことを述べているかを確かめます。比べるのは、範囲(プラン、地域、エディション)、期間(いつの情報か)、単位(ユーザー単位か契約単位か、月額か年額か、定価か値引き後か)、対象(同じ製品を同じ名前で指しているか)の4点です。月額と年額の単価が並んでいるだけなら、食い違いではなく1つの価格の2つの表し方です。
それでも食い違いが残れば、事実に近い情報源を優先します。競合が何をいくらで売っているかなら、競合自身の現在の料金ページがレビューや販売代理店の掲載より優先します。新しさで決めるのは、信頼性が同程度の情報源どうしのときだけです。同じ古い数字を引用した記事が3本あっても、情報源は1つと数えます。バトルカードに書けるのは3つの状態だけです。優先した主張を日付と出典つきで載せる、信頼性が同程度で差が営業に重要なら両方を日付つきで併記する、どちらも顧客の前に出せる水準でなければ載せない。2つの数字を平均してはいけません。どの情報源にも載っていない数字を、営業担当者は根拠を示せないまま口にすることになります。
確認できない主張は保留にする
不合格になった主張は消さずに、未確認として保留リストに残します。どの段階で失敗したか、何が書かれたページが見つかれば合格するかも書き添えます。記憶に頼ると、同じ主張が別の出典付きで再び現れたとき、また採用してしまいます。保留リストがあれば、まだ根拠が足りない主張だとすぐ分かります。
保留にした主張が、実は正しいこともあります。根拠がまだ見つかっていないだけなら、足りない根拠を書いて見える場所に置いておけば、誰かが料金ページや発表資料を探しに行けます。見つかった時点で、根拠付きの行として記録します。
保留中の主張はバトルカードに載せません。バトルカードの一行は商談でそのまま読まれるので、根拠のない内容が顧客に直接伝わります。
重要な主張は、別のAIに聞くより一次情報で確かめる
価格、ポジショニングの文言、進行中の商談を左右する主張は、新しいチャットや別のAIでも同じ質問をして、回答と出典を比べる価値があります。ただし、これは一貫性の確認にすぎません。2つのAIが同じ古いページを読んでいれば、回答は一致しても誤ったままです。根拠になるのは、自分で開いて確かめた一次情報か、独立した別の情報源です。回答が食い違ったら、営業に渡す前に原因を突き止めます。
リサーチ機能のレポートも、主張ごとに確かめる
Claudeのリサーチ機能は、複数の情報源を取得して詳しいレポートを返します。複数の競合にまたがる情報をまとめて集めるのに向いていますが、レポートの中の主張にも、1件ずつ3段階の確認が必要です。Anthropicのリサーチ機能のヘルプによると、リサーチ機能は有料プラン(Pro、Max、Team、Enterprise)で使え、Web検索をオンにする必要があります。Web検索のヘルプによると、TeamとEnterpriseでは、まず組織のオーナーがワークスペース全体でWeb検索を有効にします。リサーチ機能が使えないときは、この設定から確認します。
継続して確認するなら、確認済みの記録と保留リストをClaudeのプロジェクトに置いておきます。新しいチャットでも、却下済みの主張を参照できます。
Steveでできること
Steveはバトルカードの各行を確認します。調査結果を主張1件ずつに分け、それぞれを最大10回まで実際のWebと照合し、カードの各行に「確認済み」「要確認」「未確認」のいずれかと出典を表示します。カードの更新は、営業担当者に表示される前に人が1件ずつ承認します。
承認を前提にした仕組みなので、承認する担当者がいなければ更新はカードに反映されません。担当者が予定どおりに出典を開き直せる体制なら、本記事の手作業の確認で足ります。カードの見え方はSteveの競合リサーチで確認できます。
よくある質問
AIのハルシネーションはどう確かめますか?
出典を開き、その事実を書いた一文を探し、ページの日付を確かめます。3つすべてを満たした主張だけを営業資料に使い、満たさない主張は未確認として保留します。
出典のリンクが開けば、内容は正しいといえますか?
いいえ。開けることはページがある証明にすぎません。ページの中に、主張と同じ数字、範囲、時期を書いた一文があって初めて裏付けになります。
確認できなかった主張はどう扱いますか?
未確認として保留し、営業には渡しません。どの段階で失敗したか、何が書かれたページがあれば合格するかを添えて残すと、次に探すべき情報源が分かります。
2つの情報源が食い違ったらどちらを信じますか?
条件をそろえたうえで、事実に近い情報源を優先します。日付で決めるのは、信頼性が同程度の情報源どうしのときだけです。
別のAIに同じ質問をすれば確認になりますか?
なりません。回答が一致しても、同じ誤りを繰り返している可能性があります。根拠になるのは、自分で開いて確かめた一次情報です。
Claudeのリサーチ機能を使えば、確認は不要ですか?
不要にはなりません。リサーチ機能のレポートでも、主張ごとに同じ3段階の確認が必要です。リサーチ機能は有料プランで使え、Web検索をオンにする必要があります。
あわせて読みたい
記事一覧- 2026年9月14日競合調査のやり方|3C・SWOTで終わらせない調査計画と競合ファクト管理表競合調査のやり方を、1枚の調査計画と競合ファクト管理表で解説します。3C・SWOT・4Pとの使い分け、法人番号公表サイトやEDINETなど日本の情報源、情報の鮮度の基準まで。
- 2026年10月14日バトルカードのテンプレート6種|営業の競合対策にそのまま使える記入例つき営業用バトルカードのテンプレート6種を、項目と記入例つきで紹介します。反論対応、機能比較、導入事例、競合プロファイル、複数社比較、調査キャンバス。Markdownでコピーできます。
- 2026年9月14日バトルカードの作り方|営業が商談で使える競合比較表の書き方と更新ルールバトルカードは、商談中に競合への質問へ答えるための短い資料です。反論1つを3行で書く作り方、競合比較表のルール、更新と修正の手順をまとめました。
- 2026年9月12日Claudeのプロジェクト機能の使い方|マーケター向けの設定例・指示文・依頼文Claudeのプロジェクトをマーケティング業務で使う手順。チャット・リサーチ・Coworkとの使い分け、4つの参照ファイル、プロジェクトの指示文、依頼文の書き方、使う前の3つの確認まで。
バトルカードの一行ごとに、出典とステータスを