ChatGPTの回答に使われる情報は、大きく「モデルが学習したパターン」「回答時に検索したWebページ」「会話やプロジェクトに追加した資料」の3つに分けられます。引用は4つ目の情報源ではなく、検索で参照したページの一部を示す表示です。企業の広報・マーケティング担当者が自社情報の扱われ方を確認するには、この違いを押さえる必要があります。

この記事では、OpenAIの公式説明を基に、3種類の情報源と引用の見分け方を整理します。回答のどの部分がどの学習データに由来するかを、個別のページ単位で特定することはできません。一方、Web検索が使われた回答では、文中の引用や「情報源」欄から参照ページを確認できます。自社情報の扱われ方を確かめるときは、まず検索が使われた回答と引用先を確認するのが現実的です。

回答に使われる情報は3種類

OpenAIは、モデル開発に利用する主な情報を「公開されているインターネット情報」「第三者から利用許諾された情報」「ユーザー、人間のトレーナー、研究者が提供または生成した情報」の3つに整理しています。これは「モデルが学習したパターン」の背景を説明する分類であり、ある回答がどのページの何行から作られたかを示す出典一覧ではありません。
出典：OpenAI「ChatGPT及び当社言語モデルの開発方法について」

Web検索を使わない回答は、学習時に得たパターンに基づいて生成されます。文章を自然に続けられることと、主張が正しいことは同じではありません。OpenAIも、ChatGPTが誤った定義・日付・事実、存在しない引用や参考文献を出す場合があると説明し、重要な情報は信頼できる情報源で確認するよう勧めています。
出典：OpenAI Help Center「Does ChatGPT tell the truth?」

したがって、「学習元に自社サイトが含まれているか」を一つの回答から逆算することはできません。ChatGPTが自社について正確に答えたとしても、公式サイトを学習した証拠にはなりません。反対に、誤った回答が出ても、公式サイトが学習されていないとは断定できません。企業が検証できるのは、回答内容と、検索が使われた場合に表示される参照先です。

Web検索時は引用リンクと「情報源」欄を確認する

ChatGPT検索では、Webから取得した情報を基に回答し、文中に引用リンクを表示します。OpenAIの透明性ページによれば、直接引用されていない関連ページは「情報源」欄に表示されることがあります。第三者の検索プロバイダーを使う場合、その欄の表示順はプロバイダー独自のランキングシステムの影響を受けます。
出典：OpenAI「透明性とコンテンツモデレーション」

ただし、引用があるからといって、回答が正しいとは限りません。リンクを開き、主張と同じ内容が書かれているか、対象の時点・地域・製品が一致するか、発行者が一次情報の発信元かを確認します。リンクがあることと、そのリンクが主張の根拠になっていることは、別々に判定します。

会話やプロジェクトに追加した資料も、回答の情報源になります。アップロードしたファイル、貼り付けたテキスト、接続アプリの情報などです。ただし、利用者ごとに異なる情報なので、企業が外部から確認することはできません。
出典：OpenAI Help Center「Projects in ChatGPT」

つまり、企業が確認すべき対象は、検索が使われた回答と、その引用先です。次に、この確認を自社に関する質問で行う手順を説明します。

自社が参照されているかを調べる手順

まず、顧客が購入や問い合わせを判断するときに使う質問を10〜20件に絞ります。「料金はいくらか」「誰に向くか」「競合との違い」「導入条件」「解約方法」のように、誤りが商談や問い合わせへ影響する問いを優先します。次に、同じ質問を同じ条件で実行し、検索利用の有無、回答全文、引用URL、確認日時、利用プラン、地域やログイン状態など、確認できる条件を保存します。

引用先は一件ずつ開き、主張と原文を照合します。「正しい公式情報」「古い公式情報」「第三者の正しい説明」「第三者の誤情報」「引用なし」のように分類すると、次の対応を決めやすくなります。公式ページが古ければ自社で修正し、外部記事が誤っていれば発行元へ訂正を依頼します。正しいページを引用しているのに回答が内容を取り違えている場合は、ChatGPTのフィードバック機能から報告し、回答と引用先の証跡を社内にも保存しておきます。

再観測では、1回の結果だけで評価を決めません。質問の言い換え、時点、検索利用の有無によって参照先が変わる可能性があるためです。「正しい回答だった割合」「公式ページが引用された割合」「同じ誤りが再発した割合」を、観測回数を分母にして記録します。

観測結果を分類すると、回答の問題が引用先の情報に由来するのか、正しい引用先を回答が取り違えたのかを切り分けやすくなります。引用先に古い情報や誤りがある場合は、自社で直せる公開情報から整えます。

企業が整えるべき公開情報

情報源対策の出発点は、AI向けの特別な文章ではなく、顧客が確認できる正確な一次情報です。会社概要、商品仕様、料金、対象顧客、利用条件、サポート範囲、更新日を、矛盾なく公開します。古いPDF、採用ページ、ニュースリリース、代理店ページに旧情報が残っていないかも点検します。

ChatGPT検索で参照されたいページは、OAI-SearchBotがクロールでき、重要な情報がテキストで読める状態にします。ただし、クロールを許可しても掲載や引用は保証されず、引用されても意図した文脈で使われるとは限りません。公開情報の整備、回答と引用の観測、誤りの修正、再観測を一つの運用として回します。
出典：OpenAI Help Center「Searching the web with ChatGPT」

おわりに

ChatGPTの「情報源」を正しく見るとは、学習データを推測することではありません。回答が検索を使ったか、どのページが表示されたか、そのページが主張を本当に支えているかを確認することです。まずは顧客の判断に直結する質問を少数選び、今日の回答と引用URLを保存してください。

ただし、手作業での観測は、質問数や確認するAIサービスが増えるほど負担が大きくなります。QueryLiftでは、複数の質問やAIサービスにまたがる回答内容と引用元を継続的に計測し、改善の優先順位を整理できます。自社がどの質問で、どの情報源を基に、どう語られているかを確認したい方は、QueryLiftのサービスについてお問い合わせください。