← 最新の論文
💻 computer science

Divergent Recommendations, Convergent Diagnoses: Cross-Provider Failure-Mode Convergence in AI Commercial Recommendation

ChatGPTとClaudeの間で具体的な製品推奨内容に著しい相違が見られるにもかかわらず、本研究は、これらAIプロバイダーが共同の推奨失敗の根本的な理由を診断する際にはほぼ完璧な一致(95.1%)を示していることを明らかにしており、これは、トップブランドに対してはプロバイダー固有の最適化戦略が必要となる可能性がある一方で、ロングテールブランドに対しては根本原因に対処するための統一されたアプローチが非常に効果的であることを示唆している。

原著者: Will Jack, Noah Lehman, Keller Maloney, Sarah Xu

公開日 2026-06-26
📖 1 分で読めます☕ さくっと読める

原著者: Will Jack, Noah Lehman, Keller Maloney, Sarah Xu

原論文は CC BY 4.0 (http://creativecommons.org/licenses/by/4.0/) でライセンスされています。 これは以下の論文のAI生成解説です。著者が執筆または承認したものではありません。技術的な正確性については原論文を参照してください。 免責事項の全文を読む

大きな問い:AIアシスタントの意見は一致するのか?

あなたが有名なブランド(ナイキのような大企業や、地元のパン屋さんなど)だと想像してください。人々がChatGPT(OpenAI)やClaude(Anthropic)のようなAIアシスタントにアドバイスを求めたとき、自分の製品を推奨してほしいと考えています。

著者たちが投げかけた大きな問いは、「もし私がChatGPT向けにマーケティングを最適化したら、それは自動的にClaudeにも通用するのか? それとも、全く異なる2つの戦略が必要になるのか?」というものです。

これを知るために、彼らは大規模な実験を行いました。両方のAIに対して、製品に関する215個の質問を同じ内容で投げかけ、どのような製品を推奨するかを観察しました。

最初の発見:彼らは異なる「勝者」を選ぶ

たとえ話: 2人の異なる料理評論家(シェフAとシェフB)が、500種類のメニューをレビューしている場面を想像してください。

  • 結果: トップ10の料理を選んでほしいと頼まれたとき、シェフAとシェフBが一致したのはわずか3つか4つの料理だけでした。残りの6つか7つは、全く異なるものでした。
  • 論文のデータ: 2つのAIがどのブランドを推奨するかについて一致したのは、わずか**35%**の時間でした。同じAIに対して同じ質問を2回繰り返した場合、そのAIは自分自身の回答に対して50〜60%の確率で一致します。しかし、別のAIに切り替えると、推奨される内容は大きく変わります。

テイクアウェイ(教訓): あなたが大きなブランドであるなら、あるAIでうまくいったことが、他のAIでも通用すると決めつけることはできません。彼らには異なる「好み」があるのです。


2番目の発見:彼らは「失敗」の理由については一致する

ここからが非常に興味深いところです。研究者たちは、AIが何を推奨したかだけでなく、何を見落としたかについても調査しました。

彼らは「見落とした」ブランドを、3つの失敗タイプに分類しました。

  1. 「聞いたこともない」(発見可能性 / Discoverability): AIが検索結果の中でそのブランドを見つけられなかった。これは、本が存在することすら知らない司書のようなものです。
  2. 「見たけれど、気に入らなかった」(説得力 / Compellingness): AIはそのブランドを見つけたものの、最終的な回答には含めなかった。
  3. 「言及はしたが、選ばなかった」(ポジショニング / Positioning): AIはそのブランドについて触れたものの、トップの選択肢として推奨はしなかった。

たとえ話: 2人の評論家がレストランを推薦するように頼まれたとします。

  • もし彼らが異なる場所を推奨しているなら、彼らは「味の好み」について議論しています。
  • しかし、もし彼らが特定のローカルな店を推奨できなかった場合、なぜ失敗したのでしょうか?

結果: 両方のAIが特定のブランドを推奨できなかったとき、彼らはほぼ常に全く同じ理由で失敗していました(95%の確率)。

  • 両方のAIがブランドを見落とした場合、それは通常、どちらのAIもそのブランドを見つけられなかった(発見可能性)ことが原因でした。
  • 彼らは「なぜ見落としたのか」という点では意見が一致していませんでした。ただ、二人とも同じ理由で見落としていたのです。

「ロングテール」効果:
この一致は、より小さく、知名度の低いブランド(ロングテール)においてさらに強くなります。

  • 有名ブランド(トップ層): AIは、なぜ見落としたのかという理由において、より頻繁に意見が分かれました(一方は見たが見つけられなかった、もう一方は見つけたが見向きもしなかった、など)。
  • 無名のブランド(ロングテール): AIは、単にそのブランドを見つけられなかったという点で、**99.6%**の確率で一致しました。

「どのように」考えているのか:同じ場所にたどり着く異なる道

論文では、AIがどのようにして選択を行っているのかについても調査しました。

  • OpenAI (ChatGPT): これは**リサーチャー(調査員)**のようです。彼はほぼ常に、まずウェブを検索し、その結果を読み、それから推奨を行います。彼は検索で見つけた情報に強く依存しています。
  • Anthropic (Claude): これは知識豊富な教授のようです。彼は、自身のトレーニングデータ(「記憶」)から得た知識に頼ることがよくあります。彼は、ウェブを検索する必要がないケースでも、43〜52%の割合でブランドを推奨します。

たとえ話:

  • ChatGPTは、質問に答える前に教科書を開く学生のようなものです。
  • Claudeは、確信がない場合にのみ教科書を開く、記憶に基づいて答える学生のようなものです。

このように、彼らは異なる手法(検索 vs 記憶)を用いているにもかかわらず、共通の「教科書」にも載っておらず、検索するウェブページにも存在しないような無名のブランドについては、同じように見落としてしまうのです。


ブランドへの実践的なアドバイス

これらの発見に基づき、論文はブランドに対して具体的な戦略を提案しています。

  1. 小さく無名のブランド(ロングテール)の場合:

    • 問題点: AIがあなたを見つけられていない。
    • 解決策: あなたに必要な戦略は1つだけです。もしウェブ上でのあなたのブランドの「見つけやすさ」を高めることができれば(SEOの改善、記事の増加など)、両方のAIがあなたを推奨し始めます。ChatGPTかClaudeかによってメッセージを使い分ける必要はありません。ただ「発見可能性」の問題を解決すれば、それが両方に効くのです。
  2. 大きく有名なブランド(トップ層)の場合:

    • 問題点: AIはあなたを見つけているが、推奨しない理由が異なっている可能性がある(例えば、片方はコンテンツが退屈だと言い、もう片方はポジショニングが弱いと言っているなど)。
    • 解決策: あなたには2つの異なる戦略が必要です。ChatGPTに推奨させるために有効な方法が、Claudeにも有効であるとは限りません。彼らをそれぞれ異なる観客として扱う必要があります。

まとめ

  • 推奨: AIは異なる「勝者」を選ぶ(意見が分かれる)。
  • 失敗: 両方のAIがブランドを見落としたとき、彼らは通常、同じ理由で見落としている(意見が一致する)。
  • 対策: 小さなブランドであれば、「視認性」を一度修正すれば、それがあらゆる場所で効果を発揮します。大きなブランドであれば、特定のAIに合わせてメッセージを微調整する必要があるかもしれません。

自分の分野の論文に埋もれていませんか?

研究キーワードに一致する最新の論文のダイジェストを毎日受け取りましょう——技術要約付き、あなたの言語で。

Digest を試す →