同じ質問でも言い方でAIのおすすめ企業は変わるか - 30の表現で比較
公開
この記事は2026年9月25日にIntrix Labが韓国語で公開した記事の翻訳です。
変わります。2026-09-25時点で、同じ意図を実際の検索表現10通りに変えて2種類のAIに尋ねたところ、同じ文を繰り返して尋ねた場合よりも、おすすめ企業が大きく変わりました。意図別に最も多く推薦された18社は、すべて、ある表現では5回中一度も登場しませんでした。1つの文でAIへの露出を測ると、どの文を選んだかが結果を決めます。
なぜ同じ意図を複数の表現で尋ねたのでしょうか?
AIへの露出を測るツールの多くは、1つの意図を1つの質問文で代表させています。同じ文を何度も尋ねることで、ばらつきを抑えます。しかし、実際の顧客は同じものを探していても、それぞれ異なる言い方で尋ねます。
検索研究でも同じ問題が扱われています。2026年9月に公開されたSELF-INDEX研究(arXiv 2609.19656)は、内容が適合する文書でも、クエリの表現とインデックスの表現が食い違うと見つからないとしています。そこで、まず1つの文で意図を代表できるのかを確認しました。
表現はどのように選びましたか?
意図は3つです。GEO代理店を探す質問、病院マーケティング代理店を探す質問、釜山の広告代理店を探す質問です。意図ごとに10の表現を選びました。
表現は自作せず、実際の検索需要データから取りました。「病院マーケティング」のように1つのキーワードで構成されたものも、質問文のものもあります。表現ごとに2種類のAIに5回ずつ尋ね、判定ルールは収集前に定めました。
繰り返す場合と表現を変える場合で、どのくらい違いましたか?
同じ文を繰り返して尋ねた回答同士で、おすすめ企業がどの程度重なるか(Jaccard)と、異なる表現で尋ねた回答同士でどの程度重なるかを比較しました。2つの値の差が大きいほど、表現が結果を大きく変えることを意味します。
| モデル・意図 | 同じ文の繰り返し | 異なる表現 | 表現の効果 [95%区間] |
|---|---|---|---|
| モデルA・GEO代理店 | 0.382 | 0.212 | 0.170 [0.072, 0.284] |
| モデルA・病院マーケティング | 0.226 | 0.086 | 0.139 [0.057, 0.259] |
| モデルA・釜山の広告代理店 | 0.408 | 0.162 | 0.246 [0.114, 0.367] |
| モデルB・GEO代理店 | 0.188 | 0.085 | 0.102 [0.036, 0.191] |
| モデルB・病院マーケティング | 0.063 | 0.037 | 0.026 [0.000, 0.057] |
| モデルB・釜山の広告代理店 | 0.149 | 0.021 | 0.127 [0.061, 0.221] |
モデルAは3つの意図すべてで事前に定めた基準を超え、「表現の効果あり」と判定されました。モデルBは基準を超えた意図が1つだけだったため、判定を保留しました。モデルBの病院マーケティングに関する質問は、同じ文を繰り返しても重なりが0.063にとどまり、表現の効果を切り分ける余地がありませんでした。
同じ企業の登場は、表現によってどのくらい変わりましたか?
意図別に最も多く推薦された企業を、各モデルから3社ずつ、計18社選びました。18社すべてが、ある表現では5回中0回の登場でした。モデルAの9社はすべて、別のある表現では5回すべてに登場しました。
1社の登場率を1つの文で測ると、0%にも100%にもなり得るということです。繰り返し回数を増やしても、この差は縮まりません。繰り返しで減るのは、同じ文の中でのばらつきだけだからです。
AIが検索段階で表現の違いを吸収するのではありませんか?
AIはユーザーの質問をそのまま検索せず、検索語に書き換えます。表現が違ってもAIが似た検索語にまとめるなら、差は縮まるはずです。今回の結果は、おおむねそうなりませんでした。
AIが実際に使った検索語の重なりでも、表現の効果はモデルBが0.08〜0.20、モデルAが0.05〜0.18でした。表現が異なると、検索語自体が変わりました。モデルBはキーワード型の質問では72%でしか検索せず、文章型では100%検索しました。回答の長さも、キーワード型は992文字で、文章型の1,812文字の半分ほどでした。
測定をどのように変えるべきでしょうか?
1つの意図を1つの文で代表させると、結果はその文に左右されます。同じ費用であれば、1つの文を何度も繰り返すより、表現を増やすほうが今回の結果に合っています。
自社の業種でAIが誰を推薦し、どの表現で自社が候補から外れるかを確認したい場合は、初回測定で質問設計から一緒に決められます。まずサイトがAIに読まれる状態かを確認したい場合は、無料ホームページ診断から始めてください。
この結果はどこまで信頼できますか?
対象は、企業の推薦を求める3つの意図と韓国語の30の表現、2種類のモデルです。2026-09-25の一時点で集めた結果であり、API経由の回答なので、一般向けアプリの画面と同じとは見なせません。ほかの業種やほかの意図でも同じ大きさの効果が出るとは一般化しません。
表現は実際の需要データだけから選んだため、GEO代理店を探す意図では、キーワード型7つ、文章型3つと均等ではありませんでした。ブログ・SEO・バイラルなど、具体的な業務が付いた質問を除いた分析でも、結論は同じでした。どの表現を使えば特定の企業が必ず推薦されるかという保証も、この結果から導くことはできません。
よくある質問(FAQ)
Q. 同じ質問をもっと繰り返せば解決しませんか?
解決しません。繰り返しは同じ文の中でのばらつきを減らすだけで、その文が意図を代表しているかどうかは変えられません。今回、推薦が最も多かった18社も、文によって登場回数が0回から5回まで変わりました。
Q. キーワードで尋ねる場合と文章で尋ねる場合は違いますか?
今回は違いました。モデルBはキーワード型の質問では72%でしか検索せず、文章型ではすべて検索しました。キーワード型だけで露出を測ると、そのモデルの結果が低く出る可能性があります。
Q. 表現によって企業が変わるのは、AIが間違っているということですか?
間違いというより、異なるものを探した結果です。表現が変わるとAIが使う検索語が変わり、それに応じて根拠とする情報源やおすすめ企業も変わりました。