AI可視性の順位は質問セットで決まる - 首位は維持され、4位以下は変動

この記事は2026年9月21日にIntrix Labが韓国語で公開した記事の翻訳です。

AI回答で最も多く引用されるのは誰かという順位は、質問セットによって変わります。2026-09-14時点のIntrixのCT調査6件（質問36件、回答540~1,080件）で、質問の半分を無作為に選んで500回順位を再計算した結果、首位のドメインは500回中360~500回、つまり10回中7回から全回まで維持され、上位10件の重複度（Jaccard）は0.72~0.84でしたが、4位以下のドメインは6件すべての調査で上位から圏外まで変動しました。GEOウォッチに掲載された論文は、可視性スコアを、実際の需要ではなく、評価に使われたプロンプトコーパスが定義する「回答市場」だとしていました。今回のデータでは、その指摘は上位より下位で当てはまりました。

なぜ新たな質問をせずに検証しましたか？

論文の主張は「質問セットを変えるとスコアが変わる」というものです。既存の調査内で質問の部分集合を抽出するだけでも、その効果の下限を測定できます。同じテーマの36の質問のうち18だけを使っても順位が変動するなら、テーマ自体を変えるとさらに変動します。費用は0でした。

どのように測定しましたか？

調査ごとに、すべての質問で決めた上位10ドメインの順位と、質問の半分だけで再計算した順位を500回比較しました。首位のドメインが維持された割合、上位3件と上位10件の重複度、そして各ドメインの順位がどこまで動いたかを調べました。

調査（業種）	首位維持	上位3件の重複度	上位10件の重複度	全質問で4位のドメインの再標本化時の順位
離婚関連の法律サービス	475/500	0.94	0.84	2位から圏外まで
個人回生（韓国の債務整理制度）関連の法律サービス	460/500	0.97	0.74	2位から10位まで
性犯罪関連の法律サービス	500/500	0.60	0.79	2位から圏外まで
ブランディング会社	365/500	0.91	0.72	3位から9位まで
子供服通販サイト	360/500	0.58	0.77	2位から圏外まで
GEO会社	500/500	0.88	0.77	3位から圏外まで

「圏外」は上位10件の外に下がったことを意味します。6件すべての調査で、全質問で4位のドメインは、ある再標本化では2~3位、別の再標本化では圏外でした。

なぜ上位は維持されますか？

法律関連の調査では、首位は法令サイト、2~3位は裁判所と大韓法律救助公団でした。どの質問を選んでも引用されるため、質問セットの影響を受けにくいのです。一方、4位以下は特定の少数の質問だけで引用されるホストなので、その質問が標本から外れると順位表から消えます。コマースとブランディングの調査では、首位でさえ500回中360~365回しか維持されませんでした。引用先が広く分散する業種で、上位への集中も弱いためです。

それを踏まえて、順位をどう読みますか？

「自社ブランドはAI可視性7位」という数字は、質問セットの関数です。上位3件という判定はセットを半分入れ替えてもおおむね維持されますが、それ以下の順位は、どの質問がいくつ含まれたかを併せて見なければ意味がありません。Intrixが調査ごとに質問セットの構成とカバレッジを表で併記する理由はここにあります。順位が上がったという報告を受けたら、まず質問セットが同じだったかを確認するのが適切です。

限界

再標本化は同じ質問群内の部分集合なので、別のテーマの質問群に変えた場合より変動が小さくなります。論文は採点ルールと重み付けの変更も扱っていましたが、ここでは質問構成だけを調べました。6件の調査はIntrixが実施した韓国語の調査であり、業種全体の標本ではありません。特定の順位を保証する根拠としては使いません。

よくある質問（FAQ）

Q. では、順位指標は役に立たないのですか？
いいえ。上位3件のような上位層は維持されます。それ以下は順位ではなく、「いくつの質問で候補に入ったか」のように質問単位の指標で見るほうが安定しています。

Q. 質問を増やせば解決しますか？
同じテーマ内では標本が大きくなるほど変動は小さくなりますが、テーマ構成が変わると再び変動します。質問数を増やすより先に、構成を固定することです。

Q. 自社の調査もこのように確認できますか？
質問単位で引用記録が残っている必要があります。Intrixは調査ごとに質問セットの構成とカバレッジを併せて提供しています。