ドキュメント

結果を分析する

プロンプトカバレッジ

各プロンプトを担当すべきページはどれか、そのページがプロンプトのファンアウト質問のうち実際にどれに答えているか、ギャップが大きく新しいページが必要になるのはどんなときかを解説します。

ChatGPTで開く Claudeで開く

定義

プロンプトカバレッジ

トラッキング中の1つのプロンプトについて、それを担当するものとして提案された自社ページと、その背後でエンジンが投げかけるすべてのファンアウト質問に対するCovered、Partial、Uncoveredの判定です。
範囲
Covered · Partial · Uncovered
確認場所
プロンプト詳細 → Coverage & ownership

何に答えるか#

エンジンは、プロンプトそのものだけでなく、その背後にあるサブ質問に答えるページを引用します(クエリファンアウトを参照)。プロンプトカバレッジは、それをToDoリストに変えます。

  • このプロンプトを担当すべきページはどれか? 質問とそのサブ質問に最も近い、自社サイト上の1つのURLです。
  • どのサブ質問に答えているか? 各ファンアウトクエリが、自社のページに対してスコアリングされます。
  • 更新か、新規ページか? まとまって欠けている質問は、後付けのセクションではなく、新規ページの候補として示されます。

計算方法#

サブ質問のスコアリング#

各ファンアウトクエリは、自社の候補ページそれぞれと比較されます。ページは要素(タイトル、見出し、段落)に分割され、ページのスコアは、最も一致する要素とクエリとの類似度(埋め込みのコサイン類似度、0〜1)です。クエリの状態は、最も良いページから決まります。

状態スコア
Covered0.75以上
Partial0.60〜0.75
Uncovered0.60未満

パネルにはこれらの区分(「covered ≥ 0.75 · partial ≥ 0.6」)と、「12件中5件のファンアウトクエリに対応が必要」のような件数が表示されます。

担当ページの提案#

担当スコア
50% × プロンプトとの類似度 + 50% × ファンアウトクエリとの平均類似度

配分を均等にしているのは意図的です。プロンプトには答えていてもサブ質問には1つも答えていないページはランディングページであり、担当ページではありません。サブトピックはカバーしていても質問そのものには答えていないページはハブです。どちらも、両方に答えるページを上回るべきではありません。スコアがPartialの区分(0.60)を下回るページが提案されることはありません。プロンプトにまだファンアウトがない場合は、プロンプトのみで担当ページがスコアリングされます。

新規ページ候補#

意味に基づいて3件以上のUncoveredの質問がまとまると、New page candidatesに「近くにページがないN件の関連ファンアウトクエリ」として表示されます。3件未満の場合は、既存ページに追加するセクションとして扱われます。

計算例#

あるプロンプトに12件のファンアウトクエリがあります。最も良いページのスコアは、4件で0.81、3件で0.66、5件で0.60未満でした。

  • Covered: 4、Partial: 3、Uncovered: 5となり、「12件中8件のファンアウトクエリに対応が必要」と表示されます。
  • Uncoveredの5件のうち3件がすべて料金と連携に関するものであれば、1つの新規ページ候補として表示されます。残りの2件は、担当ページに追加するセクションです。

候補となるページ#

カバレッジが比較するのは、すでにベクトルを持つページだけです。そのため、サイト全体を勝手にクロールすることはありません。

  • 引用されたページ。 お客様のプロンプトに対して、エンジンがすでに引用した自社ドメイン上のページ(最大50件)。
  • オーガニックキーワードの候補。 Search ConsoleまたはBing Webmaster Toolsが接続されている場合、直近90日間に関連クエリでオーガニックなインプレッションを獲得した自社ページ(最大5件)が、ページとクエリごとのインプレッションと平均掲載順位のグリッドとして表示されます。それぞれに、exact、fan-out、semantic、relatedのいずれの一致かがラベル付けされます。Search ConsoleとBingを参照してください。

2つの候補ページがオーガニッククエリを共有している場合、パネルには件数を示すバッジと、カニバリゼーションレポートへのリンクが表示されます。

担当ページの固定#

提案はあくまで提案です。どのページがプロンプトを担当すべきか分かっている場合は、Pin a pageでURLを入力し、Pinを選択してください。固定すると、そのページがクロール・分析され(ベクトルがなければ作成されます)、それに対してカバレッジが再計算されます。トーストには、再計算されたファンアウトクエリの数と請求されたクレジットが表示されます。Clear pinで、提案が再び優先されます。

No eligible pages to compareと表示された場合、自社のどのページにもまだベクトルがありません。一覧のファンアウトクエリは計画用の入力であり、確定したギャップではありません。候補を固定して、ベクトルを作成してください。

更新のタイミング#

カバレッジは、プロンプトのセマンティックマップが再構築された後と、担当ページを固定または解除したときに自動で再計算されます。何も変わっていない再計算(同じプロンプトテキスト、同じファンアウトセット、同じページベクトル)には費用がかかりません。選択した期間はスコアに影響しません。

カバレッジと引用分析ヒートマップの違い

カバレッジは自社のページをスコアリングします。ファンアウトテーブルのヒートマップは引用されたページをスコアリングします。そこで、引用されたどのソースも類似度0.55に届かないファンアウトクエリは、結果セット全体のギャップです。誰もうまく答えていないため、最も勝ちやすい質問です。

活用方法#

  1. 担当ページがある未ランクのプロンプトから始める。 PartialとUncoveredの質問を既存ページに追加するのが、最も低コストな対策です。
  2. セクションは直接的な回答として書く。 サブ質問ごとに見出しを1つ置き、最初の文で答え、その後に詳細を書きます。
  3. 新規ページ候補は新しいページとして作る。 プロンプト詳細ページのGenerate articleを使うか、クラスターをもとにライターへ指示してください。AI記事を参照してください。
  4. 次の実行後に再確認する。 ページが再分析されると、状態が更新されます。

関連ページ#