プロンプトセット(Prompt Set)
プロンプトセットとは、ブランドがAIの回答にどう現れるかを測るために、AIモデルへ送る固定の質問リストです。可視性に関するどの指標も、その背後にあるプロンプトセットが実態を代表している範囲でしか、実態を反映しません。
なぜ重要なのか
同じブランドでも、何を尋ねるかによって、圧倒的に強く見えることもあれば、まったく見えないこともあります。購入検討者が実際にする質問で作ったプロンプトセットからは、事業の成果を見通せる数値が得られます。都合のよい質問で作ったものからは、見栄えはよくても何も見通せない数値しか得られません。
作り方
購入検討者が各段階で尋ねる質問を、本人が使う言葉のまま網羅します。
- カテゴリに関する質問:「少人数のチームに向いているプロジェクト管理ツールはどれですか?」
- 課題に関する質問:「サブスクリプション事業で解約率を下げるにはどうすればよいですか?」
- 評判に関する質問:「ブランドXは信頼できますか?」
- 地域に関する質問:「ドイツで事業を展開しているXのサプライヤーはどこですか?」
- ブランドに関する質問:「ブランドXは何をしている会社ですか?」見つけてもらえるかどうかではなく、正確さの確認に使います。
例:5つのグループにそれぞれ8問を用意すると、40問のセットになります。これを5つのモデルに送ると1回の実行で200件の回答が得られ、モデル間の比較や変化の追跡に十分な量になります。
プロンプトセットと関連する概念の違い
- SEOのキーワードリストは、短い検索語を集めたものです。プロンプトセットは、背景を含んだ文章での質問を集めたものです。
- プロンプトエンジニアリングは、モデルにタスクを実行させるための技術です。プロンプトセットは計測のための道具であり、一般のユーザーが入力する内容に近いものにします。
よくある間違い
- ブランド名を含む質問ばかりでセットを埋めること。必ず言及される結果になります。
- 実行のたびに質問を変えること。推移が追えなくなります。
- 顧客が使わないようなマーケティング用語で質問を書くこと。
- 購入検討者が複数の言語で質問しているのに、1つの言語だけでテストすること。
よくある質問
- プロンプトセットには何問含めるべきですか?
- 購買プロセスの各段階を網羅でき、かつ管理しきれなくならない程度の数です。1つの市場の1ブランドであれば、30〜60問が一般的な目安です。