チームはAIの推薦を1回見ただけで、レポートに載せたくなります。回ごとに結果がどう変わるかを確認し、自社のベースラインを使ってサンプルサイズ、再テスト頻度、レポートのしきい値を決めましょう。
12,000以上のニッチ市場を探索
Nov 05, 2026に更新されました
いいえ。1件の回答での1回の推薦は、手がかりにすぎません。2026年8月の3市場の収集記録では、1回目の回答でAppleに言及しなかったプロンプトのうち約9%が、数日後に同じことを聞き直すとAppleに言及する回答を得ました。これらの記録には、対応する既知のページ変更はありませんでした。結果をレポートに載せる前に、プロンプトを固定して変えないようにします。同じプロンプトをさらに数回聞き、毎回の新しい回答を保存します。変化は、既知の変更がないときに見られる変動より大きく、しかも数回続けてその水準を上回っている必要があります。その変動の大きさは、まず同じプロンプトを数回聞くことでわかります。この記事では、その数回を「ベースライン」と呼びます。
ブランド名入りとカテゴリのプロンプトの作り方でプロンプトセットを決めたら、次に必要なのはレポートのしきい値と、すべての結論に添える観察メモです。ここでの「割合」とは、ブランド名を含む回答がいくつあるかを意味します。たとえば1.2では、スマートウォッチ市場の1回目は回答380件のうち245件がAppleに言及し、64.47%でした。出てくることは推薦されることと同じではありません。回答の内容を読んで推薦かどうかを判断し、言及、推薦、引用の区別に沿って別に記録します。
チームが製品ページに情報を追加したばかりだとします。AIにもう一度聞くと、ブランドが推薦リストに入りました。コンテンツ担当者はスクリーンショットを保存し、週次レポートを用意します。「更新が効いた。AIが推薦し始めた」。
分析担当者としては、この手がかりをプロンプトセット全体に戻して見ます。ほかのプロンプトも変わったか。以前はブランドが入っていた回答が、言及しなくなっていないか。この方向は次の収集でも続くか。
2026年8月3日から19日に、Dagenoはスマートウォッチ、スマートフォン、ノートPCの3市場でAIの回答を収集しました。一部のプロンプトは2回聞かれています。同じプロンプトを、同じプラットフォーム、同じ地域で、数日後に一字一句同じまま聞き直したものです。
たとえば、あるプロンプトを8月4日にあるプラットフォームのある地域で聞き、8月10日に同じプラットフォームの同じ地域で聞き直すと、前と後の2つの回答が得られます。この記事では、このペアを「組み合わせ」と呼びます。先に聞いたものが1回目、後に聞いたものが2回目です。
これらの記録には、私たちが把握している対応するページ変更はありませんでした。そのため、1つの問いを調べるのに役立ちます。既知の変更がないとき、同じプロンプトを聞き直すと回答はどれくらい変わるのか、という問いです。
| 市場（2026年8月3日〜19日） | 2回聞かれた組み合わせ | 関係する異なるプロンプト |
|---|---|---|
| スマートウォッチ | 380 | 302 |
| スマートフォン | 1,658 | 1,397 |
| ノートPC | 1,411 | 924 |
組み合わせの数がプロンプトの数より多いのは、同じプロンプトが複数のプラットフォームや地域で2回聞かれていることがあるからです。2回の間隔は4日から16日で、約3分の2は5日から7日でした。1回目はすべて8月3日から6日、2回目はすべて8月10日から19日に行われ、具体的な日付は組み合わせごとに異なります。組み合わせは4〜5のプラットフォームと22〜29の地域にわたります。
Appleを例に取ります。
つまり、1回目にAppleに言及しなかった組み合わせのおよそ11に1つが、次には言及していたことになります。この集計はAppleというブランド名だけを対象とし、Apple WatchやApple Payのように別に記録された名前は含みません。
逆方向の変化も起きます。同じ組み合わせ全体の割合と合わせて見ると、何が起きたかがわかります。
| 市場（2026年8月3日〜19日） | 1回目にAppleに言及した組み合わせ | そのうち2回目に出てこなかった数 | 逆方向に変化した割合 | 1回目の全体の出現 | 2回目の全体の出現 |
|---|---|---|---|---|---|
| スマートウォッチ | 245 | 24 | 9.8% | 245/380（64.47%） | 233/380（61.32%） |
| スマートフォン | 959 | 65 | 6.8% | 959/1,658（57.84%） | 958/1,658（57.78%） |
| ノートPC | 616 | 77 | 12.5% | 616/1,411（43.66%） | 615/1,411（43.59%） |
スマートフォン市場では129の組み合わせで結果が変わったのに、合計は1しか減らず、差は0.1ポイント未満でした。ノートPC市場では153で結果が変わりましたが、合計はやはり1しか減らず、差は0.1ポイント未満でした。Appleが新たに出てきた回答だけを選ぶと、逆方向の変化がレポートから抜け落ちてしまいます。
スマートウォッチ市場の全体の割合は約3.2ポイント（12の組み合わせ）下がりましたが、これにも対応する既知の変更はありませんでした。あなたがこのブランドなら、この低下から「成績が悪くなった」と言うのは、1回の上昇から「改善した」と言うのと同じくらい根拠がありません。
別のブランドでは、1回目になく2回目に出てきた割合が違います。スマートウォッチ市場のGoogleは4.2%、ノートPC市場のDellは22.0%でした。Appleの9%をそのまま自社のしきい値に使うことはできません。しきい値は自社のベースラインで決めてください。
SparkToroのAIの推薦の一貫性に関する調査も、同じプロンプトを繰り返すと推薦リストが変わることを示しており、繰り返して集計した観察のほうが役に立つとしています。
その新しい推薦も保存しておく価値はあります。推薦の理由、製品の条件、引用元を調べる手がかりになります。分析担当者は元のプロンプトセットについて回答を集め続け、新たに出てきた記録、出てこないままの記録、以前は出ていたのに後で消えたブランドの記録を残します。
1件の回答は手がかりを見つけるのに役立ちます。レポートに必要なのは、プロンプトセット全体の数回分の結果です。
どれだけテストし、結果を見てからどれだけ待つかをその場で決めると、観察の計画が良いニュースに引きずられがちです。まずこの4つの設定を決め、チームがレポートを書くための一貫した基準を持てるようにします。
| 設定 | 何を決めるか | 小さすぎるとどうなるか | 誰が決めるか |
|---|---|---|---|
| プロンプト数 | 同じ範囲で全体の割合がそれ自体でどれだけ変動しうるか | 1〜2件の結果の変化が大きな割合を占める。重要なニーズを見落とすこともある | 分析担当者がまとめ、事業担当者がニーズの範囲を確認 |
| 再テストの回数と間隔 | 一時的な変動と持続的な変化を見分けられるか | 回数が少なすぎると、一時的な変動と持続的な変化を見分けにくい | 分析担当者が計画を提案し、クライアントがレポートの周期と観察の日程を確認 |
| プラットフォーム | 結論がどのAIプラットフォームに当てはまるか | テストしたプラットフォームに限られ、事業上重要なチャネルを見落とすことがある | クライアントまたはマーケティング担当者が事業上の重要度を確認 |
| 地域 | 結論がどの市場に当てはまるか | テストした地域に限られ、製品を販売している他の市場は別に観察が必要 | 製品担当者と地域の事業担当者が確認 |
プラットフォームと地域は、結論がどこに当てはまるかを決めます。プロンプト数と回数は、その結論が成り立つかを決めます。この記事での「グループ」とは、1つのプラットフォームの1つの地域でのプロンプトのことで、たとえば1つのプラットフォームの1つの地域での50のプロンプトです。グループごとに別に記録し、それぞれ自分のしきい値で判断します。
クライアントは、製品をどこで販売しているか、どのプラットフォームが事業にとって重要か、レポートをどのくらいの頻度で出すか、誰が結論をレポートに載せる承認権を持つかを確認する必要があります。そのうえで分析担当者が、各グループのプロンプト数、予定日、記録の保存場所を記録します。
プラットフォームごとの違いと地域ごとの違いは別々に観察し、それぞれの範囲で結論を書きます。上のAppleの記録では、3市場すべてでより安定していたプラットフォームはありませんでした。Geminiでは結果が変わった組み合わせがスマートウォッチ市場で12.7%、スマートフォン市場で5.8%、ChatGPTではこの2市場でそれぞれ5.8%と10.1%でした。プラットフォームごとに自分のベースラインが必要です。
クライアントは事業の範囲を確認します。分析担当者はその範囲を、繰り返せる観察計画に落とし込みます。レポートを承認する人も決めておきます。記録が欠けている、プロンプトが変わった、回数が終わっていない、といった場合に、レポートを延期するか再テスト待ちとするかを誰が決めるのか、ということです。
同じプロンプトを3つのプラットフォームの2つの地域で聞くと、プロンプトは1つ、組み合わせは6つです。プロンプトは文面の違いで数えます。組み合わせはプロンプト、プラットフォーム、地域で数えます。レポートのグループごとに、プロンプト数、組み合わせ数、実際の回答数を保存します。あるプラットフォームの割合を計算するときは、そのプラットフォームのプロンプト数だけで割ります。
1回とは、合意した期間内に同じプロンプトセットをもう一度聞き、新しい回答を集めることです。たとえば1.1の例のように、8月4日に聞いたプロンプトを8月10日に一字一句同じまま聞き直すと、新しい回の新しい回答が得られます。古い記録を開き直すのは、同じ回をもう一度見ているだけです。各回の開始日と終了日を記録し、回答全文を保存します。
たとえば、前回は50のプロンプトすべてに回答があったのに、今回は45しか返ってこなかったとします。まず欠けた5つの回答を集めます。ひとまずこの45だけを比べる場合は、比較が45のプロンプトを対象にしていることをレポートに書きます。合意した50のプロンプトすべてに回答が揃ったら、プロンプトセット全体が変わったかを判断します。
第1章の組み合わせからいくつかを無作為に選び、同じ選んだ組み合わせについて2回のAppleの出現を比べると、サンプルサイズが変動にどう影響するかがわかります。表の単位はポイントです。マイナスは2回目のほうが低いこと、プラスは高いことを表します。
| 1回の無作為抽出で選ぶ組み合わせ数 | スマートウォッチ | スマートフォン | ノートPC |
|---|---|---|---|
| 10 | −20.0〜+10.0 | −20.0〜+20.0 | −20.0〜+20.0 |
| 20 | −15.0〜+10.0 | −10.0〜+10.0 | −15.0〜+15.0 |
| 50 | −12.0〜+4.0 | −8.0〜+8.0 | −8.0〜+8.0 |
| 100 | −8.0〜+2.0 | −5.0〜+5.0 | −6.0〜+6.0 |
| 200 | −6.0〜0.0 | −3.5〜+3.5 | −4.5〜+4.0 |
まずこれらの組み合わせから10を、重複なしで無作為に選びます。そのうち2回目にAppleに言及した数が1回目より何件多いか少ないかを数え、差をポイントで表します。この抽出を10万回繰り返します。表は、結果の少なくとも95%が含まれる範囲を示しています。表のほかのサンプルサイズでも、それぞれ10万回抽出しています。1つのプラットフォームの1つの地域では、組み合わせ数とプロンプト数は同じです。
10の組み合わせを選んだとき、2回の全体の割合がまったく同じだったのは、それぞれ45.5%、51.6%、42.9%でした。およそ半分は差がありませんでした。10のうち1つ多くまたは少なくブランドに言及すると、それだけで10ポイントの差になります。
たとえば、1つのプラットフォームの1つの地域に20のプロンプトしかないなら、この3市場の記録からは、既知の変更がなくても2回の結果が10〜15ポイント違いうることがわかります。小さなサンプルでは、レポートに大きな跳ね上がりが出ることもあれば、上下の変化がたまたま打ち消し合うこともあります。表は自社のサンプルサイズでの変動の大きさをつかむために使い、ベースラインは自社のプロンプトセットで作ってください。範囲は、この3市場とこの日付での観察を表すものです。
次に、スマートウォッチ市場の日ごとの結果を見ます。表は、その日に少なくとも1つのブランドに言及した回答を数えています。回答数が最も少ない4日と最も多い3日を、少ない順に並べています。
| 収集日（2026年） | 回答数 | Appleに言及した回答 | 割合 |
|---|---|---|---|
| 8月16日 | 25 | 13 | 52.00% |
| 8月15日 | 71 | 46 | 64.79% |
| 8月17日 | 99 | 63 | 63.64% |
| 8月14日 | 108 | 82 | 75.93% |
| 8月4日 | 347 | 229 | 65.99% |
| 8月10日 | 541 | 321 | 59.33% |
| 8月19日 | 832 | 491 | 59.01% |
13の収集日のうち、最も低い割合は52.00%、最も高いのは75.93%でした。どちらの極端な値も、回答数の少ない日に出ています。回答が25件しかなければ、1件で4ポイントになります。
日ごとに聞いたプロンプトは異なり、この表は分母の大きさの影響を示しているだけです。時間の経過による変化を比べるには、プロンプト、プラットフォーム、地域を固定した組み合わせに戻ります。日ごとの割合が大きく跳ねたように見えたら、その傾向をレポートに載せるか決める前に、その日の回答数とプロンプトの範囲を保存してください。
プロンプト数を決めるときは、事業の範囲から始めます。中核のプロンプトが目標とする購入ニーズをカバーしていることを確認し、プラットフォーム、地域、ブランド名の有無で別々のグループを並べます。各グループの数は個別に確認します。全体のプロンプトセットが大きくても、あるグループにはわずかなプロンプトしか残らないことがあります。
たとえば5ポイントの変化を報告したいのに、そのグループに20のプロンプトしかないとします。3.1の表によれば、20の組み合わせでは2回の結果がすでに10〜15ポイント違いうるので、5ポイントの変化はそれと見分けるには小さすぎます。選択肢は3つです。購入者が実際に聞くプロンプトを追加する、回数を増やす、プロンプトの多いグループだけを報告し、レポートがどのグループを対象にしているかを明記する、です。数を増やすためだけに関係のないプロンプトを足すと、割合が元の購入ニーズを反映しなくなります。
ダッシュボードの推移を読むときは、曲線の途中で何が起きたかも見ます。2026年10月9日、AppleのスマートウォッチのBrand overviewで、Visibility trendのTable viewにはSep 11からSep 15までのAppleの値が64.79%、52.00%、63.64%、63.83%、59.38%と表示されていました。
最初と最後だけを比べると5.41ポイントの低下です。しかしSep 12は前後の日より11ポイント以上低く、翌日には63.64%に戻っています。最初から最後までの低下だけを書いたレポートは、途中の落ち込みと回復を省いてしまいます。
Brand overviewのChart viewにあるVisibility trend（2026年10月9日閲覧）。Sep 12にカーソルを合わせるとAppleは52.00%で、前後の日はどちらも63%を超えています。
同じ閲覧時、Change列にはAppleの5.41%の減少が表示されていました。これは最終日の59.38%から初日の64.79%を引いたもので、5.41ポイントと読むべきです。元の2つの値を残しておくと、レポートの単位を確認しやすくなります。
Table viewのVisibility trend（2026年10月9日閲覧）。各ブランドの5日分の値とChange列。AppleのChangeはSep 15からSep 11を引いた値です。
その日に見たSep 12の列では、各ブランドの値が52.00%、24.00%、32.00%、4.00%のように4.00%の倍数になっており、ほかの3ブランドは「–」でした。値がいくつかの決まった刻みに収まっているのは、その日の回答数が少ないことを示していることが多いです。
画面が示すのは日ごとの割合です。日ごとの回答数は別に確認し、ワークシートに記録してください。Chartのホバー表示にもTable viewにも日ごとの回答数は出ません。推移を説明する前に、レポートの該当する日付の横に回答数を書き足してください。
ベースラインを何回取るか、回と回の間隔、観察期間の合計を決めます。この3つを合わせると、レポートの締め切りまでにどんな証拠が揃うかが決まります。
ベースライン期間中は同じプロンプトセットを使い、既知の変更がないときに割合がどれだけ変動するかを把握します。1回分の保存は出発点にすぎず、2回分で差が1つ得られます。さらに観察を続けると、変動の幅が安定しているかを確かめられます。
まず間隔をレポートの周期に合わせます。分析担当者は締め切りから逆算して、ベースライン期間、その後の観察期間、実際の収集日を組み、クライアントに実現できるかを確認します。観察期間ごとに新しい回答を残します。記録が欠けたら、影響を受けるプロンプトのグループを記録し、もう一度収集を手配します。
観察期間の合計は、レポートの締め切りから逆算して決めます。たとえば月次レポートが月末締めで、1週間に1回聞くなら、1か月で4回になります。ベースライン3回とその後2回で合意していたら5回必要で、1か月では足りません。その場合、今月のレポートには「再テスト待ち」と書き、ベースラインは揃ったがその後の1回がまだ足りないことと、次の確認日を記します。今回のレポートで「変化を確認」と書くには、合意したすべての回が締め切り前に終わっていなければなりません。
同じ範囲で各回の割合を並べます。隣り合う回の差を確認し、次にベースライン期間全体での最低値と最高値の幅を確認します。チームはこの幅を変動のしきい値の出発点として使い、それを選んだ理由を記録できます。
以下は仮の例で、数字は計算方法を示すためだけのものです。あるグループに50のプロンプトがあり、ベースラインを4回取ったとします。ブランドに言及したプロンプトの数は20、22、19、21で、割合は40%、44%、38%、42%です。
最低は38%、最高は44%で、変動は6ポイントです。この6ポイントを変動のしきい値、つまりその後の変化が超えなければならない大きさとします。最後の回の42%をベースラインの比較値、つまりその後の各回と比べる割合とします。
次の2回が46%と45%なら、42%より4ポイントと3ポイント高いだけです。「再テスト待ち」と記録します。
50%と49%なら、42%より8ポイントと7ポイント高くなります。2回とも6ポイントのしきい値を超えています。「変化を確認」と記録します。
比較値としきい値を決めたら、その後のすべての回で同じ比較値と同じしきい値を使い、途中で変えません。事業として大きな変化だけを気にするなら、しきい値を高めに設定します。これらはすべて、その後の結果を見る前に決めておきます。
この記事のデータでは、各組み合わせは2回しか収集されていません。以下で説明する複数回のベースラインと「2回以上連続」は、自社のその後の記録で埋めていくレポートの方法です。
もう1回取ってもベースラインの変動がまだ大きく広がっているなら、収集を続け、状態を「ベースライン構築中」とします。これまでに見えたことと、あと何回が必要かの両方を説明し、レポートの承認者が次に何を確認すればよいかわかるようにします。
第1章のAppleの記録を収集の間隔の日数でグループ分けすると、結果が変わった組み合わせは次のとおりです。
| 間隔 | スマートウォッチ | スマートフォン | ノートPC |
|---|---|---|---|
| 4〜6日 | 157中16（10.2%） | 647中51（7.9%） | 548中55（10.0%） |
| 7日 | 100中9（9.0%） | 502中36（7.2%） | 350中43（12.3%） |
| 8〜10日 | 71中6（8.5%） | 326中26（8.0%） | 333中34（10.2%） |
| 11〜16日 | 52中5（9.6%） | 183中16（8.7%） | 180中21（11.7%） |
これらの記録の4〜16日の範囲では、間隔が長いか短いかによって、結果が変わる割合が一貫して高くなったり低くなったりする傾向は見られません。間隔のグループごとに、プラットフォームと地域の構成も異なります。チームは間隔をレポートの周期に合わせてかまいません。これらの記録には、もっと短い間隔や長い間隔は含まれていません。
2026年10月9日、Market overview → TrendsにはSep 11からSep 15までの5日間の日ごとの推移が表示されていました。画面の表示の細かさと、チームのレポートの周期は別に計画します。日ごとの曲線は経過を示し、合意した回数としきい値はいつレポートの結論を出すかを決めます。
ページをすでに変更しているなら、変更後に比較可能な観察を行う計画を使って更新日と新しい回答を保存し、レポートの計画を実際の変更と結びつけてください。
レポートの表記は、今ある記録がどの条件を満たしているかで決まります。上昇にも下降にも同じ基準を当てはめ、良いニュースも悪いニュースと同じように吟味します。
| 見えていること | レポートに書くこと | 次のステップ |
|---|---|---|
| ブランドや推薦が新たに出てきたのが1件の回答だけ | 再テスト待ち：新しい手がかりとして保存 | 元のプロンプトセットで次の回を収集 |
| 全体の割合が1回上がったが、ベースラインの変動の範囲内 | 再テスト待ち：今回は観察済みの変動の範囲内で上昇 | 合意したその後の回を終え、しきい値と照らし合わせる |
| 同じベースラインに対して2回以上続けて同じ方向に変化し、毎回しきい値を超え、条件が比較可能 | 変化を確認：上昇か下降か、範囲、ポイント、回数を明記 | 元の観察計画を続ける。説明が必要なら別に証拠を集める |
| 合意したその後の回が終わり、しきい値を超え続ける変化がない | この範囲としきい値では持続的な変化なし | 結果を保存し、次の期間も同じ範囲で続ける |
| 観察中にプロンプトセット、プラットフォーム、地域が変わった | 再テスト待ち：範囲が変わったので2つの期間を分けて報告 | 影響を受けた新しい範囲のベースラインを作る |
| 合意したプロンプトの回答が揃っていない、またはベースライン構築中 | 再テスト待ち：記録を補完中 | 欠けている項目と次の確認計画を明記 |
「2回連続」とは、ベースラインが確立したあとの新しい観察の2回で、それぞれ同じベースラインの比較値と照らし合わせて判断するものです。上がってから横ばいの割合も、毎回しきい値を超えていれば数に入ります。チームはベースラインの変動に応じて、もっと多い回数で合意してもかまいません。
「持続的な変化なし」は、合意どおりに観察が終わったときに使います。回が終わっていない、または回答が欠けているなら、再テスト待ちのままにして何が欠けているかを説明し、判断を保留します。
分析担当者はまず、プロンプトセットのバージョンと、プロンプトを聞くプラットフォームと地域を確定し、その組み合わせを使い続けます。各グループのプロンプト数と、各回に必要な回答を記録します。ベースラインの回が終わったら、比較に使う割合、すでに観察された変動、計算方法を保存します。そのうえで、クライアントが指名した承認者に、しきい値、変化が何回続く必要があるか、レポートの締め切りを確認してもらいます。
まず、そのグループの割合がベースライン期間中にすでにどれだけ動いたかを確認し、その大きさでしきい値を決めます。事業として大きな変化だけを気にするなら、しきい値を高めにして理由を記録します。レポートの日には各グループを確認し、条件を満たすグループについてだけ「変化を確認」と書きます。
次のルールをチームのワークシートに入れ、かっこ内を実際の内容で埋めてください。
（市場／プロンプトセットのバージョン／プラットフォーム／地域）の中核プロンプト（プロンプト数）件について、まず（実際の日付）にベースラインを（ベースラインの回数）回取り、回と回の間隔は（合意した間隔）とする。ベースラインの比較値を（割合）に固定し、（計算方法）で変動を（ポイント）と記録する。その後の新しい観察（少なくとも2回、正確な回数はチームが確認）のそれぞれが、このベースラインに対して同じ方向に変化し、毎回の変化が（しきい値のポイント）を超え、回答と範囲が揃っていれば、「変化を確認」と書く。その後の回は（締め切り）までに終え、結論は（承認者）が承認する。それ以外の場合は判断表に従う。
上の仮の例で埋めると次のようになります。
（市場／プロンプトセットのバージョン／プラットフォーム／地域）の中核プロンプト50件について、まず（実際の日付）にベースラインを4回取り、回と回の間隔は（合意した間隔）とする。ブランドに言及したプロンプトの数は20、22、19、21で、割合は40%、44%、38%、42%。最低は38%、最高は44%で、変動は6ポイント。最後の回の42%をベースラインの比較値とし、しきい値を6ポイントとする。次の2回が46%と45%なら、42%より4ポイントと3ポイント高いので「再テスト待ち」と記録する。50%と49%なら8ポイントと7ポイント高く、2回ともしきい値を超えている。回答が揃い、プロンプト、プラットフォーム、地域が変わっていなければ「変化を確認」と記録する。その後の2回は（締め切り）までに終え、結論は（承認者）が承認する。
週次レポートに載せようとしている新しい推薦を見る前に、このルールを埋めておきます。承認者が承認するのは繰り返し使える基準であり、その後の結論は1つずつこの基準と照らし合わせて確認されます。ルールを変える必要があるなら、変更日と理由を保存し、どの記録から適用するかを明記します。
「このグループの割合が変わった」は、比較可能な記録に基づきます。「このページ更新が変化を引き起こした」には、さらに変更日、編集した内容、そして新しい回答がどの事実や情報源を使ったかの証拠が必要です。それぞれの結論に合った証拠を添えます。
ページ更新後の指標の意味、情報源の確認、確認用のワークシートについては、ページ更新後に指標と回答の証拠を確認する方法に従ってください。まず期間中の既知の変更を観察メモに記録し、そのうえで回答を見て、その変更が使われているかを確認します。
売上シェアや費用対効果は、売上や財務の記録で別に測ります。ここでのしきい値は選んだAI回答の変化を扱うもので、事業担当者はそれを使ってさらに調べる必要があるかを判断できます。
「変化を確認」には、その範囲を添えます。メモには少なくとも、プロンプト数、プラットフォーム、地域、回数と日付、実際の変化、期間中に行った変更、まだ足りない証拠を書きます。そうすれば、読み手は対応する記録に戻って確認できます。
決まった形のテンプレートを使います。
（市場）で、固定したプロンプトセット（バージョン）の（プロンプト数）件について、（日付）に（プラットフォーム／地域）で新しい回答を（回数）回収集した。各回の有効で比較可能な回答は（件数）。ベースラインは（回数と日付）、比較値は（割合）、しきい値は（ポイント）。その後の各回の割合は（実際の値）で、ベースラインに対する変化は（ポイント）。合意した連続回数の条件のもとで、この観察は（レポート上の状態）と記録する。期間中の既知の変更は（日付、項目、内容）、まだ足りない証拠は（具体的な項目）。
あなたがこのブランドなら、Appleのスマートウォッチの記録に次のメモを添えられます。
この観察は、Dagenoが2026年8月3日から19日にスマートウォッチ市場で収集した回答を使っている。組み合わせは380で、異なるプロンプトは302、プラットフォームはGoogle AI Mode、Gemini、ChatGPT、Google AI Overviewの4つ、地域は22。1回目は8月3日から5日、2回目は8月10日から19日で、8月10日に202の組み合わせを含む。Appleは1回目に245の組み合わせ（64.47%）、2回目に233（61.32%）で出現し、約3.2ポイント（12の組み合わせ）の低下だった。この期間に、私たちが把握している対応するページ変更はなかった。現在は2回分の記録しかないため、この観察は「再テスト待ち」と記録する。次のステップは、このグループのベースラインを作り、合意した回数で観察を続けることだ。
この例では日付が組み合わせごとに異なるので、メモには日付の範囲を書いています。自社のメモは実際の記録で埋め、すでに集めた証拠が裏付ける表記を選んでください。
プロンプトの文面、プラットフォーム、地域、言語を固定します。各回の聞き方の条件も同じにします。ブランド名のまとめ方にも合意しておきます。たとえばApple WatchはAppleに数えるのか。この記事では別に数えています。どの回答を割合に含めるかにも合意します。たとえば、どのブランドにも言及しない回答は数えるのか。同じプロンプトに同じ日に2つの回答がある場合は、二重に数えないよう、どちらを残すかを事前に決めておきます。中核プロンプトはプロンプトセットを維持する方法で保存し、変更と回答の証拠は変更と回答の確認記録で残します。
予算、モデル、用途、言い回しが変わったら、プロンプトの新しいバージョンとして記録します。元の中核プロンプトは残し、古い範囲の結論はその範囲で判断します。そうすれば、新しいニーズを加えても、元のプロンプトの結果が続いているかを確認できます。
| 日付 | 何を変えたか（プロンプトセット、プラットフォームの範囲、地域、ページ） | どの結論に影響するか | 新しいベースラインはどの回から始まるか |
|---|---|---|---|
| 実際の変更日 | 実際に変えた範囲やページの内容。バージョンまたはURLを添える | 影響を受けるグループと結論。元の範囲の記録は残す | 観察の範囲や数え方のルールが変わったら、新しい範囲の最初の回を記入。ページだけが変わり範囲が固定なら、元のベースラインを残し、その後の最初の観察の回を記録 |
| （例）10月12日 | 予算に関するプロンプト5件をプロンプトセットに追加 | そのプラットフォームと地域のグループの全体の割合 | 元の50件は元のベースラインを維持。新しい5件は10月13日の回から別に記録し、ベースラインの回数が十分になってから合流させる |
表の2行目は例で、日付と件数は記入方法を示すためだけのものです。観察の条件が変わったら、前後の割合を分けて報告し、新しい範囲の出発点を作ります。プロンプトと数える範囲が固定のままページの内容だけが変わるなら、元のベースラインを残し、その後の記録で変化を確認します。古い条件と新しい条件の扱いは収集前に決め、担当者に確認してもらいます。
新しい推薦が出てきたら、分析担当者はまず回答を保存し、次にプロンプトセット全体、複数回の記録、しきい値が揃っているかを確認します。合意した条件を満たしていれば、範囲を明記して「変化を確認」と書きます。証拠が足りなければ「再テスト待ち」と書きます。観察が終わり、変化が続いていなければ、その範囲での結果として報告します。
クライアントにはレポートのしきい値の確認を依頼し、プロンプト数、ベースラインとその後の回数、間隔、変化のしきい値、承認者を明記します。各結論に観察メモを添え、実際の日付、期間中の変更、足りない証拠を残したうえで、次の確認日に合意します。
異なるプロンプトは1つのままです。プラットフォームと地域の組み合わせは別々に記録します。レポートには異なるプロンプトの数、組み合わせの数、回答の数を残します。各プラットフォームと地域のグループは、それぞれのプロンプト数とベースラインで判断します。
2回の出現の割合を比べるときは、差をポイントで書き、元の2つの値を残します。2026年10月9日に閲覧したAppleのスマートウォッチのVisibility trendの表では、初日が64.79%、最終日が59.38%で、Change列には5.41%の減少と表示されています。この2つの割合を引き算すると、レポート上は5.41ポイントの低下になります。
まず回答が欠けた理由を確認し、元のプロンプトの回答を補います。ひとまず両方の回で回答が揃っている範囲だけを比べるなら、範囲を絞ったことと件数を明記します。元の合意した範囲は再テスト待ちのままにし、欠けた分が埋まってから判断します。
古いレポートの日付と裏付けの証拠は残します。新しいレポートでは結論を「その後の観察で変化は続かなかった」に更新し、どの範囲に戻ったかを明記します。合意した担当者が結論を更新し、すべての回の記録を残して、ほかの人が以前の判断の根拠を確認できるようにします。
市場全体とその地域を分けて報告します。その地域が自分のしきい値に達しているなら、その地域について、プロンプト数、回数、日付を添えて「変化を確認」と書きます。全体の状態は、全体の記録から選びます。
Dageno is the research and insights team at Dageno AI, publishing industry reports and expert analysis on AI Search Visibility, Generative Engine Optimization (GEO), and AI-powered search discovery.
Read full bio
Alexa for Shopping
