Apakah satu rekomendasi AI sudah dihitung sebagai perbaikan? Cara menentukan ukuran sampel dan frekuensi uji ulang sebelum masuk laporan
Tim melihat satu rekomendasi AI dan ingin memasukkannya ke laporan. Lihat bagaimana hasil berubah antarputaran, lalu gunakan baseline Anda sendiri untuk menentukan ukuran sampel, frekuensi uji ulang, dan ambang laporan.
Tidak. Satu rekomendasi dalam satu jawaban hanyalah petunjuk. Dalam catatan pengumpulan Agustus 2026 di tiga pasar, sekitar 9% prompt yang jawabannya di putaran pertama tidak menyebut Apple mendapat jawaban yang menyebutnya saat ditanyakan ulang beberapa hari kemudian; catatan ini tidak memiliki perubahan halaman yang diketahui. Sebelum memasukkan hasil ke laporan, tetapkan prompt-nya dan jangan diubah. Ajukan prompt yang sama beberapa putaran lagi dan simpan jawaban baru dari setiap putaran. Perubahan itu harus lebih besar dari fluktuasi yang terlihat tanpa perubahan yang diketahui, dan bertahan di atas tingkat itu selama beberapa putaran berturut-turut. Besarnya fluktuasi itu Anda ketahui dengan mengajukan prompt yang sama lebih dulu selama beberapa putaran; artikel ini menyebut putaran-putaran itu "baseline".
Jika hanya ada satu rekomendasi baru, kenaikan dalam satu putaran masih di dalam fluktuasi baseline, atau catatan yang bisa dibandingkan belum lengkap, tulis "Menunggu uji ulang".
Jika dua putaran berikutnya atau lebih berturut-turut berubah ke arah yang sama terhadap baseline yang sama, dan masing-masing melewati ambang yang disepakati, tulis "Perubahan teramati", beserta cakupan dan besar perubahannya.
Jika pengamatan yang disepakati sudah selesai tetapi tidak ada perubahan yang terus melewati ambang, tulis "Tidak ada perubahan berkelanjutan dalam cakupan dan ambang ini".
Setelah kumpulan prompt ditetapkan dengan metode untuk prompt merek dan prompt kategori, hasil berikutnya adalah ambang laporan dan catatan pengamatan yang dilampirkan pada setiap kesimpulan. "Proporsi" di sini berarti berapa banyak jawaban yang memuat nama merek. Misalnya, di Bagian 1.2, putaran pertama di pasar smartwatch berisi 380 jawaban, dan 245 di antaranya menyebut Apple: 64,47%. Muncul tidak sama dengan direkomendasikan. Baca isi jawabannya untuk memutuskan apakah itu rekomendasi, lalu catat secara terpisah dengan pembedaan antara sebutan, rekomendasi, dan kutipan.
1. Mengapa satu rekomendasi tidak cukup: hasil juga berubah tanpa perubahan yang diketahui
1.1 Anda memperbarui halaman, bertanya lagi, dan merek muncul
Misalkan tim baru saja menambahkan informasi ke halaman produk. Tim bertanya lagi ke AI, dan merek masuk ke daftar rekomendasi. Penanggung jawab konten menyimpan tangkapan layar dan menyiapkan laporan mingguan: "Pembaruannya berhasil. AI mulai merekomendasikan kita."
Sebagai penanggung jawab analisis, letakkan kembali petunjuk ini di dalam seluruh kumpulan prompt. Apakah prompt lain juga berubah? Apakah jawaban yang sebelumnya memuat merek kini tidak menyebutnya lagi? Apakah arah ini akan bertahan di putaran pengumpulan berikutnya?
Pada 3 hingga 19 Agustus 2026, Dageno mengumpulkan jawaban AI di pasar smartwatch, smartphone, dan laptop. Sebagian prompt ditanyakan dua kali: prompt yang sama, di platform yang sama, di wilayah yang sama, diulang kata demi kata beberapa hari kemudian.
Misalnya, prompt yang ditanyakan di satu platform dan satu wilayah pada 4 Agustus, lalu ditanyakan lagi di platform dan wilayah yang sama pada 10 Agustus, menghasilkan dua jawaban, satu lebih awal dan satu lebih akhir. Artikel ini menyebut pasangan seperti itu "kombinasi". Pertanyaan pertama adalah putaran pertama; pertanyaan berikutnya adalah putaran kedua.
Catatan ini tidak memiliki perubahan halaman yang kami ketahui. Karena itu catatan ini berguna untuk satu pertanyaan: tanpa perubahan yang diketahui, seberapa besar jawaban berubah saat prompt yang sama ditanyakan lagi?
Pasar (3–19 Agustus 2026)
Kombinasi yang ditanyakan dua kali
Prompt berbeda yang terlibat
Smartwatch
380
302
Smartphone
1.658
1.397
Laptop
1.411
924
Jumlah kombinasi lebih banyak dari prompt karena prompt yang sama bisa ditanyakan dua kali di beberapa platform atau wilayah. Jarak antara dua pertanyaan adalah 4 hingga 16 hari, dan sekitar dua pertiganya 5 hingga 7 hari. Semua putaran pertama berlangsung 3 hingga 6 Agustus dan semua putaran kedua 10 hingga 19 Agustus, dengan tanggal pasti yang berbeda per kombinasi. Kombinasi ini mencakup 4 sampai 5 platform dan 22 sampai 29 wilayah.
1.2 Tidak ada di kali pertama, muncul di kali berikutnya
Ambil Apple sebagai contoh:
Di pasar smartwatch, 135 kombinasi tidak menyebut Apple di putaran pertama. Dari jumlah itu, 12 menyebutnya di putaran kedua: 8,9%.
Di pasar smartphone, 699 tidak menyebutnya di putaran pertama. Dari jumlah itu, 64 menyebutnya di putaran kedua: 9,2%.
Di pasar laptop, 795 tidak menyebutnya di putaran pertama. Dari jumlah itu, 76 menyebutnya di putaran kedua: 9,6%.
Dengan kata lain, kira-kira 1 dari setiap 11 kombinasi yang tidak menyebut Apple di putaran pertama menyebutnya di putaran berikutnya. Hitungan ini hanya mencakup nama merek Apple, tanpa nama yang dicatat terpisah seperti Apple Watch dan Apple Pay.
Perubahan juga terjadi ke arah sebaliknya. Lihat bersama proporsi keseluruhan kombinasi yang sama untuk memahami apa yang terjadi.
Pasar (3–19 Agustus 2026)
Kombinasi yang menyebut Apple di putaran pertama
Dari jumlah itu, tidak ada di putaran kedua
Proporsi yang berubah ke arah sebaliknya
Kemunculan keseluruhan di putaran pertama
Kemunculan keseluruhan di putaran kedua
Smartwatch
245
24
9,8%
245/380 (64,47%)
233/380 (61,32%)
Smartphone
959
65
6,8%
959/1.658 (57,84%)
958/1.658 (57,78%)
Laptop
616
77
12,5%
616/1.411 (43,66%)
615/1.411 (43,59%)
Di pasar smartphone, 129 kombinasi berubah hasil, tetapi totalnya hanya turun 1, selisih kurang dari 0,1 poin persentase. Di pasar laptop, 153 kombinasi berubah, dan totalnya juga hanya turun 1, selisih kurang dari 0,1 poin persentase. Memilih hanya jawaban yang memunculkan Apple akan membuat perubahan ke arah sebaliknya hilang dari laporan.
Proporsi keseluruhan di pasar smartwatch turun sekitar 3,2 poin persentase (12 kombinasi), juga tanpa perubahan yang diketahui. Jika Anda adalah merek ini, menyimpulkan kinerja memburuk berdasarkan penurunan ini sama lemahnya dengan menyimpulkan perbaikan berdasarkan satu kenaikan.
Untuk merek lain, proporsi yang berubah dari tidak ada di putaran pertama menjadi ada di putaran kedua berbeda: 4,2% untuk Google di pasar smartwatch dan 22,0% untuk Dell di pasar laptop. Anda tidak bisa langsung memakai 9% milik Apple sebagai ambang; tentukan ambang dengan baseline Anda sendiri.
1.3 Ubah satu petunjuk menjadi beberapa putaran pada satu kumpulan prompt
Riset SparkToro tentang konsistensi rekomendasi AI juga menemukan bahwa mengulang prompt yang sama menghasilkan daftar rekomendasi yang berbeda, sehingga pengamatan berulang yang digabungkan lebih berguna.
Rekomendasi baru itu tetap layak disimpan. Rekomendasi itu membantu tim memeriksa alasan rekomendasi, persyaratan produk, dan sumber yang dikutip. Penanggung jawab analisis sebaiknya terus mengumpulkan jawaban untuk kumpulan prompt awal, dan menyimpan catatan kemunculan baru, ketidakhadiran yang berlanjut, serta merek yang dulu muncul lalu menghilang.
Satu jawaban membantu menemukan petunjuk. Laporan membutuhkan hasil dari beberapa putaran pada satu kumpulan prompt.
2. Apa yang ditentukan jumlah prompt, putaran uji ulang, platform, dan wilayah
2.1 Empat pengaturan menjawab empat pertanyaan laporan
Menentukan seberapa banyak menguji dan berapa lama menunggu setelah melihat hasil bisa membuat rencana pengamatan mengikuti kabar baik. Tetapkan empat pengaturan ini lebih dulu agar tim punya dasar pelaporan yang konsisten.
Pengaturan
Apa yang ditentukannya
Apa yang terjadi jika terlalu kecil
Siapa yang memutuskan
Jumlah prompt
Seberapa besar proporsi keseluruhan dalam cakupan yang sama bisa berfluktuasi dengan sendirinya
Satu atau dua hasil yang berubah porsinya besar; kebutuhan penting juga bisa terlewat
Cakupan terbatas pada platform yang diuji; saluran bisnis penting bisa terlewat
Klien atau penanggung jawab pemasaran mengonfirmasi kepentingan bisnisnya
Wilayah
Pasar mana yang dicakup kesimpulan
Cakupan terbatas pada wilayah yang diuji; pasar lain tempat produk dijual perlu diamati terpisah
Penanggung jawab produk dan bisnis regional mengonfirmasi
Platform dan wilayah menentukan di mana kesimpulan berlaku. Jumlah prompt dan putaran menentukan apakah kesimpulan itu bisa dipertanggungjawabkan. "Kelompok" dalam artikel ini berarti prompt di satu platform di satu wilayah, misalnya 50 prompt di satu platform di satu wilayah. Catat setiap kelompok secara terpisah dan nilai masing-masing dengan ambangnya sendiri.
2.2 Empat keputusan yang harus dikonfirmasi klien
Klien perlu mengonfirmasi di mana produk dijual, platform mana yang penting bagi bisnis, seberapa sering laporan diterbitkan, dan siapa yang berwenang menyetujui kesimpulan untuk laporan. Lalu penanggung jawab analisis mencatat jumlah prompt, tanggal rencana, dan lokasi penyimpanan catatan untuk setiap kelompok.
Amati perbedaan antarplatform dan perbedaan antarwilayah secara terpisah, lalu tulis kesimpulan di dalam setiap cakupan. Dalam catatan Apple di atas, tidak ada platform yang lebih stabil di ketiga pasar: di Gemini, kombinasi yang berubah hasil sebesar 12,7% di pasar smartwatch dan 5,8% di pasar smartphone; di ChatGPT, proporsinya di kedua pasar itu masing-masing 5,8% dan 10,1%. Setiap platform membutuhkan baseline-nya sendiri.
Klien mengonfirmasi cakupan bisnis. Penanggung jawab analisis mengubah cakupan itu menjadi rencana pengamatan yang bisa diulang. Orang yang menyetujui laporan juga perlu ditentukan: siapa yang memutuskan menunda laporan atau menandai hasil sebagai Menunggu uji ulang ketika catatan hilang, prompt berubah, atau putaran belum selesai?
2.3 Definisikan dulu apa itu satu prompt dan satu putaran
Menanyakan prompt yang sama di 3 platform dan 2 wilayah menghasilkan 1 prompt dan 6 kombinasi. Hitung prompt berdasarkan rumusan yang berbeda. Hitung kombinasi berdasarkan prompt, platform, dan wilayah. Untuk setiap kelompok laporan, simpan jumlah prompt, jumlah kombinasi, dan jumlah jawaban sebenarnya. Saat menghitung proporsi satu platform, bagi hanya dengan jumlah prompt platform tersebut.
Satu putaran berarti menanyakan ulang kumpulan prompt yang sama dalam periode yang disepakati dan mengumpulkan jawaban baru. Misalnya, dengan pengaturan di Bagian 1.1, prompt yang ditanyakan pada 4 Agustus lalu diulang kata demi kata pada 10 Agustus menghasilkan jawaban baru untuk putaran baru. Membuka ulang catatan lama hanyalah melihat ulang putaran yang sama. Catat tanggal mulai dan selesai setiap putaran, dan simpan jawaban lengkapnya.
Misalnya, jika di putaran sebelumnya ke-50 prompt punya jawaban tetapi kali ini hanya 45 yang kembali, kumpulkan dulu jawaban untuk 5 yang hilang. Jika untuk sementara Anda hanya membandingkan 45 ini, tulis di laporan bahwa perbandingannya mencakup 45 prompt. Setelah ke-50 prompt yang disepakati punya jawaban, nilai apakah kumpulan prompt lengkap berubah.
3. Cara menentukan jumlah prompt: kumpulan kecil berfluktuasi lebih besar
3.1 Lihat seberapa jauh dua putaran bisa berbeda pada ukuran sampel Anda
Memilih acak sebagian kombinasi dari Bagian 1 dan membandingkan kemunculan Apple di dua putaran pada kombinasi terpilih yang sama memperlihatkan pengaruh ukuran sampel terhadap fluktuasi. Tabel memakai poin persentase. Nilai negatif berarti putaran kedua lebih rendah; nilai positif berarti lebih tinggi.
Kombinasi dalam setiap pemilihan acak
Smartwatch
Smartphone
Laptop
10
−20,0 hingga +10,0
−20,0 hingga +20,0
−20,0 hingga +20,0
20
−15,0 hingga +10,0
−10,0 hingga +10,0
−15,0 hingga +15,0
50
−12,0 hingga +4,0
−8,0 hingga +8,0
−8,0 hingga +8,0
100
−8,0 hingga +2,0
−5,0 hingga +5,0
−6,0 hingga +6,0
200
−6,0 hingga 0,0
−3,5 hingga +3,5
−4,5 hingga +4,0
Pertama, pilih acak 10 dari kombinasi ini, tanpa pengulangan di antara ke-10 itu. Hitung berapa banyak di antaranya yang menyebut Apple lebih banyak atau lebih sedikit di putaran kedua dibanding putaran pertama, lalu nyatakan selisihnya dalam poin persentase. Ulangi pemilihan ini 100.000 kali. Tabel menunjukkan rentang yang memuat setidaknya 95% hasil. Ukuran sampel lain di tabel juga masing-masing dipilih 100.000 kali. Untuk satu platform dan satu wilayah, jumlah kombinasi sama dengan jumlah prompt.
Saat memilih 10 kombinasi, kedua putaran punya proporsi keseluruhan yang persis sama pada 45,5%, 51,6%, dan 42,9% kasus. Kira-kira separuhnya tidak berbeda. Jika 1 dari 10 lebih atau kurang menyebut merek, selisihnya sudah 10 poin persentase.
Misalnya, jika Anda hanya punya 20 prompt di satu platform di satu wilayah, catatan ketiga pasar ini menunjukkan dua putaran bisa berbeda 10 hingga 15 poin persentase tanpa perubahan yang diketahui. Sampel kecil bisa menghasilkan lonjakan besar di laporan, atau kenaikan dan penurunan yang kebetulan saling meniadakan. Gunakan tabel untuk memahami skala fluktuasi pada ukuran sampel Anda, lalu bangun baseline dengan kumpulan prompt Anda sendiri. Rentang ini menggambarkan pengamatan di tiga pasar ini dan pada tanggal-tanggal ini.
3.2 Simpan jumlah jawaban setiap hari
Sekarang lihat hasil harian di pasar smartwatch. Tabel menghitung jawaban yang menyebut setidaknya satu merek pada hari itu. Tabel mencantumkan empat hari dengan jawaban paling sedikit dan tiga hari dengan jawaban paling banyak, diurutkan dari yang paling sedikit.
Tanggal pengumpulan (2026)
Jawaban
Jawaban yang menyebut Apple
Proporsi
16 Agustus
25
13
52,00%
15 Agustus
71
46
64,79%
17 Agustus
99
63
63,64%
14 Agustus
108
82
75,93%
4 Agustus
347
229
65,99%
10 Agustus
541
321
59,33%
19 Agustus
832
491
59,01%
Dari 13 hari pengumpulan, proporsi terendah 52,00% dan tertinggi 75,93%. Kedua nilai ekstrem itu terjadi pada hari dengan jawaban lebih sedikit. Dengan hanya 25 jawaban, 1 jawaban bernilai 4 poin persentase.
Prompt yang ditanyakan setiap hari berbeda; tabel ini hanya menggambarkan pengaruh besar penyebut. Untuk membandingkan perubahan dari waktu ke waktu, kembalilah ke kombinasi dengan prompt, platform, dan wilayah yang tetap. Saat proporsi harian tampak melonjak tajam, simpan jumlah jawaban dan cakupan prompt hari itu sebelum memutuskan apakah tren itu masuk laporan.
3.3 Tentukan jumlah prompt menurut cakupan bisnis, dan perubahan yang bisa dilaporkan menurut baseline
Mulailah dari cakupan bisnis saat menentukan jumlah prompt. Pastikan prompt inti mencakup kebutuhan pembelian yang ditargetkan, lalu daftarkan kelompok terpisah menurut platform, wilayah, dan apakah merek disebut. Periksa jumlah tiap kelompok satu per satu: kumpulan prompt yang besar secara keseluruhan bisa saja hanya menyisakan sedikit prompt di satu kelompok.
Misalnya, Anda ingin melaporkan perubahan 5 poin persentase, dan kelompok ini hanya punya 20 prompt. Menurut tabel di Bagian 3.1, dengan 20 kombinasi dua putaran sudah bisa berbeda 10 hingga 15 poin persentase, sehingga perubahan 5 poin terlalu kecil untuk dibedakan dari itu. Anda punya tiga pilihan: menambah prompt yang benar-benar ditanyakan pembeli; menambah putaran; atau hanya melaporkan kelompok dengan prompt lebih banyak, dan menyebutkan kelompok mana yang dicakup laporan. Menambah prompt yang tidak relevan hanya demi menambah jumlah membuat proporsi tidak lagi mencerminkan kebutuhan pembelian awal.
3.4 Baca tren dasbor bersama nilai harian dan jumlah jawaban
Saat membaca tren dasbor, perhatikan juga apa yang terjadi di tengah kurva. Pada 9 Oktober 2026, di Brand overview pasar smartwatch Apple, Table view pada Visibility trend menampilkan nilai Apple dari Sep 11 hingga Sep 15: 64,79%, 52,00%, 63,64%, 63,83%, dan 59,38%.
Membandingkan awal dan akhir saja menghasilkan penurunan 5,41 poin persentase. Namun Sep 12 lebih dari 11 poin persentase di bawah kedua hari di sebelahnya, dan keesokan harinya kembali ke 63,64%. Laporan yang hanya menyebut penurunan dari awal ke akhir melewatkan penurunan dan pemulihan di tengahnya.
Visibility trend di Chart view pada Brand overview (dilihat 9 Oktober 2026): saat kursor diarahkan ke Sep 12, Apple di 52,00%, dan kedua hari di sebelahnya di atas 63%.
Pada tampilan yang sama, kolom Change menunjukkan penurunan 5,41% untuk Apple. Ini sama dengan 59,38% pada hari terakhir dikurangi 64,79% pada hari pertama, dan perlu dibaca sebagai 5,41 poin persentase. Menyimpan kedua nilai asli memudahkan pemeriksaan satuan di laporan.
Visibility trend di Table view (dilihat 9 Oktober 2026): lima nilai harian untuk setiap merek dan kolom Change. Change milik Apple adalah Sep 15 dikurangi Sep 11.
Di kolom Sep 12 yang dilihat hari itu, nilai merek-merek adalah kelipatan 4,00%, seperti 52,00%, 24,00%, 32,00%, dan 4,00%, sementara tiga merek lain menampilkan "–". Nilai yang hanya jatuh pada beberapa tingkat tetap biasanya menandakan jumlah jawaban yang sedikit pada hari itu.
Antarmuka menyediakan proporsi harian. Konfirmasikan jumlah jawaban setiap hari secara terpisah dan catat di lembar kerja. Baik detail saat kursor diarahkan di Chart maupun Table view tidak menampilkan jumlah jawaban harian; tambahkan jumlah itu di samping tanggal yang bersangkutan di laporan sebelum menjelaskan trennya.
4. Cara menentukan frekuensi uji ulang: bangun baseline, lalu tentukan jaraknya
4.1 Tuliskan dulu tiga besaran
Tentukan berapa putaran baseline yang dikumpulkan, jarak antarputaran, dan total periode pengamatan. Bersama-sama, ketiganya menentukan bukti apa yang tersedia pada tenggat laporan.
Gunakan kumpulan prompt yang sama selama periode baseline untuk mengetahui seberapa besar proporsi berfluktuasi tanpa perubahan yang diketahui. Satu putaran yang tersimpan adalah titik awal; dua putaran memberi satu selisih. Pengamatan lebih lanjut memungkinkan Anda memeriksa apakah rentang fluktuasinya stabil.
Mulailah dengan menyelaraskan jarak dengan siklus laporan. Penanggung jawab analisis menghitung mundur dari tenggat untuk menjadwalkan periode baseline, periode pengamatan berikutnya, dan tanggal pengumpulan sebenarnya, lalu meminta klien mengonfirmasi kelayakannya. Simpan jawaban baru untuk setiap periode pengamatan. Jika ada catatan yang hilang, catat kelompok prompt mana yang terdampak dan jadwalkan pengumpulan lagi.
Hitung mundur dari tenggat laporan untuk menentukan total periode pengamatan. Misalnya, jika laporan bulanan ditutup di akhir bulan dan Anda menanyakan satu putaran per minggu, Anda mendapat empat putaran dalam sebulan. Jika Anda menyepakati tiga putaran baseline dan dua putaran berikutnya, Anda butuh lima, lebih dari yang dimungkinkan sebulan. Dalam hal itu, laporan bulan ini menulis "Menunggu uji ulang", mencatat bahwa baseline sudah lengkap dan masih kurang satu putaran berikutnya, serta mencantumkan tanggal tinjauan berikutnya. Untuk menulis "Perubahan teramati" di laporan saat ini, semua putaran yang disepakati harus selesai sebelum tenggat.
4.2 Gunakan baseline untuk menentukan ambang Anda sendiri
Daftarkan proporsi setiap putaran dalam cakupan yang sama. Periksa selisih antarputaran yang berdekatan, lalu rentang antara nilai terendah dan tertinggi di seluruh periode baseline. Tim bisa memakai rentang itu sebagai titik awal ambang fluktuasi, sambil mencatat alasan memilihnya.
Berikut contoh hipotetis, dengan angka yang hanya dipakai untuk menunjukkan perhitungannya. Misalkan sebuah kelompok punya 50 prompt dan empat putaran baseline. Jumlah prompt yang menyebut merek adalah 20, 22, 19, dan 21, sehingga proporsinya 40%, 44%, 38%, dan 42%.
Yang terendah 38% dan yang tertinggi 44%, fluktuasi 6 poin persentase. Tetapkan 6 poin persentase ini sebagai ambang fluktuasi: besar yang harus dilampaui perubahan berikutnya. Tetapkan 42% pada putaran terakhir sebagai nilai pembanding baseline: proporsi yang dipakai untuk membandingkan setiap putaran berikutnya.
Jika dua putaran berikutnya 46% dan 45%, keduanya hanya 4 dan 3 poin persentase di atas 42%. Catat "Menunggu uji ulang".
Jika keduanya 50% dan 49%, keduanya 8 dan 7 poin persentase di atas 42%. Kedua putaran melampaui ambang 6 poin persentase. Catat "Perubahan teramati".
Setelah nilai pembanding dan ambang ditetapkan, gunakan nilai pembanding yang sama dan ambang yang sama untuk setiap putaran berikutnya, tanpa mengubahnya di tengah jalan. Jika bisnis hanya peduli pada perubahan yang lebih besar, tetapkan ambang yang lebih tinggi. Putuskan semua ini sebelum melihat hasil berikutnya.
Dalam data artikel ini, setiap kombinasi hanya dikumpulkan dua kali. Baseline beberapa putaran dan "dua putaran berturut-turut atau lebih" yang dijelaskan di bawah adalah metode pelaporan yang perlu diisi dengan catatan Anda sendiri berikutnya.
Jika fluktuasi baseline masih melebar cukup besar setelah satu putaran lagi, teruskan pengumpulan dan beri label status "Baseline masih dibangun". Jelaskan apa yang sudah Anda lihat dan putaran mana yang masih dibutuhkan, agar orang yang menyetujui laporan tahu apa yang perlu diperiksa berikutnya.
4.3 Selaraskan jarak dengan siklus laporan
Jika catatan Apple di Bagian 1 dikelompokkan menurut jarak hari antarpengumpulan, kombinasi yang berubah hasil adalah sebagai berikut.
Jarak
Smartwatch
Smartphone
Laptop
4–6 hari
16 dari 157 (10,2%)
51 dari 647 (7,9%)
55 dari 548 (10,0%)
7 hari
9 dari 100 (9,0%)
36 dari 502 (7,2%)
43 dari 350 (12,3%)
8–10 hari
6 dari 71 (8,5%)
26 dari 326 (8,0%)
34 dari 333 (10,2%)
11–16 hari
5 dari 52 (9,6%)
16 dari 183 (8,7%)
21 dari 180 (11,7%)
Dalam rentang 4 hingga 16 hari di catatan ini, jarak yang lebih panjang atau lebih pendek tidak menunjukkan pola konsisten berupa proporsi perubahan hasil yang lebih tinggi atau lebih rendah. Komposisi platform dan wilayah juga berbeda antarkelompok jarak. Tim bisa menyelaraskan jarak dengan siklus laporannya. Catatan ini tidak memuat jarak yang lebih pendek atau lebih panjang.
Pada 9 Oktober 2026, Market overview → Trends menampilkan tren harian untuk Sep 11 hingga Sep 15, total lima hari. Rencanakan tingkat rincian tampilan antarmuka dan siklus laporan tim secara terpisah: kurva harian menunjukkan jalannya peristiwa, sedangkan putaran dan ambang yang disepakati menentukan kapan menarik kesimpulan untuk laporan.
5. Ambang laporan: kapan menulis "Perubahan teramati" atau "Menunggu uji ulang"
5.1 Gunakan bukti untuk memilih kesimpulan atas petunjuk yang sama
Label laporan bergantung pada syarat mana yang dipenuhi catatan saat ini. Terapkan standar yang sama untuk kenaikan dan penurunan, agar kabar baik diperiksa seketat kabar buruk.
Yang Anda lihat
Yang ditulis di laporan
Langkah berikutnya
Merek atau rekomendasi muncul baru hanya di satu jawaban
Menunggu uji ulang: simpan sebagai petunjuk baru
Kumpulkan putaran berikutnya untuk kumpulan prompt awal
Proporsi keseluruhan naik dalam satu putaran, masih di dalam fluktuasi baseline
Menunggu uji ulang: putaran ini naik di dalam rentang fluktuasi yang teramati
Selesaikan putaran berikutnya yang disepakati, lalu bandingkan dengan ambang
Dua putaran berturut-turut atau lebih berubah ke arah yang sama terhadap baseline yang sama, masing-masing melampaui ambang, dan kondisinya bisa dibandingkan
Perubahan teramati: sebutkan naik atau turun, cakupan, poin persentase, dan putaran
Lanjutkan rencana pengamatan awal; kumpulkan bukti terpisah jika perlu penjelasan
Putaran berikutnya yang disepakati selesai, tanpa perubahan yang terus melampaui ambang
Tidak ada perubahan berkelanjutan dalam cakupan dan ambang ini
Simpan hasilnya dan lanjutkan dengan cakupan yang sama di periode berikutnya
Kumpulan prompt, platform, atau wilayah berubah selama pengamatan
Menunggu uji ulang: cakupan berubah; laporkan kedua periode secara terpisah
Bangun baseline untuk cakupan baru yang terdampak
Jawaban untuk prompt yang disepakati belum lengkap, atau baseline masih dibangun
Menunggu uji ulang: catatan masih dilengkapi
Sebutkan yang kurang dan rencana tinjauan berikutnya
"Dua putaran berturut-turut" berarti dua putaran pengamatan baru setelah baseline ditetapkan, masing-masing dinilai terhadap nilai pembanding baseline yang sama. Proporsi yang naik lalu bertahan juga dihitung, selama tetap di atas ambang di setiap putaran. Tim bisa menyepakati lebih banyak putaran berdasarkan fluktuasi baseline-nya.
"Tidak ada perubahan berkelanjutan" berlaku setelah pengamatan selesai sesuai kesepakatan. Jika putaran belum selesai atau jawaban hilang, pertahankan Menunggu uji ulang dan jelaskan apa yang kurang, sehingga penilaian tetap terbuka.
5.2 Ubah prinsip menjadi ambang laporan
Penanggung jawab analisis lebih dulu menetapkan versi kumpulan prompt serta platform dan wilayah tempat prompt ditanyakan, lalu terus memakai pengaturan itu. Ia mencatat berapa prompt di setiap kelompok dan jawaban apa yang dibutuhkan setiap putaran. Setelah putaran baseline selesai, ia menyimpan proporsi untuk pembanding, fluktuasi yang sudah teramati, dan metode perhitungannya. Lalu ia meminta penyetuju yang ditunjuk klien mengonfirmasi ambang, berapa putaran perubahan harus bertahan, dan tenggat laporan.
Periksa dulu seberapa jauh proporsi kelompok ini sudah bergerak selama periode baseline, lalu gunakan besar itu untuk menetapkan ambang. Jika bisnis hanya peduli pada perubahan yang lebih besar, tetapkan ambang lebih tinggi dan catat alasannya. Pada hari pelaporan, periksa setiap kelompok. Tulis "Perubahan teramati" hanya untuk kelompok yang memenuhi syarat.
Masukkan aturan ini ke lembar kerja tim, dan isi bagian dalam kurung dengan rincian sebenarnya:
Untuk (jumlah prompt) prompt inti di (pasar / versi kumpulan prompt / platform / wilayah), selesaikan dulu (jumlah putaran baseline) putaran baseline pada (tanggal sebenarnya), dengan (jarak yang disepakati) antarputaran. Tetapkan nilai pembanding baseline di (proporsi) dan catat fluktuasi sebesar (poin persentase) dengan (metode perhitungan). Jika masing-masing dari (minimal dua putaran berikutnya, jumlah pastinya dikonfirmasi tim) putaran pengamatan baru berubah ke arah yang sama terhadap baseline itu, setiap perubahan melampaui (ambang dalam poin persentase), dan jawaban serta cakupannya lengkap, tulis "Perubahan teramati". Selesaikan putaran berikutnya sebelum (tenggat), dengan kesimpulan disetujui oleh (penyetuju); untuk kasus lain, gunakan tabel keputusan.
Diisi dengan contoh hipotetis di atas:
Untuk 50 prompt inti di (pasar / versi kumpulan prompt / platform / wilayah), selesaikan dulu empat putaran baseline pada (tanggal sebenarnya), dengan (jarak yang disepakati) antarputaran. Jumlah prompt yang menyebut merek adalah 20, 22, 19, dan 21, sehingga proporsinya 40%, 44%, 38%, dan 42%. Yang terendah 38% dan tertinggi 44%, fluktuasi 6 poin persentase. Tetapkan 42% pada putaran terakhir sebagai nilai pembanding baseline dan ambang di 6 poin persentase. Jika dua putaran berikutnya 46% dan 45%, keduanya 4 dan 3 poin persentase di atas 42%; catat "Menunggu uji ulang". Jika 50% dan 49%, keduanya 8 dan 7 poin persentase lebih tinggi. Kedua putaran melampaui ambang. Dengan jawaban lengkap serta prompt, platform, dan wilayah yang tidak berubah, catat "Perubahan teramati". Selesaikan kedua putaran berikutnya sebelum (tenggat), dengan kesimpulan disetujui oleh (penyetuju).
Isi aturan ini sebelum meninjau rekomendasi baru yang ingin dimasukkan ke laporan mingguan. Penyetuju menyetujui standar yang bisa dipakai ulang, dan setiap kesimpulan berikutnya diperiksa terhadapnya. Jika aturan perlu diubah, simpan tanggal dan alasan perubahannya, serta tunjukkan catatan mana yang pertama kali memakainya.
5.3 Kumpulkan bukti terpisah untuk perubahan dan penyebabnya
"Proporsi kelompok ini berubah" bersandar pada catatan yang bisa dibandingkan. "Pembaruan halaman ini menyebabkan perubahan" juga membutuhkan tanggal perubahan, isi yang diedit, dan bukti fakta serta sumber mana yang dipakai jawaban baru. Lampirkan bukti yang sesuai pada setiap kesimpulan.
Untuk arti metrik, pemeriksaan sumber, dan lembar kerja tinjauan setelah pembaruan halaman, ikuti metode memeriksa metrik dan bukti jawaban setelah pembaruan halaman. Catat dulu perubahan yang diketahui selama periode itu di catatan pengamatan, lalu periksa jawabannya untuk melihat apakah perubahan itu dipakai.
Ukur pangsa penjualan dan imbal hasil belanja secara terpisah dengan catatan penjualan dan keuangan. Ambang di sini membahas perubahan pada jawaban AI yang dipilih; penanggung jawab bisnis bisa memakainya untuk memutuskan apakah perlu penyelidikan lebih lanjut.
5.4 Lampirkan catatan pengamatan standar pada setiap kesimpulan
Pernyataan "Perubahan teramati" harus disertai cakupannya. Catatan itu setidaknya harus menyebutkan jumlah prompt, platform, wilayah, putaran dan tanggal, perubahan sebenarnya, perubahan yang dilakukan selama periode itu, dan bukti yang masih kurang. Dengan begitu pembaca bisa kembali ke catatan terkait untuk memeriksanya.
Gunakan templat standar:
Di (pasar), untuk (jumlah prompt) prompt dalam kumpulan prompt tetap (versi), kumpulkan (jumlah putaran) putaran jawaban baru pada (tanggal) di (platform / wilayah), dengan (jumlah) jawaban valid yang bisa dibandingkan di setiap putaran. Baseline-nya (putaran dan tanggal), nilai pembandingnya (proporsi), dan ambangnya (poin persentase). Proporsi putaran berikutnya adalah (nilai sebenarnya), berubah (poin persentase) dibanding baseline. Sesuai syarat putaran berturut-turut yang disepakati, pengamatan ini dicatat sebagai (status laporan). Perubahan yang diketahui selama periode ini adalah (tanggal, item, isi); bukti yang masih kurang adalah (item spesifik).
Jika Anda adalah merek ini, Anda bisa melampirkan catatan berikut pada catatan smartwatch Apple:
Pengamatan ini memakai jawaban yang dikumpulkan Dageno di pasar smartwatch pada 3 hingga 19 Agustus 2026: 380 kombinasi yang melibatkan 302 prompt berbeda, mencakup empat platform (Google AI Mode, Gemini, ChatGPT, dan Google AI Overview) dan 22 wilayah. Putaran pertama berlangsung 3 hingga 5 Agustus, dan putaran kedua 10 hingga 19 Agustus, termasuk 202 kombinasi pada 10 Agustus. Apple muncul di 245 kombinasi (64,47%) pada putaran pertama dan 233 (61,32%) pada putaran kedua, turun sekitar 3,2 poin persentase (12 kombinasi). Tidak ada perubahan halaman yang kami ketahui selama periode ini. Saat ini baru ada dua putaran catatan, sehingga pengamatan ini dicatat sebagai "Menunggu uji ulang". Langkah berikutnya adalah membangun baseline kelompok ini dan melanjutkan pengamatan sesuai putaran yang disepakati.
Dalam contoh ini tanggal berbeda per kombinasi, sehingga catatan mencantumkan rentang tanggal. Isi catatan Anda sendiri dengan catatan sebenarnya, dan pilih label yang didukung bukti yang sudah terkumpul.
6. Catatan uji ulang: apa yang ditetapkan dan bagaimana mencatat perubahan
6.1 Tetapkan rumusan prompt, cakupan, dan aturan penghitungan
Tetapkan rumusan prompt, platform, wilayah, dan bahasa. Pertahankan juga kondisi bertanya yang sama di setiap putaran. Sepakati cara mengelompokkan nama merek: misalnya, apakah Apple Watch dihitung sebagai Apple? Di artikel ini dihitung terpisah. Sepakati juga jawaban mana yang masuk ke proporsi: misalnya, apakah jawaban yang tidak menyebut merek apa pun dihitung? Jika prompt yang sama punya dua jawaban di hari yang sama, sepakati lebih dulu mana yang disimpan agar tidak terhitung dua kali. Simpan prompt inti dengan metode memelihara kumpulan prompt, dan simpan bukti perubahan serta jawaban dengan catatan tinjauan untuk perubahan dan jawaban.
Jika anggaran, model, kebutuhan penggunaan, atau rumusan berubah, catat sebagai versi prompt baru. Pertahankan prompt inti awal dan nilai kesimpulan untuk cakupan lama di dalam cakupan itu. Dengan begitu Anda bisa memeriksa apakah hasil prompt awal bertahan seiring kebutuhan baru ditambahkan.
6.2 Catat perubahan dalam satu tabel
Tanggal
Apa yang berubah (kumpulan prompt, cakupan platform, wilayah, halaman)
Kesimpulan mana yang terdampak
Putaran mana yang memulai baseline baru
Tanggal perubahan sebenarnya
Cakupan atau isi halaman yang benar-benar diubah, dengan versi atau URL
Kelompok dan kesimpulan yang terdampak; pertahankan catatan cakupan awal
Jika cakupan pengamatan atau aturan penghitungan berubah, isi putaran pertama cakupan baru; jika hanya halaman yang berubah dan cakupan tetap, pertahankan baseline awal dan catat putaran pengamatan berikutnya yang pertama
(Contoh) 12 Oktober
5 prompt terkait anggaran ditambahkan ke kumpulan prompt
Proporsi keseluruhan untuk kelompok platform dan wilayah itu
50 prompt awal tetap memakai baseline awal; 5 prompt baru dicatat terpisah mulai putaran 13 Oktober dan digabungkan setelah punya cukup putaran baseline
Baris kedua tabel adalah contoh; tanggal dan jumlahnya hanya menunjukkan cara mengisinya. Saat kondisi pengamatan berubah, laporkan proporsi sebelum dan sesudahnya secara terpisah dan tetapkan titik awal untuk cakupan baru. Jika hanya isi halaman yang berubah sementara prompt dan cakupan penghitungan tetap, pertahankan baseline awal dan gunakan catatan berikutnya untuk memeriksa perubahan. Tentukan cara menangani kondisi lama dan baru sebelum pengumpulan dan minta penanggung jawab mengonfirmasinya.
7. Kesimpulan
Saat rekomendasi baru muncul, penanggung jawab analisis lebih dulu menyimpan jawabannya, lalu memeriksa apakah kumpulan prompt lengkap, catatan dari beberapa putaran, dan ambang sudah siap. Jika syarat yang disepakati terpenuhi, tulis "Perubahan teramati" dengan cakupan yang jelas. Jika bukti kurang, tulis "Menunggu uji ulang". Jika pengamatan selesai dan perubahan tidak bertahan, laporkan hasilnya di dalam cakupan ini.
Minta klien mengonfirmasi ambang laporan, dengan menyebutkan jumlah prompt, putaran baseline dan putaran berikutnya, jarak, ambang perubahan, dan penyetujunya. Lampirkan catatan pengamatan pada setiap kesimpulan, simpan tanggal sebenarnya, perubahan selama periode itu, dan bukti yang kurang, lalu sepakati tanggal tinjauan berikutnya.
Apakah menguji prompt yang sama di tiga platform dihitung sebagai tiga prompt?
Tetap ada satu prompt yang berbeda; catat kombinasi platform dan wilayahnya secara terpisah. Simpan jumlah prompt berbeda, jumlah kombinasi, dan jumlah jawaban di laporan. Nilai setiap kelompok platform dan wilayah dengan jumlah prompt dan baseline-nya sendiri.
Laporan sebaiknya memakai poin persentase atau persen?
Saat membandingkan proporsi kemunculan antara dua putaran, tulis selisihnya dalam poin persentase dan simpan kedua nilai aslinya. Di tabel Visibility trend smartwatch Apple yang dilihat 9 Oktober 2026, hari pertama 64,79% dan hari terakhir 59,38%; kolom Change menunjukkan penurunan 5,41%. Mengurangkan kedua proporsi itu menghasilkan penurunan 5,41 poin persentase untuk laporan.
Bisakah putaran ini langsung dibandingkan dengan putaran sebelumnya jika ada jawaban yang hilang?
Pastikan dulu mengapa jawaban hilang dan lengkapi prompt awalnya. Jika untuk sementara Anda hanya membandingkan cakupan yang jawabannya lengkap di kedua putaran, catat bahwa cakupannya menyempit dan berapa jumlahnya. Biarkan cakupan awal yang disepakati tetap Menunggu uji ulang dan nilai setelah kekosongannya terisi.
Apa yang terjadi pada kesimpulan awal jika putaran berikutnya kembali ke baseline setelah laporan bulanan?
Pertahankan tanggal dan bukti pendukung laporan lama. Di laporan baru, perbarui kesimpulan menjadi "Perubahan tidak bertahan pada pengamatan berikutnya", dengan menyebutkan rentang tempat nilainya kembali. Orang yang disepakati memperbarui kesimpulan dan menyimpan semua putaran agar orang lain bisa memeriksa dasar penilaian sebelumnya.
Bagaimana melaporkan kenaikan berkelanjutan di wilayah penting saat pasar keseluruhan tampak tidak berubah?
Laporkan pasar keseluruhan dan wilayah itu secara terpisah. Jika wilayah itu mencapai ambangnya sendiri, tulis "Perubahan teramati" untuk wilayah itu, dengan jumlah prompt, putaran, dan tanggal. Pilih status keseluruhan dari catatannya sendiri.
9. Referensi
Jawaban yang dikumpulkan Dageno di pasar smartwatch, smartphone, dan laptop pada 3 hingga 19 Agustus 2026: hasil yang dikumpulkan lagi beberapa hari kemudian untuk prompt yang sama di platform dan wilayah yang sama, serta catatan kombinasi yang dipilih acak dan jumlah harian.
Dageno is the research and insights team at Dageno AI, publishing industry reports and expert analysis on AI Search Visibility, Generative Engine Optimization (GEO), and AI-powered search discovery.