Tidak ada yang bertanya ke asisten AI "daftarkan semua bisnis di kategori X berdasarkan relevansi." Pembeli nyata bertanya seperti bertanya pada teman yang berpengetahuan: "apa tool manajemen proyek terbaik untuk tim 5 orang," "bisa rekomendasikan klub pickleball yang bagus di Austin," "siapa groomer anjing dengan rating tertinggi di dekat saya." Pertanyaan ini pendek, percakapan, dirumuskan seputar situasi tertentu, dan, yang krusial, tidak pernah menyebut nama brand tertentu, karena pembeli belum tahu brand mana yang ditanyakan. Itulah inti pertanyaannya: penemuan, bukan konfirmasi.
Ini penting karena ini tes yang pada dasarnya berbeda dari mengetik nama brand Anda sendiri ke ChatGPT dan bertanya "ceritakan tentang Acme Co." Pertanyaan itu hanya menguji apakah model tahu siapa Anda. Pertanyaan itu tidak menguji apakah model akan menyebut Anda tanpa dipancing, yang merupakan satu-satunya skenario yang benar-benar penting untuk mendapatkan pelanggan baru.
Mengapa satu prompt bukan tes yang andal
Model AI memang non-deterministik: pertanyaan yang sama diajukan dua kali bisa menghasilkan dua jawaban berbeda, kadang menyebut kumpulan brand yang berbeda, meski tidak ada hal lain yang berubah. Jika Anda menguji dengan satu prompt dan mendapat hasil bagus, Anda hanya tahu bahwa model menyebut Anda satu kali. Jika hasilnya buruk, Anda hanya tahu bahwa model tidak menyebut Anda, satu kali. Keduanya tidak banyak memberi tahu tentang apa yang akan dilihat sebaran pembeli nyata yang mengajukan sebaran pertanyaan nyata.
Ada juga variasi nyata dalam cara maksud yang sama dirumuskan. Orang yang terburu-buru mengetik "best pickleball club austin." Orang yang lebih teliti menulis "Saya mencari klub pickleball di Austin. Mana yang sebaiknya saya pertimbangkan?" Orang yang membandingkan bertanya "klub pickleball mana yang akan Anda pilih dan mengapa?" Ini maksud membeli yang sama dengan kata-kata berbeda, dan brand yang muncul untuk satu rumusan mungkin tidak muncul untuk yang lain, tergantung bagaimana model mengambil dan menimbang informasi untuk bingkai tertentu itu.
Mengapa Mentioned menguji 5 pertanyaan, bukan 1
Inilah alasan Mentioned tidak menjalankan satu prompt. Saat Anda memasukkan brand dan kategori, Mentioned meminta Claude membuat 5 pertanyaan pembeli yang realistis untuk kategori itu, dirumuskan seperti orang sungguhan mencari, tidak pernah memuat nama brand Anda agar tes tetap organik dan tidak menggiring, lalu mengirim kelima pertanyaan ke setiap model (Claude, ChatGPT, dan Gemini pada pengecekan gratis) secara independen dan paralel. Tidak ada konteks bersama di antara mereka; masing-masing adalah percakapan baru, persis seperti 5 pembeli berbeda yang masing-masing mengajukan pertanyaannya sendiri. Skor Anda hanyalah berapa dari 5 yang kembali menyebut Anda, dari 5. Ini bukan estimasi berbobot atau interval kepercayaan, melainkan hitungan harfiah dari apa yang benar-benar terjadi di berbagai cara pembeli mungkin bertanya.
Jika pembuatan pertanyaan gagal karena suatu sebab, Mentioned beralih ke sekumpulan template netral yang tetap ("Apa {category} terbaik?", "Bisa rekomendasikan {category} yang bagus?", dan sejenisnya) alih-alih melewati pengecekan atau menebak hasil. Lihat rinciannya di halaman metodologi.
Yang diberi tahu sebaran 5 pertanyaan dan tidak bisa diberi tahu satu prompt
Konsistensi vs. keberuntungan. Muncul di 5 dari 5 adalah sinyal yang jauh lebih kuat daripada muncul di 1 dari 1. Itu menunjukkan model secara andal mengaitkan Anda dengan kategori, bukan memunculkan Anda secara kebetulan pada rumusan tertentu.
Di mana Anda kuat vs. di mana Anda tak terlihat. Jika Anda muncul untuk bingkai "rating tertinggi" tetapi tidak untuk "terbaik untuk pemula", itu informasi berguna tentang segmen pembeli mana yang saat ini mengenal Anda dan mana yang tidak.
Siapa yang sebenarnya mengalahkan Anda. Saat Anda tidak muncul, Mentioned mengambil nama-nama lain berbentuk brand yang disebut model, sehingga Anda bisa melihat siapa yang menang di versi pertanyaan itu, bukan sekadar tahu Anda kalah.
Untuk menyusun kumpulan pertanyaan bagi kategori Anda sendiri, buyer question generator gratis menulisnya menurut maksud: daftar pilihan, masalah dulu, berpindah, evaluasi, dan integrasi.
Berpikir dalam rentang, bukan jawaban tunggal
Kesimpulan praktisnya: jika Anda ingin memahami visibilitas AI Anda, jangan menguji dengan satu prompt dan menganggap hasilnya final, ke arah mana pun. Ajukan beberapa variasi yang realistis, perkirakan ada variasi di antaranya, dan lihat polanya, bukan satu jawaban saja. Itu gambaran yang lebih jujur tentang apa yang sebenarnya dilihat pembeli daripada yang bisa diberikan satu prompt yang beruntung (atau sial).
