Mavzena nasıl ölçer
Mavzena'daki her sayı kayıtlı bir ölçümden gelir. Bu sayfada nasıl ölçtüğümüzü, hangi sayıların tahmin olduğunu ve yöntemin neyi söyleyemeyeceğini anlatıyoruz.
Kategorinize göre yazılan promptlar
Mavzena motorlara soracağı promptları markanızın kategorisine göre ve markanın dilinde altı kalıpta yazar: öneri, kullanım alanı, karşılaştırma, alternatif, itibar (marka güvenilir mi, yorumlar ne diyor) ve marka bilgisi (fiyat, şubeler, sahiplik). Her prompt onayladığınız ürünlerden birini ya da kategorinizi konu alır; yerel bir işletmenin promptlarında şehri geçer. Promptların çoğunda markanızın adı geçmez; böylece motorların sizi sorulmadan önerip önermediği görülür. Kendi promptlarınızı da ekleyebilir ya da bir CSV dosyasından içe aktarabilirsiniz. Panelde bunlar Promptlar sayfasında durur.
Promptun kaynağı
- AI üretimi
- Kategorinizden yola çıkarak bir dil modeli yazar. Kategoriyi geniş kapsamaya yarar ama müşterilerinizin gerçekte ne sorduğunu kanıtlamaz.
- Sizin eklediğiniz
- Müşterilerinizin sorduğunu bildiğiniz sorular.
- İçe aktarılan
- Bir CSV dosyasından gelir. Satırlar tek tek incelenmemiş olabileceği için ayrı tutulur.
Her promptun kaynağı kalıcı olarak kayıtlıdır ve AI'ın ürettiği bir prompt gerçek talep gibi gösterilmez. Promptları müşteri tiplerine bağlayabilirsiniz. Müşteri tiplerinin de nereden geldiği işaretlidir: AI üretimi, sizin eklediğiniz ya da dinleme sinyallerinden türetilmiş. Markalı, rakipli, yardımsız gibi gruplar her seferinde prompt metninden ve güncel rakip listenizden yeniden hesaplanır. Rakip listesi değişince gruplar da doğru kalır.
Ticari niyet sabit anahtar kelime kurallarıyla atanır: satın alma, seçenekleri karşılaştırma, belirli bir siteye gitme ya da bilgi arama. Bu bir sınıflandırmadır, ölçüme dayanmaz. Elle girdiğiniz değerin üzerine yazılmaz.
Ölçülen dört AI motoru
Bir ölçüm aynı promptları ChatGPT, Gemini, Claude ve DeepSeek'e sorar. Cevaplar iki yoldan toplanır: bazı motorlar cevap vermeden önce canlı web araması yapar, bazıları yalnız modelin zaten bildikleriyle cevap verir. Web aramalı bir ölçümde ChatGPT, Gemini ve Claude arama yapar; DeepSeek her zaman kendi bildikleriyle cevap verir. Markanın ilk ölçümü her planda web aramalıdır; sonrasında web araması ücretli planlarla gelir.
Ücretsiz plan ChatGPT, Gemini ve Claude'da 3 prompt sorar. Ücretli planlar dört motorun hepsine marka başına 30 prompt sorar. Otomatik ölçümü açtığınızda ölçüm seçtiğiniz sıklıkta kendiliğinden tekrarlanır. Her motorda hangi modelin kullanıldığı da ölçüm kaydına yazılır.
Her cevap nasıl okunur
İkinci bir dil modeli her ham cevabı okur ve yapılandırılmış bir değerlendirme döndürür: markanız anılıyor mu, kaçıncı sırada, hangi rakipler geçiyor, anlatım olumlu mu, nötr mü, olumsuz mu.
Bu değerlendirme okunamazsa cevap “anılmadı” diye kaydedilmez. Hiçbir metriğe girmez ve bir sonraki ölçümde yeniden denenir. Okunamayan bir cevabı “yok” saymak, skorunuzu sessizce düşürürdü.
Cevapları okuyan adımı, sonucu bildiğimiz sabit örneklerle düzenli olarak sınıyoruz.
Görünürlük skoru
Skor üç ölçümden oluşur. Anılma oranı, puanlanan cevapların ne kadarında markanızın adının geçtiğini gösterir. Ortalama sıra, adınızın geçtiği cevaplarda kaçıncı sırada olduğunuzdur ve düşük olması iyidir. Duygu da aynı cevaplarda sizden hangi tonla söz edildiğidir.
anılma oranı × sıra etkisi × duygu ağırlığı × 100
- Sıra etkisi
- 1 − (ortalama sıra − 1) × 0,1; en az 0,1Birinci sıra tam sayılır, sonraki her sıra onda bir eksiltir.
- Duygu ağırlığı
- olumlu 1,0 · nötr 0,7 · olumsuz 0,3Adınızın geçtiği cevapların ortalaması alınır.
Aynı formül her motor için ayrı ayrı uygulanır. Yardımsız promptlara, yani hiçbir marka adı geçmeyenlere de uygulanır ve buradan motorların adınız sorulmadan sizi önerip önermediği anlaşılır.
Hiç anılmayan bir marka 0 alır, çünkü bu ölçülmüştür. Hiç ölçülmemiş bir markanın skoru gösterilmez.
Tekrar, kararlılık ve güven
Motorlar aynı prompta bir andan ötekine farklı cevap verebilir. Tekrar bu yüzden önemli. Her prompt her motora bir kez yöneltilir. Eski ölçümlerde marka adınızın geçtiği promptlar bir motora üç kez sorulmuştu; skorda bu üç cevap tek cevap sayılır. Ölçümü başlatırken daha fazla tekrar seçmek bugün mümkün değil.
Kararlılık
Aynı promptun aynı motordaki tekrarlarını karşılaştırır. Markanız tutarlı biçimde anıldı mı, sırası ne kadar oynadı, ton aynı kaldı mı, bunlara bakar. Hesaplanamayan bir bileşen tahminle doldurulmaz, hesaba katılmaz. Tek örnek varsa kararlılık için “ölçülemiyor” yazar, 100 gösterilmez.
Güven düzeyi
Güven düzeyi sayı olarak verilmez, bir etikettir. Kaç tekrar yapıldığına ve motorlara giden isteklerin ne kadarının başarılı olduğuna birlikte bakar.
- Düşük
- Tek tekrar ya da çok sayıda başarısız istek.
- Orta
- En az iki tekrar ve isteklerin en az %70'i başarılı.
- Yüksek
- Beş tekrar ve isteklerin en az %90'ı başarılı. Tekrar henüz sunulmadığı için bugün çalıştırılan bir ölçüm Düşük düzeyde kalır.
Sonuçların çoğu bu yüzden Düşük görünür. Her promptu bir kez soran bir ölçüm tek bir anlık görüntüdür ve etiket de bunu gösterir.
Anılma oranının aralığı
Panel, anılma oranının yanında yaklaşık bir %95 aralığı da gösterir (Wilson aralığı). 10 cevaptan çıkan “%40 anıldı” sonucu, gerçekte yaklaşık %17 ile %69 arasında bir değere işaret eder. 500 cevapta bu aralık birkaç puana iner. Aralık yaklaşıktır, çünkü aynı promptun tekrarlı örnekleri birbirinden bağımsız değildir ve gerçek aralık biraz daha geniştir. Hiç ölçüm yoksa aralık gösterilmez.
Her sayının arkasında bir ölçüm kaydı var
Her ölçüm numaralı bir kayıt açar. Bu kayda promptlar, motorlar, modeller, cevap yolu, tekrar sayısı, başlangıç ve bitiş zamanı, kaç isteğin başarılı ya da başarısız olduğu kaydedilir. Her cevap bu kayda bağlı saklanır. Yeni bir ölçüm eskilerin üzerine yazmaz, yeni satırlar ekler. Eğilim de bu yüzden yalnız gerçekten yapılmış ölçümlerden çizilir.
- Bir motor cevap vermezse ölçüm “kısmi” olarak işaretlenir ve raporlar kaç isteğin başarısız olduğunu yazar. Sayılar o durumda yalnız dönen cevapları kapsar.
- Bir marka için aynı anda yalnız bir ölçüm çalışabilir. Düğmeye iki kez tıklansa ya da bir iş yeniden denense bile aynı ölçüm iki ayrı ölçüm numarasıyla iki kez yapılmaz.
- Ölçülmemiş bir değer 0 olarak gösterilmez, yerine “ölçülmedi” yazar. Bir ölçüme bağlanamayan rapor da bunu belirtir.
- Yanlış bilgi kararlarına veritabanı düzeyinde yalnız ekleme yapılabilir, düzenleme ve silme reddedilir. Çalışma alanı geçmişine de yalnız kayıt eklenir.
Motorların atıf yaptığı kaynaklar
Mavzena, bir cevabın atıf yaptığı sayfaları kaydeder. ChatGPT'de aramanın okuduğu ama atıf yapmadığı sayfaları da ayrıca kaydeder. Bağlantılar izleme parametrelerinden temizlenir, siteye göre gruplanır ve türüne göre ayrılır: değerlendirme, forum, sosyal, ansiklopedi, uygulama mağazası, haber ve diğer. Türü sabit bir alan adı listesi belirler, bunun için dil modeli kullanılmaz.
Bir kaynağın sizin sitenizden mi yoksa üçüncü bir taraftan mı geldiği, görüntülediğiniz anda güncel web adresinize bakılarak hesaplanır. Sitenizi değiştirirseniz eski etiket kalmaz. Bir kaynak, adlardan tahmin yürütülerek rakibe yazılmaz. Kaynak göstermeyen bir cevapta kaydedilecek bir şey yoktur.
AI botlarının erişimi ve yanlış bilgi (halüsinasyon) kontrolü
AI botları sitenizi okuyabiliyor mu?
Bu kontrol kurallarla çalışır, dil modeli kullanmaz. robots.txt dosyanız GPTBot, ClaudeBot, PerplexityBot ya da Google-Extended'ı engelliyor mu, sitemap.xml ve llms.txt var mı, sayfalarınızda JSON-LD yapılandırılmış veri bulunuyor mu, bunlara bakar. Skoru yalnız kanıtı olan sinyaller etkiler. llms.txt deneysel olarak raporlanır ve skoru düşürmez. Sayfalar sunucunun gönderdiği hâliyle okunur, bu yüzden ancak JavaScript çalıştıktan sonra beliren içerik görülmez.
AI sizin hakkınızda doğruyu mu söylüyor?
Markanız hakkındaki doğru bilgileri Doğruluk Profili'nde siz onaylarsınız. Yanlış bilgi kontrolü (halüsinasyon tespiti), tamamlanmış bir ölçümün cevaplarını alır, içlerindeki her bilgiyi bu onaylı bilgilerle karşılaştırır ve “destekleniyor”, “çelişiyor” ya da “belirsiz” diye işaretler. Kontrol hangi ölçümü ve Doğruluk Profili'nin hangi sürümünü kullandığını sabitler. Verdiğiniz kararlar bir geçmişe eklenir, öncekilerin üzerine yazılmaz.
Ölçüm ile tahmin ayrı tutulur
Bazı sayılar cevaplardan ölçülür. Bazıları ise yazılı kurallarla hesaplanan tahminlerdir. Genel Bakış'taki her skor üç etiketten birini taşır: ölçüm, tahmin ya da tahmin içerir.
- Organik görünürlükölçüm
- Yukarıda anlatılan görünürlük skoru.
- Kalan fırsattahmin
- Ölçülen promptların organik önceliklerinin ortalaması. Yüksek çıkması, kazanılacak çok şey kaldığını gösterir.
- AI'da büyümeölçüm
- %70 × organik görünürlük + %30 × kapsam (markanın en az bir cevapta anıldığı prompt × AI motoru eşleşmelerinin yüzdesi). Organik görünürlük ölçülmediyse gösterilmez.
Ağırlıklar kabadır ve hepsi burada yazılı. Gerçek veriyle kalibre edilecekler. Fırsat önceliği (etki × kolaylık × ticari niyet) ise bir sıralama kuralıdır, tahmin olarak sunulmaz.
Web'deki konuşmalar ayrı ölçülür
Kamuoyu, sizin ve rakipleriniz hakkında yazılanları Reddit'ten, Google Haritalar puanlarından ve eklediğiniz RSS kaynaklarından izler. Türkiye'deki markalarda Türkçe kaynakları da (Şikayetvar, Ekşi Sözlük, DonanımHaber, Technopat) okur. Bu, AI görünürlüğünden ayrı bir ölçümdür ve onunla hiçbir zaman harmanlanmaz.
- Her kaynak kendi durumunu bildirir. “Bir şey bulunamadı” ile “bakılamadı” farklı sonuçlardır ve ayrı gösterilir.
- Konuşma payı yalnız karşılaştırılan her markada çalışan kaynaklar üzerinden hesaplanır. Şikayetvar sayfası olmayan bir rakip, sizi olduğunuzdan daha çok konuşuluyor gösteremez.
- Ton ve konular kurallarla atanır. Bir AI sınıflandırıcısı var, ama elle etiketlenmiş yazılarla ölçülene kadar kapalı kalır.
- Ekşi Sözlük metni, sitenin robots.txt dosyasındaki isteğe uyularak hiçbir AI modeline gönderilmez. Toplanan yazılar yazarlarıyla birlikte 90 gün saklanır, sonra silinir.
Bu yöntem neyi söyleyemez
Her ölçümün bir sınırı vardır. Bu yöntem şunları söyleyemez:
- Bir motorun yarın nasıl cevap vereceğini. Birkaç tekrar bugünkü dağılımı gösterir, garanti vermez.
- Başka model sürümlerinin ne diyeceğini. Sağlayıcı bir modeli güncellediğinde aynı prompt farklı bir cevap alabilir.
- Ölçümde sorulmamış promptlar hakkında hiçbir şeyi. Bir skor yalnız kendi ölçümündeki promptları ve motorları kapsar.
- Gerçek insanların bir soruyu ne sıklıkla sorduğunu. AI'ın ürettiği promptlar kategorinizi tarif eder, arama hacmini göstermez.
- Bir kişinin tüketici uygulamasında tam olarak ne gördüğünü. Motorlara API üzerinden soruyoruz. Uygulamalar cevaba kişiselleştirme, konum ve reklam katabilir. Oradaki reklamlar bu ölçümde görünmez.
- Geliri. AI cevaplarında daha görünür olmak, daha çok sattığınızı kanıtlamaz. Mavzena görünürlüğü paraya çevirmez.
- Bir doğruluk oranını. Cevapları okuyan değerlendirici model ve dinleme kuralları henüz elle etiketlenmiş veriyle ölçülmedi. Bu yüzden bir doğruluk oranı vermiyoruz.
Yöntemle ilgili sorunuz mu var?
Bize yazın, ekibimiz sizinle iletişime geçsin.



