"Bence bu görsel daha iyi." Bu cümle, dijital pazarlamada en pahalı cümledir. Hangi başlığın, hangi görselin ya da hangi teklifin daha çok sattığını önceden bilmek mümkün değildir — ama ölçmek mümkündür.
A/B testi, iki versiyonu aynı anda ve aynı koşullarda yayınlayıp hangisinin daha iyi sonuç verdiğini görme yöntemidir.
Neyi test etmeye değer?
Her şeyi test etmek zaman kaybıdır. Etkisi büyük olan ögelerden başlamak gerekir.
Reklam tarafında: Görsel, açılış cümlesi, teklif ve eylem çağrısı. Görsel genellikle en büyük farkı yaratır.
Sayfa tarafında: Başlık, birincil buton metni, form uzunluğu ve fiyat gösterimi.
E-posta tarafında: Konu satırı ve gönderim zamanı.
Buton renginin tonunu test etmek gibi küçük ayrıntılar, büyük trafik olmadan anlamlı sonuç vermez ve genellikle zaman kaybıdır.
Önce büyük değişiklikler
Düşük trafikli sitelerde küçük farkları ölçmek imkânsıza yakındır. Bu durumda iki versiyon arasındaki fark büyük olmalıdır: tamamen farklı bir başlık yaklaşımı, formun yarıya indirilmesi, farklı bir teklif kurgusu.
Temel kural: tek değişken
Aynı anda hem görseli hem metni değiştirirseniz, sonuç iyileşse de kötüleşse de sebebini bilemezsiniz. Test, öğrenmek içindir; öğrenme olmuyorsa test değil, sadece değişikliktir.
Bu kural pratikte en çok ihlal edilen kuraldır çünkü sabırsızlık yaratır. Ama her turda tek şey değiştirildiğinde birkaç ay sonra elinizde gerçekten bilinen bir liste olur.
Ne kadar sürmeli?
İki ölçüt birlikte karşılanmalıdır: yeterli veri ve yeterli süre.
Yeterli veri: Her versiyonun anlamlı sayıda dönüşüm üretmiş olması gerekir. Birkaç yüz gösterimle karar vermek yanıltıcıdır; günlük dalgalanma sonucu tersine çevirebilir.
Yeterli süre: En az bir tam hafta. Hafta içi ve hafta sonu davranışı farklıdır; sadece hafta içi süren bir test eksik bilgi verir.
Erken bitirme, A/B testinde en yaygın hatadır. İlk iki günde önde görünen versiyon, çoğu zaman sonunda kaybeder.
Ne zaman durdurulmalı?
İki versiyon arasında belirgin ve istikrarlı bir fark oluştuğunda. Fark küçük ve dalgalıysa, muhtemelen gerçek bir fark yoktur; o durumda ikisi de kullanılabilir demektir ve enerjiyi başka bir teste kaydırmak daha mantıklıdır.
Reklamda test kurmak
Reklam platformlarında test yaparken dikkat edilecek nokta, iki versiyonun birbirinden bütçe çalmamasıdır. Aynı kampanya içinde yayınlanan iki reklam, algoritma tarafından erkenden birine yönlendirilebilir ve gerçek karşılaştırma yapılamaz.
Platformların sunduğu ayrı test araçları bu sorunu çözer: kitleyi eşit böler ve her versiyona adil pay verir.
Kreatif yorgunluğuna dikkat
Uzun süren testlerde bir versiyon yalnızca daha yeni olduğu için öne geçebilir. Aynı kitleye uzun süre gösterilen reklamın performansı düşer; bu, versiyonun kötü olduğu anlamına gelmez.
Test yapamadığınız durumlar
Her karar test edilemez ve bunu kabul etmek zaman kazandırır.
Trafik yetersizse: Anlamlı sonuç için gereken veri birikmiyorsa test yerine sağduyu ve sektör deneyimi kullanılır. Yanlış olsa bile hızlı karar, aylarca sonuçsuz bekleyen bir testten iyidir.
Değişiklik zorunluysa: Mevzuat gereği yapılan bir değişiklik ya da bozuk bir işlevin düzeltilmesi test edilmez; doğrudan uygulanır.
Marka tutarlılığı söz konusuysa: Bazı kararlar sayısal performanstan bağımsızdır. Daha çok tıklanan ama marka diline aykırı bir başlık, kısa vadede kazanıp uzun vadede kaybettirebilir.
Test yerine gözlem
Trafiğin düşük olduğu durumlarda niteliksel yöntemler daha verimlidir: birkaç gerçek kullanıcıya sayfayı gösterip ne anladıklarını sormak, kaydedilen oturumları izlemek ya da müşteriye "karar verirken neye takıldınız" diye sormak. Bu yöntemler sayı vermez ama sebep verir — ki çoğu zaman asıl ihtiyaç odur.
Sonucu yorumlarken
Kazanan versiyonu bulmak işin yarısıdır; asıl değer neden kazandığını anlamaktır.
"B görseli kazandı" bir sonuçtur. "İnsan yüzü içeren görseller ürün fotoğrafından iyi çalışıyor" ise bir öğrenmedir ve bir sonraki on kampanyayı etkiler.
Bu yüzden test sonuçlarının bir yerde biriktirilmesi gerekir: ne test edildi, hangisi kazandı, çıkarılan ders ne? Bu kayıt tutulmadığında aynı testler yıllar boyunca tekrarlanır.
Test öncelik listesi kurmak
Test edilecek fikirler her zaman zamandan fazladır. Hangisinin önce yapılacağına karar vermek için basit bir sıralama yeterlidir.
Üç soruya puan verin: Bu değişiklik kaç kişiyi etkiliyor? Etkisi ne kadar büyük olabilir? Uygulaması ne kadar kolay?
En çok trafiği alan sayfadaki büyük bir değişiklik, az ziyaret edilen bir sayfadaki küçük bir düzeltmeden önce gelir. Bu basit sıralama, ekibin en çok getiri sağlayan işi önce yapmasını sağlar.
Testleri sırayla mı yürütmeli?
Aynı sayfada aynı anda iki test yürütmek sonuçları birbirine karıştırır. Ancak farklı sayfalarda ya da farklı kampanyalarda eş zamanlı test yapmak sorun yaratmaz. Trafiğin sınırlı olduğu durumlarda ise tek tek ilerlemek, hepsini aynı anda başlatıp hiçbirinde sonuç alamamaktan iyidir.
Sık yapılan hatalar
Çok erken karar vermek: Yeterli veri birikmeden sonuç ilan etmek.
Aynı anda çok şey değiştirmek: Sebebi bilinemez hale getirir.
Kaybedeni hemen silmek: Kaybeden versiyon, farklı bir kitlede kazanabilir. Sonuçlar mutlak değil, o kitle için geçerlidir.
Test etmeyi bırakmak: Kazanan bulunduğunda iş bitmez; o versiyon bir sonraki testin başlangıç noktasıdır. Sürekli test eden hesapta maliyet zamanla düşer, etmeyende sessizce yükselir.
Test kültürünü kurmak için ölçümün doğru çalışıyor olması gerekir; kampanya etiketlemesi ve dönüşüm olayları olmadan test sonuçları güvenilmez olur. Sayfa tarafındaki testler için dönüşüm oranı rehberimize, reklam tarafındaki kurgu için reklam yönetimi sayfamıza bakabilirsiniz.
Sık Sorulan Sorular
A/B testi ne kadar sürmeli?
İki ölçüt birlikte karşılanmalıdır: her versiyonun anlamlı sayıda dönüşüm üretmiş olması ve testin en az bir tam hafta sürmesi. Hafta içi ve hafta sonu davranışı farklı olduğu için sadece hafta içi süren test eksik bilgi verir. Erken bitirme en yaygın hatadır; ilk iki günde önde görünen versiyon çoğu zaman sonunda kaybeder.
Aynı anda birkaç şey test edebilir miyim?
Edebilirsiniz ama o zaman öğrenemezsiniz. Hem görseli hem metni değiştirirseniz sonuç iyileşse de kötüleşse de sebebini bilemezsiniz. Test öğrenmek içindir; öğrenme olmuyorsa yaptığınız şey test değil, sadece değişikliktir.
Düşük trafikli bir sitede A/B testi yapılabilir mi?
Küçük farkları ölçmek imkânsıza yakındır çünkü anlamlı sonuç için gereken veri birikmez. Bu durumda iki versiyon arasındaki farkı büyük tutmak gerekir: tamamen farklı bir başlık yaklaşımı, formun yarıya indirilmesi ya da farklı bir teklif kurgusu.
Reklamda test yaparken nelere dikkat etmeliyim?
İki versiyonun birbirinden bütçe çalmamasına. Aynı kampanya içindeki iki reklam algoritma tarafından erkenden birine yönlendirilebilir ve gerçek karşılaştırma yapılamaz. Platformların sunduğu ayrı test araçları kitleyi eşit böler ve her versiyona adil pay verir.
Test bittikten sonra ne yapmalıyım?
Kazananı bulmak işin yarısıdır; asıl değer neden kazandığını anlamaktır. "B görseli kazandı" bir sonuçtur, "insan yüzü içeren görseller ürün fotoğrafından iyi çalışıyor" ise bir öğrenmedir ve sonraki kampanyaları etkiler. Sonuçların bir yerde biriktirilmesi, aynı testlerin yıllarca tekrarlanmasını önler.