"Yeşil buton mu kırmızı buton mu?" tartışması, toplantı odasında saatlerce sürebilir. A/B testi bu tartışmayı veriyle bitirir: ziyaretçilerin bir kısmına A sürümünü, diğer kısmına B sürümünü gösterir ve hangisinin daha iyi sonuç verdiğini ölçersiniz. Basit görünen bu yöntemin doğru uygulanması ise birkaç önemli kurala bağlıdır.
Temel mantık
- Değiştirmek istediğiniz tek bir şeyi seçin (başlık, buton metni, fiyat gösterimi).
- Ziyaretçileri rastgele iki gruba ayırın.
- Her gruba farklı sürümü gösterin.
- Önceden belirlediğiniz ölçüyü (dönüşüm oranı gibi) karşılaştırın.
Rastgele dağıtım kritik önemdedir; "sabah gelenlere A, akşam gelenlere B" gibi bir ayrım sonucu bozar.
Hipotezle başlayın
İyi bir test bir hipoteze dayanır:
Ürün sayfasında kargo süresini fiyatın hemen altında göstermek, kararsız ziyaretçilerin endişesini azaltacağı için sepete ekleme oranını artıracaktır.
Hipotez, sonuç ne çıkarsa çıksın bir şey öğrenmenizi sağlar. Fikir kaynakları için bkz. dönüşüm oranı optimizasyonu.
Örneklem büyüklüğü ve süre
Küçük farkları güvenilir şekilde tespit etmek için çok sayıda ziyaretçi gerekir. Kabaca:
- Dönüşüm oranınız ne kadar düşükse ve aradığınız fark ne kadar küçükse, o kadar çok ziyaretçi gerekir.
- Testi başlatmadan önce gereken örneklem büyüklüğünü çevrim içi hesaplayıcılarla belirleyin.
- Testi en az bir veya iki tam hafta çalıştırın; hafta içi ve hafta sonu davranışları farklıdır.
Düşük trafikli sitelerde küçük ayrıntıları test etmek yerine, büyük ve cesur değişiklikleri test etmek daha anlamlıdır.
İstatistiksel anlamlılık
B sürümünün %3,2, A sürümünün %3,0 dönüşüm sağlaması, B'nin daha iyi olduğunu kanıtlamaz; fark tesadüf olabilir. İstatistiksel anlamlılık, gözlenen farkın tesadüf olma ihtimalinin düşük olduğunu gösterir. Genellikle %95 güven düzeyi hedeflenir.
Sık yapılan hatalar
- Erken bitirmek: İlk günlerde bir sürüm önde görünür diye testi durdurmak. Sonuçlar başta çok dalgalanır.
- Aynı anda çok şey değiştirmek: Neyin işe yaradığını anlayamazsınız.
- Yanlış ölçü: Tıklamayı artırıp satışı düşüren bir değişiklik başarı değildir.
- Segmentlere boğulmak: Yeterince alt gruba bakarsanız, tesadüfen "kazanan" bir grup mutlaka bulursunuz.
- Dış etkenleri unutmak: Test sırasında başlayan bir kampanya sonuçları çarpıtabilir.
Neler test edilebilir?
- Açılış sayfası başlıkları ve ana görselleri (landing page)
- Form alan sayısı (form tasarımı)
- E-posta konu satırları
- Ücretsiz kargo eşiği veya fiyat gösterimi
- Ödeme adımının sadeleştirilmesi (sepet terk oranı)
Araçlar
Google Optimize'ın 2023'te kapatılmasından sonra pek çok ekip üçüncü taraf test araçlarına veya sunucu tarafında, özellik bayraklarıyla yapılan testlere yöneldi. Sunucu tarafı testler sayfada titreme yaratmaz ve çerez onayı süreçleriyle daha kolay uyumlandırılır.
Sık sorulan sorular
Trafiğim az, A/B testi yapabilir miyim?
Küçük farkları ölçmek zor olacaktır. Bunun yerine kullanıcı görüşmeleri, oturum kayıtları ve büyük değişikliklerin öncesi-sonrası karşılaştırması daha verimli olabilir.
Test sonucu "fark yok" çıkarsa ne olur?
Bu da bir bilgidir: değişiklik beklenen etkiyi yaratmadı. Hipotezi gözden geçirip daha büyük bir değişiklik test edebilirsiniz.
Sonuç
A/B testi, görüşleri değil kanıtları konuşturur. Net bir hipotez, yeterli örneklem ve sabırla yürütülen testler; web sitesinden e-postaya kadar her kanalda sürekli ve güvenilir iyileşme sağlar.
