İçeriğe geç
TR
GÖRÜŞME PLANLA
Dönüşüm Optimizasyonu

A/B Testi Tasarımı ve Yönetimi

A/B testinde asıl iş aracı kurmak değil, sonucun tesadüf olmadığından emin olmaktır. Erken durdurulan, yetersiz trafikle yürütülen ya da kampanya haftasına denk gelen testler 'kazanan' ilan eder, yayına alınan değişiklik sonra hiçbir şey kazandırmaz. Testleri trafik hesabıyla tasarlıyor, süreyi ve başarı ölçütünü baştan yazıyoruz.

Büyüme görüşmesi planlayın Detayları okuyun
web-siteniz.comSatın alA · mevcutweb-siteniz.comSatın alB · yeni
Temsili görünüm: a/b testindeki iki sayfa versiyonunun temsili görünümü.
Amaç ve görünüm

Bu hizmeti ne için kullanıyoruz?

A/B testlerini, sitede yapılacak bir değişikliğin satışı gerçekten artırıp artırmadığını herkese açmadan önce kanıtlamak için yürütüyoruz. Tasarım ve fiyat gösterimi gibi kararlar ölçülmüş sonuca dayanıyor; satış kaybettirecek değişiklikler bütün trafiğe açılmadan küçük bir ziyaretçi grubunda eleniyor. Her sonuç bir sonraki testin hipotezini besliyor.

Hizmet ettiği huni aşamaları

  1. Bilinirlik
  2. Değerlendirme
  3. Dönüşüm
  4. Sadakat

Örneklem büyüklüğü: test başlamadan yapılan hesap

Bir testin ne kadar trafiğe ihtiyacı olduğunu üç değer belirler: mevcut dönüşüm oranı, yakalamak istediğimiz en küçük fark ve kabul ettiğimiz hata payı. Örneğin dönüşüm oranı yüzde 2 olan bir sayfada yüzde 10'luk göreli bir artışı (yüzde 2'den 2,2'ye) yüzde 95 anlamlılık ve yüzde 80 güçle görebilmek için her varyanta kabaca 80 bin ziyaretçi gerekir.

Bu hesap çoğu zaman testin konusunu değiştiriyor. Trafik yetmiyorsa düğme rengi gibi küçük değişiklikler yerine, farkı büyük olacak değişiklikleri test ediyoruz: fiyat gösterimi, ödeme adımı sayısı, teklif yapısı. Ana metriği de gerekirse huninin daha üst bir adımına, örneğin satın alma yerine ödemeye başlamaya çekiyoruz.

Test süresini neye göre belirliyoruz?

Süreyi gereken örneklemden hesaplıyor ve her zaman tam haftalara yuvarlıyoruz, çünkü hafta içi ve hafta sonu ziyaretçisi farklı davranır. Sonuçlara her gün bakıp anlamlılık görünce testi durdurmuyoruz; bu yöntem yanlış kazanan ilan etme olasılığını belirgin şekilde artırır. Türkiye'de alışveriş takvimine özgü dönemleri de hesaba katıyoruz:

  • Kasım indirim dönemi, Black Friday ve bayram öncesi haftalarda yeni test başlatmıyoruz
  • Maaş günü ve ay başı etkisi olan kategorilerde testi en az bir ay döngüsünü kapsayacak şekilde planlıyoruz
  • Test süresince aynı sayfaya trafik gönderen reklam kurgusunu değiştirmiyoruz
  • Varyantlara düşen ziyaretçi oranı planlanandan saparsa (SRM) sonucu kullanmıyoruz

Google Optimize'dan sonra araç seçimi

Google Optimize 30 Eylül 2023'te kapandı ve GA4'ün içinde yerleşik bir A/B test aracı yok. Bugün VWO, AB Tasty, Optimizely ya da Convert gibi bağımsız araçlarla çalışıyor, varyant bilgisini GA4'e olay parametresi olarak gönderiyoruz. Böylece sonucu aracın kendi raporu yanında GA4 ve sipariş verisiyle de okuyabiliyoruz.

Tarayıcıda çalışan testler sayfa yüklenirken içeriği değiştirdiği için kısa bir titreme yaratabilir ve gizleme kodu sayfa hızını, özellikle LCP değerini kötüleştirebilir. Ödeme akışı ve fiyat gibi kritik testlerde, varyantın sayfa sunucuda oluşturulurken seçildiği sunucu taraflı test kurgusunu öneriyoruz. Hangi kurgunun seçileceğine, testin dokunduğu sayfanın gelir payına bakarak karar veriyoruz.

Testleri nasıl önceliklendiriyoruz?

Test fikirleri huni analizinden ve davranış kayıtlarından gelir. Sıralamayı büyüme deneylerinde anlattığımız ICE puanıyla yapıyoruz; site testlerinde Etki puanını, değişikliğin dokunduğu adımdaki kayıp hacmine göre veriyoruz. Site testlerini reklam testlerinden ayrı yürütüyoruz: kreatif ve mesaj testleri için platformların kendi deney araçlarını, reklam kreatif analizini kullanıyoruz. Kazanan bir reklam mesajı ise çoğu zaman açılış sayfasında test edilecek bir sonraki hipotezi veriyor.

A/B Testleri: ne zaman öneriyoruz?

Öneriyoruz

  • Varyant başına yeterli ziyaretçi toplayabilen e-ticaret ve abonelik siteleri
  • Fiyat gösterimi, ödeme akışı ya da teklif yapısında büyük karar vermeden önce kanıt arayan ekipler
  • Tasarım tartışmalarını görüş yerine veriyle bitirmek isteyen şirketler

Önermiyoruz

  • Aylık birkaç bin ziyaretçisi olan sitelerde küçük arayüz testleri; sonuç aylarca çıkmaz
  • Açık bir hatanın düzeltilmesi; hatalar test edilmez, düzeltilir
  • Varyant olayının GA4'e ulaştığı doğrulanmamış kurulumlar; sonuç sipariş verisiyle okunamaz

A/B Testleri yönetim sürecimiz

  1. HipotezDeğişikliği, nedenini ve beklenen etkiyi tek cümleyle yazarız.
  2. Örneklem hesabıMevcut oran ve hedef farka göre gereken ziyaretçi sayısını ve süreyi hesaplarız.
  3. Kurulum ve kalite kontrolVaryantları her cihaz ve tarayıcıda kontrol eder, GA4'e giden varyant olayını doğrularız.
  4. Yayın ve beklemePlanlanan süre dolmadan sonuca göre karar vermeyiz; yalnızca SRM ve hata kontrolü yaparız.
  5. Okuma ve kayıtSonucu cihaz kırılımıyla okur, kazanan ya da kaybeden her testi öğrenim arşivine yazarız.

A/B Testleri: metrikler ve gereksinimler

Takip ettiğimiz metrikler

  • Birincil dönüşüm oranı
  • Ziyaretçi başına gelir
  • Güven aralığı
  • Varyant dağılım oranı (SRM)
  • Ortalama sepet tutarı

Başlamak için gerekenler

  • Bir A/B test aracı lisansı ya da sunucu taraflı test için geliştirici desteği
  • GA4'te özel boyut olarak tanımlanmış varyant parametresi
  • Test edilecek sayfaya yeterli ve düzenli trafik
  • Test süresince sayfa ve kampanya değişikliklerini dondurma kararı

Resmi kaynaklar

The Brand Move Dönüşüm Optimizasyonu Ekibi

A/B Testleri veya diğer dönüşüm optimizasyonu hizmetleri ile ilgili bilgi almak için The Brand Move Dönüşüm Optimizasyonu ekibiyle hemen iletişime geçin.

Hemen iletişime geç
Devamını inceleyin

Diğer Dönüşüm Optimizasyonu alt hizmetler

Dönüşüm Optimizasyonu ana sayfası

Huni Analizi

GA4 huni keşfiyle ziyaretçinin hangi adımda, hangi cihazda ve hangi kanalda kaybolduğunu bulup önceliği veriyle belirliyoruz.

İnceleyin

İlgili sayfalar

Sık sorulan sorular

A/B Testleri hakkında sık sorulanlar

Test yüzde 90 güvenle kazandı görünüyor, yayına alabilir miyiz?

Planlanan örnekleme ve süreye ulaşılmadıysa hayır. Ara sonuçlar sık dalgalanır; erken durdurulan testlerde görülen fark sonradan çoğunlukla küçülür. Planlanan süre tamamlandığında önceden belirlediğimiz eşiğe ve birincil metriğe göre karar veriyoruz.

Aynı anda birden fazla test çalıştırabilir miyiz?

Farklı sayfalarda ve birbirini etkilemeyen alanlarda evet. Aynı kullanıcı akışında, örneğin hem sepet hem ödeme sayfasında eşzamanlı test yapıyorsak etkileşimi kontrol etmek için ya kullanıcıları ayırıyor ya da testleri sıraya koyuyoruz.

Planlanan süre dolduğunda fark anlamlı çıkmazsa ne oluyor?

Testi sonuçsuz olarak kaydediyoruz; süreyi uzatıp anlamlılık aramıyoruz. Sonuçsuz test, iki versiyonun bu trafik düzeyinde ayırt edilemediğini söylüyor. Bu durumda daha büyük bir değişiklikle yeni bir hipotez yazıyor ya da ana metriği huninin daha üst bir adımına çekiyoruz.

A/B Testleri için ilk değerlendirmeyi birlikte yapalım.

Ücretsiz görüşmede hunideki kayıp noktalarına ve açılış sayfalarınıza bakar, ilk test edilecek üç fikri yazılı iletiriz.

Büyüme görüşmesi planlayın Satış baskısı yok. Yalnızca bulgular.