Push A/B Testi

A/B Testi, aynı hedef kitle karşısında iki push varyantını karşılaştırmanıza ve daha iyi performans gösteren mesajı kullanmaya devam etmenize olanak tanır. Kazananı kalan hedef kitleye göndermeden önce metinleri, görselleri, kişiselleştirmeyi veya harekete geçirici mesajları test etmek için kullanın.

A/B testlerini şu kanallar için çalıştırabilirsiniz: Mobile Push ve Web Push kampanyaları.

Başlamadan önce

Bir test oluşturmadan önce şunlardan emin olun:

• push veya web push kanalınızın önceden yapılandırılmış olması,

• hangi tek öğeyi test etmek istediğinizi bilmeniz,

• hedef kitlenizin iki anlamlı gruba bölünecek kadar büyük olması,

• ve başarı metriğinizin yayın öncesinde net olması.

Tıklama sonrası etkiyi ölçmek istiyorsanız, dönüşüm etkinliğinizi iki varyantı hazırlarken tanımlayın.

Genel akış Mobile Push ve Web Pushiçin aynıdır. Kullanılabilir içerik alanları ve zengin medya seçenekleri, kanala ve seçilen push türüne göre değişebilir.

Yeni bir A/B Testi kampanyası başlatın

Adım 1: Kurulum

Şuraya gidin: Messages > Campaigns > Start A/B Testing.

İçinde Kurulum:

1. bir Kampanya Adı.

2. girin Push Notification veya Web Push.

3. Test etmek istediğiniz push türünü seçin.

4. Şunu gözden geçirin: Tahmini Erişim devam etmeden önce.

Kampanya türü ve tahmini erişim içeren kurulum adımı

Adım 2: Varyant A

Mesajınızın ilk sürümünü oluşturun.

Yapılandırılacak yaygın alanlar:

• Kategori izin ve raporlama için

• Başlık

• Bildirim Mesajı

• Alt Metin

• Medya

• tıklama aksiyonu

• Dönüşüm etkinliğidönüşüm raporlaması istiyorsanız

Bu sürümü temel sürümünüz olarak bırakın. Bunu Varyant B ile karşılaştıracaksınız.

Varyant A içerik yapılandırması

Adım 3: Varyant B

Mesajın ikinci sürümünü oluşturun.

Yalnızca test etmek istediğiniz öğeyi değiştirin. Geri kalan her şeyi aynı tutun. Bu, sonucu yorumlamayı kolaylaştırır.

İyi test adayları:

• Başlık“Siparişiniz hazır” vs. “Alım şimdi hazır”

• CTA“Uygulamayı Aç” vs. “Siparişi Takip Et”

• Kişiselleştirmegenel metin vs. {@name}tabanlı metin

• Medyagörsel A vs. görsel B

• Mesaj uzunluğukısa metin vs. detaylı metin

Aynı anda yalnızca bir ana değişkenitest edin. Başlık, görsel ve CTA’yı birlikte değiştirirseniz, hangi değişikliğin sonucu yarattığını bilemezsiniz.

Varyant B içerik yapılandırması

Adım 4: Hedef Kitle

Testi kimin alacağını seçin.

Hedefleme seçenekleri şunları içerir:

• Herkese Gönder

• Kullanıcıları Seç

• Gelişmiş

• Dağıtım Listesi

Ardından bu hedef kitlenin ne kadarının her test grubuna gideceğini ayarlayın:

• Varyant A %

• Varyant B %

Hedef kitle bölünmesi nasıl çalışır

• Varyant A A için atanan yüzdeyi alır.

• Varyant B B için atanan yüzdeyi alır.

• Eğer A + B = 100%, kontrol grubu yoktur.

• Eğer A + B < 100%, kalan hedef kitle kontrol grubu olur.

Örnekler:

• 50 / 50 → kontrol grubu yok

• 70 / 30 → kontrol grubu yok

• 30 / 30 → kalan kısım 40% kontrol grubu olur

• 40 / 20 → kalan kısım 40% kontrol grubu olur

Kontrol grubu olmadığında test sona erer A/B gönderimi tamamlandıktan sonra. Kontrol grubu olduğunda, test performansını bu işlem görmemiş hedef kitleye karşı inceleyebilirsiniz.

Kampanya etkisini daha net ölçmek istediğinizde kontrol grubu kullanın. %100 split testleri kazananı seçip hızlı ilerlemek istediğinizde kullanın.

Adım 5: Zamanlama

Testin ne zaman çalışacağını ve ne kadar hızlı teslim edileceğini seçin.

Şunları yapılandırabilirsiniz:

1. Mesaj Gönderimine Başla

   • Şimdi

   • Belirli Bir Zamanda

   • Her Kullanıcı İçin En İyi Zamanda Gönder

2. Mesaj Süresi Dolumu

   • Asla

   • Belirli Bir Zamana Kadar

3. Teslimat Hızı

   • Hızlı Gönder

   • Paketler Halinde Gönder

Büyük hedef kitleler veya trafikten hassas kampanyalar için paketli teslimatı kullanın.

Zamanlama, süre dolumu ve teslimat hızı

Adım 6: Gözden Geçirme ve Yayına Alma

Göndermeden önce:

• hedefleme ve yüzdeleri doğrulayın,

• iki varyantı önizleyin,

• zamanlama ve süre dolumu ayarlarını gözden geçirin,

• ve testi onaylayın.

Yayınlandıktan sonra Netmera, her varyantı atanmış olduğu hedef kitleye gönderir.

Yayın öncesi son inceleme

Raporlar ve kazanan seçimi

Test çalıştıktan sonra raporda her iki varyantı karşılaştırın.

Metrikler şunları içerir:

• Hedef Kitle

• Gönderilen

• Başarılı

• Tıklanan

• Dönüşüm

• Gelir

Kazananı kampanya hedefinize göre seçin:

• şunu kullanın Tıklanan trafik odaklı kampanyalar için,

• şunu kullanın Dönüşüm işlem odaklı kampanyalar için,

• ve şunu kullanın Gelir iş değeri en önemli olduğunda.

Kontrol grubu varsa, kararınıza bu karşılaştırmayı da dahil edin. Kazananı seçtikten sonra, o kazanan varyantı kalan hedef kitleye.

Dönüşüm raporlaması istiyorsanız bir dönüşüm etkinliği Varyant A ve Varyant B içinde yapılandırılmalıdır.

Rapor davranışı

• Kontrol grubu kullanılıyorsa, Kontrol Grubu Performansı raporda görünür.

• Kontrol grubu kullanılmıyorsa bu bölüm gizlenir.

• Varyant A ve Varyant B her zaman ayrı olarak görünür durumda kalır.

• Hedef kitle yüzdeleri Hedef Kitle.

A/B Testi raporu performans karşılaştırması ile

En iyi uygulamalar

• Başlamadan önce başarı metriğini tanımlayın.

• Aynı anda yalnızca bir ana değişkeni test edin.

• Hedef kitle bölünmelerini bilinçli yapın.

• Kontrol grubunu yalnızca artımsal ölçüm gerektiğinde kullanın.

• Kazananı seçmeden önce testin yeterli veri toplamasına izin verin.

İlgili sayfalar

• Bildirim İçeriği: Ne

• Hedef Kitle: Kim

• Kampanya Zamanlaması: Ne Zaman

• Message Categories