Turkcell | Geleceği Yazanlar

GELECEĞİ YAZANLAR BLOG

Yeni Blog Yaz

Mobil Uygulamalarda Otomatik A/B Testleri

Mehmet Altıparmak - 25 Ağustos 2014

Odalara toplanıp kullanıcılara sunacağımız uygulamaların arayüzüne, yeteneklerine karar vermeye çalışıyoruz. Bazen bir adım ileriye giderek "focus group" çalışmaları yaptırıp oradan gelen sonuçlara göre uygulamalarımızı şekillendiriyoruz. Google sunduğu Tag Manager servisi ile bir adım daha ileriye gidebilmemize olanak sağlıyor.

Google Analytics Experiments ve Tag Manager servisleri sayesinde iOS ve Android uygulamalarınızda üretim (production) ortamında A/B testleri gerçekleştirmek gayet basit bir şekil almış. Üstelik testlerinizin süresi dolduğunda Google sizi hedefinize en çok yaklaştıran sonucu otomatik olarak sürdürüyor ve diğer değişkenleri kendisi kapatıyor, böylece deney sonucunuzu içeren bir güncelleme yayınlamanıza da gerek kalmıyor.

Servis aşağıdaki esneklikleri de hali hazırda sağlıyor,

  • Kullanıcılarınızın yüzde kaçına testlerin uygulanmasını istediğinizi seçebiliyorsunuz,
  • Kazanan ilan edilebilmesi için gereken güven aralığını seçebiliyorsunuz. (%95, %99 ya da %99.5),
  • Deneyin en az kaç gün sürmesi gerektiğini belirtebiliyorsunuz,
  • Deney sonrasında hangi değişkenin kullanıcılara iletileceğini belirtebiliyorsunuz,
  • Deney süresince tüm değişkenlerin eşit oranlarda kullanıcılara iletilmesini sağlayabiliyorsunuz. (Normal davranışında zaman geçtikçe sizi hedeflerinize yaklaştıran değişkenin gösterim oranı artırılıyor.)

Adım adım tüm işlemleri anlatmak uzun sürebileceği için bu yazımızda entegrasyon nasıl yapılırdan bahsetmektense faydalarından ve bir örnekten bahsetmeyi tercih ettik. Uygulamanıza entegre etmek isterseniz buradaki aşamaları takip edebilirsiniz.

 

PoC

Servisi deneyimleyebilmek adına basit bir Android uygulaması geliştirdik. Uygulamada menü yapısı olarak NavigationDrawer kullandık. NavigationDrawer’daki ikinci menü item’ı seçildiğinde satın alma yapılabilecek bir ekran açılıyor. Diğer ekranlarda da diğer içerikler ve ayarlar bulunuyor. Öntanımlı olarak “Tüm Ürünler” ekranı açık geliyor ve bu ekranda satın alma yapılamıyor. 

 

Hedef olarak oturum (session) süresini uzatmak, görüntülenen ekran sayısını artırmak ya da Google Analytics'e ilettiğiniz herhangi bir event’in değerini maksimize etmek mümkün, bu da sınırsız hedef tanımlayabilmeyi mümkün kılıyor. Biz iki hedef tanımladık.

  1. İndirimdekiler sayfasının görüntülenme sayısını maksimize etmek.
  2. Satın alma işlemini maksimize etmek.

Hedeflerimize ulaşabilmek için iki test belirledik.

  1. Uygulama ilk açıldığında NavigationDrawer açık ya da kapalı gelsin. (1. Görüntüde açık, 2. görüntüde kapalı)
  2. Satın almanın gerçekleşmesini sağlayan düğme metni “Hemen Satın Al”, “Tükenmeden Satın Al”, “Bitmeden Al” değerlerinden herhangi birine sahip olsun.

Bu tanımlamaları yaptıktan sonra ekip içerisinde uygulamayı yanlı olarak yani belirli durumlarda hedeflerimize uygun hareket ederek o test senaryosunun kazanmasını sağlayacak şekilde kullandık. Üç gün sonrasında aşağıdaki sonuçları aldık: 

 

Test Sonucu 1

Variation-1 yani NavigationDrawer’ın uygulama açılışında açık gelmesi durumu 1. hedefimizi maksimize etmemizi sağladığı için kazanan ilan edildi ve artık tüm kullanıcılar uygulamayı açtıklarında NavigationDrawer açık gelecek.

 

Test sonucu 2

Düğme üzerindeki metin ile satın alma oranı arasındaki ilişki ile ilgili olan ikinci testimizi, Variation-2 yani düğme üzerindeki metnin "Bitmeden Al" olması durumu önde götürüyor ancak henüz bir kazanan ilan edilmemiş. Google herhangi bir kazanan ilan edebilmesi için minimum %95 emin olmak istiyor. Alternatif olarak %95, %99, %99.5 gibi değerleri seçmek mümkün.

Gördüğünüz gibi sizi hedefinize en çabuk götürecek "bence"yi bulmak için Google Tag Manager ve Google Analytics beraber hoş bir çözüm sağlıyorlar. Aslında sağladıkları faydalar burada anlatabildiklerimin de çok ötesinde, en basitinden klasik A/B testing yöntemlerinden farklı olarak değişkenleri yeni güncelleme yayınlamadan güncellemek mümkün. Aşağıdaki bağlantıları inceleyerek servisler hakkında daha detaylı bilgi alabilir, uygulamalarınızı hedefine bir adım daha yaklaştırabilirsiniz.

 

Referanslar:

3 Cevap

yemliha

17 Ocak 2019

Mobil uygulama tarafında ilk destek verdiğim  çocuk giyim ve bebek giyim sitesi https://www.mavipink.com/ dur. Sonrasında tesettür giyim üzerine https://dasiva.com.tr ile çalışmıştır. Aynı sektörde yer alan tesettür elbise üzerine https://www.nurhira.com/ ile çalıştım. Bu projeye paralel kadın ayakkabı modelleri sitesi https://www.sofiabaldi.com/ ile çalıştım. Özellikle bitkisel ürünler tarafında  doğal ve organik ürünler satan https://www.thelifecoshop.com/ ile çalıştım. İçerik sistemlari kanalında endüstri 4.0 ve proses işlemleri haber kanalı https://www.stendustri.com.tr/ ile çalıştım. Bu proje ile birlikte sadece özel tasarım ürünleri satanhttps://www.hipicon.com/ ile çalıştım ve çalışmaya devam ediyorum.

caner

01 Temmuz 2019

Bilgiler benim için oldukça faydalı oldu çok teşekkürler. A/B testlerini teraryum üzerine olan https://www.orkideaski.com/ sitesinde kullanacağım. 

caner

01 Temmuz 2019

Bu bilgileri https://timebetgirisi.com/ adresinde kullandım aynı zamanda yakın zamanda https://www.orkideaski.com/ sitesi için de kullanacağım ve sonuçları buraya yazacağım.

Yorum yapmak için Giriş Yapın ya da Üye olun.