A/B testi sonuçları ve metrikler

A/B testlerinden elde ettiğiniz önemli verileri ve içgörüleri keşfedin; farklı paywall’ları ve onboarding’leri karşılaştırarak kullanıcı davranışı, etkileşim ve dönüşüm oranları üzerindeki etkilerini görün. Buradaki metriklere ve sonuçlara bakarak akıllıca kararlar alabilir ve uygulamanızın performansını artırabilirsiniz. Eyleme dönüştürülebilir içgörüler bulmak ve uygulamanızın başarısını güçlendirmek için verileri inceleyin.

A/B testi sonuçları

Adapty’nin A/B testi sonuçları için sunduğu üç metrik şunlardır:

ab-test-results.png

Gelir: Bu metrik, satın almalar ve yenilemelerden USD cinsinden elde edilen toplam tutarı gösterir; kullanıcılara yapılan iade tutarları bu rakamdan düşülür. Hem ilk satın almayı hem de sonraki abonelik yenilemelerini kapsar. Gelir metriği, her A/B testi varyantının finansal performansını değerlendirmenize ve hangisinin en fazla kazanç getirdiğini belirlemenize yardımcı olur.

Paywall metrikleri hakkında daha fazla bilgi edinin. En iyi olma olasılığı: Adapty, A/B testi sonuçlarını analiz etmek için sağlam bir matematiksel analiz çerçevesi kullanır ve En iyi olma olasılığı adında bir metrik sunar. Bu metrik, belirli bir varyantın test edilen tüm varyantlar arasında en iyi performansı gösteren seçenek olma olasılığını (uzun vadeli gelir açısından) değerlendirir. Metrik, %1 ile %100 arasında değişen bir yüzde değeri olarak ifade edilir. Adapty’nin bu metriği nasıl hesapladığına dair ayrıntılı bilgi için dokümantasyona bakabilirsiniz. 1.000 kullanıcı başına gelir açısından en iyi performansı gösteren seçenek yeşil renkte vurgulanır ve otomatik olarak varsayılan seçim olarak belirlenir. 1.000 kullanıcı başına gelir: 1.000 kullanıcı başına gelir metriği, her A/B testi varyantı için 1.000 kullanıcı başına elde edilen ortalama geliri hesaplar. Bu metrik, toplam kullanıcı sayısından bağımsız olarak varyantlarınızın gelir verimliliğini anlamanıza yardımcı olur. Farklı varyantların performansını standart bir ölçekte karşılaştırmanıza ve gelir üretimi verimliliğine dayalı bilinçli kararlar almanıza olanak tanır. 1.000 kullanıcı başına gelir için tahmin aralıkları: 1.000 kullanıcı başına gelir metriği aynı zamanda tahmin aralıklarını da içerir. Bu tahmin aralıkları, mevcut veriler ve istatistiksel analize dayanarak belirli bir varyant için 1.000 kullanıcı başına gerçek gelirin düşeceği öngörülen aralığı temsil eder. A/B testi bağlamında, farklı varyantların ürettiği geliri analiz ederken her varyant için 1.000 kullanıcı başına ortalama geliri hesaplıyoruz. Kullanıcılar arasında gelir farklılıkları olabileceğinden, tahmin aralıkları; tahmin süreciyle ilişkili değişkenliği ve belirsizliği göz önünde bulundurarak 1.000 kullanıcı başına düşen gelir için makul değerlere dair net bir gösterge sunar. 1.000 kullanıcı başına gelir metriğine tahmin aralıklarını dahil ederek Adapty, olası gelir sonuçlarının aralığını göz önünde bulundurarak A/B testi varyantlarınızın gelir verimliliğini değerlendirmenizi sağlar. Bu bilgi, tahmin sürecindeki belirsizliği ve 1.000 kullanıcı başına gelir için makul değerleri hesaba katarak veri odaklı kararlar almanıza ve abonelik stratejinizi etkili biçimde optimize etmenize yardımcı olur. Bu metrikler, A/B testi varyantlarınızın finansal performansı, istatistiksel önemi ve gelir verimliliği hakkında bilgi edinmenizi sağlar; böylece veriye dayalı kararlar alabilir ve abonelik stratejinizi daha etkin biçimde optimize edebilirsiniz.

A/B testi metrikleri

Adapty, paywall veya onboarding varyantlarınız üzerinde yürüttüğünüz A/B testinin performansını etkili biçimde ölçmenize yardımcı olan kapsamlı bir metrik seti sunar. Bu metrikler, görüntülemeler hariç gerçek zamanlı olarak sürekli güncellenir; görüntülemeler ise periyodik olarak güncellenir. Bu metrikleri anlamak, farklı varyantların etkinliğini değerlendirmenize ve paywall veya onboarding stratejinizi optimize etmek için veriye dayalı kararlar almanıza yardımcı olur. A/B testi metrikleri, tüm A/B testlerinizin performansına genel bir bakış sunan A/B testi listesinde mevcuttur. Bu kapsamlı görünüm, her test varyantı için toplu metrikler sunarak performanslarını karşılaştırmanıza ve önemli farklılıkları tespit etmenize olanak tanır. Her A/B testinin daha ayrıntılı analizi için A/B Testi detay metriklerine erişebilirsiniz. Bu bölüm, seçilen A/B testine özgü derinlemesine metrikler sunarak bireysel varyantların performansını incelemenizi sağlar. Görüntülemeler dışındaki tüm metrikler, paywall veya onboarding içindeki ürüne atfedilir.

Metrik kontrolleri

Sistem, metrikleri seçilen zaman dilimine göre görüntüler ve üç girinti düzeyi olan sol sütun parametresine göre düzenler.

Profil kurulum tarihi filtreleme

2bf4d9f-Area.gif

Metrikleri yükleme tarihine göre filtrele onay kutusu, metrikleri varsayılan filtreler yerine profil yükleme tarihine göre filtrelemenizi sağlar. Varsayılan filtreler, işlemler için deneme/satın alma tarihini; paywall veya onboarding görüntülemeleri için ise görüntülenme tarihini kullanır. Bu onay kutusunu seçerek, metrikleri profil yükleme tarihiyle hizalayabilir ve belirli bir dönemdeki kullanıcı edinme performansını daha net ölçebilirsiniz. Bu seçenek, metrik analizini kendi ihtiyaçlarınıza göre özelleştirmek için kullanışlıdır.

Zaman aralıkları

Metrik verilerini analiz etmek için çeşitli zaman dilimlerinden birini seçebilirsiniz; bu sayede günler, haftalar, aylar veya özel tarih aralıkları gibi belirli sürelere odaklanabilirsiniz.

ab-test-time-ranges.png

Mevcut filtreler ve gruplama

Ana makale: Analytics kontrolleri

Adapty, metrik analizini ihtiyaçlarınıza göre özelleştirmek ve filtrelemek için güçlü araçlar sunar. Adapty’nin metrik sayfasında çeşitli zaman aralıklarına, gruplama seçeneklerine ve filtreleme olanaklarına erişebilirsiniz.

  • ✅ Şuna göre filtrele: Kitle, attribution, ülke, paywall, paywall durumu, paywall grubu, onboarding, placement, ülke, mağaza, ürün ve ürün mağazası.
  • ✅ Şuna göre grupla: Ürün ve mağaza.

A/B testine göre filtrelediğinizde, çapraz placement A/B testleri her placement için ayrı alt testler olarak görünür (örn. My test child-0, My test child-1). Ayrıntılar için Çapraz placement A/B testi sınırlamaları bölümüne bakın.

Tekil metrik grafiği

Paywall veya onboarding metrik sayfasının temel bileşenlerinden biri, seçilen metrikleri görsel olarak sunan ve analizleri kolaylaştıran grafik bölümüdür.

e6b0674-Area.gif

A/B testi metrik sayfasındaki grafik bölümü, seçilen metrik değerlerini görsel olarak temsil eden yatay bir çubuk grafik içerir. Grafikteki her çubuk bir metrik değere karşılık gelir ve boyutu orantılı olduğundan verileri bir bakışta anlamak kolaylaşır. Yatay çizgi analiz edilen zaman dilimini, dikey sütun ise metriklerin sayısal değerlerini gösterir. Tüm metrik değerlerinin toplam değeri grafiğin yanında görüntülenir. Ayrıca, grafik bölümünün sağ üst köşesindeki ok simgesine tıklamak görünümü genişleterek seçilen metrikleri grafiğin tam satırında gösterir.

A/B testi özeti

Tekli metrik grafiğinin yanında, A/B testinin durumu, süresi, placement’ları ve diğer ilgili ayrıntıları hakkında bilgi içeren A/B testi detay özeti bölümü görüntülenir.

90fa3f5-Area.gif

Metrik tanımları

A/B testleri için kullanılabilen temel metrikler şunlardır:

30c7b68-Area.gif

Gelir

Gelir, A/B testinden kaynaklanan satın alma ve yenileme işlemlerinden USD cinsinden elde edilen toplam para miktarını temsil eder. İlk satın alma ve ardından gelen abonelik yenilemelerini kapsar. Gelir metriği, App Store veya Play Store komisyonu düşülmeden önce hesaplanır.

Paywall gelir metrikleri hakkında daha fazla bilgi edinin.

Satın almalara dönüşüm oranı (CR to purchases)

Satın almalara dönüşüm oranı, A/B testinizin görüntülemeleri gerçek satın almalara dönüştürmedeki etkinliğini ölçer. Satın alma sayısının görüntüleme sayısına bölünmesiyle hesaplanır. Örneğin 10 satın alma ve 100 görüntüleme varsa satın almalara dönüşüm oranı %10 olur.

Deneme dönüşüm oranı (CR trials)

Denemelere dönüşüm oranı (CR), A/B testinden başlatılan deneme sayısının görüntüleme sayısına bölünmesiyle elde edilir. Denemelere dönüşüm oranı, A/B testinizin görüntülemeleri deneme aktivasyonlarına dönüştürmedeki etkinliğini ölçer.

Satın almalar (Purchases)

Satın almalar metriği, A/B testi sonucunda paywall veya onboarding içinde gerçekleştirilen toplam işlem sayısını temsil eder. Aşağıdaki satın alma türlerini kapsar:

  • Yeni satın almalar.
  • Aktive edilen denemelerin satın almaya dönüşmesi.
  • Aboneliklerin indirgenmesi, yükseltilmesi ve çapraz geçişleri.
  • Abonelik yenilemeleri (ör. otomatik yenileme olmaksızın süresi dolan bir aboneliğin sonradan yenilenmesi).

Yenilemelerin satın almalar metriğine dahil edilmediğini lütfen unutmayın.

Denemeler (Trials)

Denemeler metriği, A/B testi sonucunda aktive edilen toplam deneme sayısını gösterir.

İptal edilen denemeler (Trials cancelled)

İptal edilen denemeler metriği, otomatik yenilemenin kapatıldığı deneme sayısını temsil eder. Bu durum, kullanıcıların denemeden manuel olarak abonelik iptali yapması sonucunda gerçekleşir.

İadeler (Refunds)

A/B testi için iadeler, test edilen varyasyonlarla doğrudan ilişkili iade edilen satın alma ve abonelik sayısını temsil eder.

Görüntülemeler (Views)

Görüntülemeler, A/B testinin kapsadığı paywall veya onboarding’lerin görüntülenme sayısıdır. Kullanıcı iki kez ziyaret ederse bu iki ziyaret olarak sayılır.

Tekil görüntülemeler (Unique views)

Tekil görüntülemeler, paywall veya onboarding’in kaç benzersiz kullanıcı tarafından görüntülendiğini gösterir. Kullanıcı iki kez ziyaret etse bile bu bir tekil görüntüleme olarak sayılır.

En iyi olma olasılığı (Probability to be the best)

En iyi olma olasılığı metriği, bir A/B testindeki belirli bir varyantın test edilen tüm paywall’lar veya onboarding’ler arasında en iyi performans gösteren seçenek olma ihtimalini sayısal olarak ifade eder. Her paywall veya onboarding’in göreli performansını gösteren sayısal bir olasılık sunar. Metrik, %1 ile %100 arasında yüzde değeri olarak ifade edilir.

ARPU (Kullanıcı başına ortalama gelir)

Yalnızca onboarding A/B testleri için. Belirli bir dönemde her kullanıcıdan elde edilen ortalama geliri ölçer. Toplam gelirin benzersiz kullanıcı sayısına bölünmesiyle hesaplanır.

ARPPU (Ödeme yapan kullanıcı başına ortalama gelir)

ARPPU, A/B testi sonucunda ödeme yapan kullanıcı başına ortalama geliri ifade eder. Toplam gelirin benzersiz ödeme yapan kullanıcı sayısına bölünmesiyle hesaplanır. Örneğin 1.000 ödeme yapan kullanıcıdan 15.000 USD gelir elde ettiyseniz ARPPU 15 USD olur.

ARPAS (Aktif abone başına ortalama gelir)

ARPAS, A/B testini yürütmekten elde edilen aktif abone başına ortalama geliri ölçmenizi sağlayan bir metriktir. Toplam gelirin deneme veya abonelik aktive eden abone sayısına bölünmesiyle hesaplanır. Örneğin toplam gelir 5.000 USD ve 1.000 aboneniz varsa ARPAS 5 USD olur. Bu metrik, abone başına ortalama para kazanma potansiyelini değerlendirmeye yardımcı olur.

Hasılat (Proceeds)

A/B testi için hasılat metriği, geçerli App Store / Play Store komisyonu düşüldükten sonra satın almalar ve yenilemelerden uygulama sahibinin USD cinsinden elde ettiği gerçek tutarı temsil eder. Doğrudan uygulamanın kazançlarına katkıda bulunan, A/B testinde denenen varyasyonlarla ilişkili net geliri yansıtır. Hasılatın nasıl hesaplandığına ilişkin daha fazla bilgi için Adapty dokümantasyonuna başvurabilirsiniz.

Tekil aboneler (Unique subscribers)

Tekil aboneler metriği, A/B testindeki varyasyonlar aracılığıyla abone olan veya deneme aktive eden farklı bireylerin sayısını temsil eder. Başlattıkları abonelik veya deneme sayısından bağımsız olarak her aboneyi yalnızca bir kez sayar.

Tekil ödeme yapan aboneler (Unique paid subscribers)

Tekil ödeme yapan aboneler metriği, A/B testindeki varyasyonlar aracılığıyla bir satın alma işlemini başarıyla tamamlayarak ödeme yapan abone haline gelen benzersiz kişi sayısını temsil eder.

İade oranı (Refund rate)

A/B testi için iade oranı, testteki varyasyonlarla doğrudan ilişkili iade sayısının ilk kez yapılan satın alma sayısına (yenilemeler hariç) bölünmesiyle hesaplanır. Örneğin 5 iade ve 1.000 ilk kez satın alma varsa iade oranı %0,5 olur.

Tekil satın alma dönüşüm oranı (Unique CR purchases)

A/B testi için tekil satın alma dönüşüm oranı, testteki varyasyonlarla ilişkili satın alma sayısının tekil görüntüleme sayısına bölünmesiyle hesaplanır. Örneğin 10 satın alma ve 100 tekil görüntüleme varsa tekil satın alma dönüşüm oranı %10 olur.

Tekil deneme dönüşüm oranı (Unique CR trials)

A/B testi için tekil deneme dönüşüm oranı, testteki varyasyonlarla ilişkili başlatılan deneme sayısının tekil görüntüleme sayısına bölünmesiyle hesaplanır. Örneğin 30 başlatılan deneme ve 100 tekil görüntüleme varsa tekil deneme dönüşüm oranı %30 olur.

Tamamlamalar ve tekil tamamlamalar (Completions & unique completions)

Yalnızca onboarding A/B testleri için. Tamamlamalar, kullanıcıların A/B testindeki varyasyonlar aracılığıyla onboarding’i tamamlama (yani ilk ekrandan son ekrana geçme) sayısını sayar. Biri iki kez tamamlarsa bu iki tamamlama ancak bir tekil tamamlama sayılır.

Tekil tamamlama oranı (Unique completions rate)

Yalnızca onboarding A/B testleri için. Tekil tamamlama sayısının tekil görüntüleme sayısına bölünmesiyle elde edilir. Bu metrik, insanların A/B testindeki varyasyonlar aracılığıyla onboarding ile nasıl etkileşime girdiğini anlamanıza ve onboarding’in görmezden gelindiğini fark ettiğinizde değişiklik yapmanıza yardımcı olur.