Mobil uygulama

Duruma göre sonraki adım önermek ilgili aksiyonun tamamlanmasını artırır mı?

Tamamlanan işe göre öneri sunmak kullanıcıyı ilgili sonraki aksiyona yönlendirebilir. Yanlış durum bilgisi ise bitmiş veya gereksiz bir görevi önerebilir. Önerinin kendisi değiştiği için tamamlamayı iki kolda da aynı önceden tanımlı durum–aksiyon eşleştirmesine göre değerlendir.

A/B test senaryosu. Bu sayfa bir test planıdır, gerçek bir deney sonucu içermez.

  • Mobil uygulama
  • Önerilen Sonraki Adımı Tamamlama Oranı

Kontrol / Varyant

Alanı neyin dolduracağına ziyaretçinin kim olduğu karar veriyor.

Değişen
sonraki adım önerisi
Sayfa
Mobil uygulama
Değişiklik
değişti

Tüm kullanıcılara aynı sabit 'sonraki adım' önerisi gösteriliyor

Hipotez

Kullanıcı herkese gösterilen sabit öneri yerine nerede kaldığına uyan bir sonraki adımı görürse öneriyi kendi durumuyla ilgili bulup harekete geçebilir. Durum bilgisi doğru olduğu sürece bu, önerilen sonraki adımı tamamlama oranını artırabilir.

Test planı

Ne zaman değerlendirilmeli?

Analitikte kullanıcılar sabit öneriyi görüp geçiyorsa, profilini tamamlamış birine hâlâ aynı adım gösteriliyorsa ya da destek taleplerinde gereksiz görev şikâyeti varsa, öneri kullanıcının durumuna uymuyor demektir. Kişiselleştirme işe yarıyorsa kullanıcılar durumlarına uyan aksiyonu daha sık tamamlar ve ilk değerli eyleme daha kolay ulaşır. Durum verisi eksik ya da geç güncelleniyorsa önce onu düzelt; durumu yalnızca kullanıcının paylaştığı verilerden belirle ve paylaşmadığı bir bilgiyi biliyormuş gibi görünen öneri metni kullanma.

Başarı nasıl ölçülmeli?

Önerilen Sonraki Adımı Tamamlama Oranı

Kullanıcıları durum bilgisine göre atamadan önce sınıflandır; iki kolda da önceden tanımlı sonraki aksiyonun aynı sürede tamamlanmasını karşılaştır.

Ayrıca izle

  • İlk Değerli Eyleme Ulaşma OranıKullanıcı asıl değere ulaşıyor mu?
  • Alakasız Öneri OranıÖnerileri kayıtlı durum ve uygunluk kurallarıyla karşılaştırarak denetle.
  • 7. Gün Elde TutmaElde tutma artıyor mu?
  • Uygulama Terk OranıÖneri baskısı çıkışı artırmamalı.

Test nasıl kurulmalı?

  • MantıkTek sabit öneriyi önceden tanımlanmış durum bazlı eşleştirmeyle karşılaştır.
  • Durum doğruluğuAtamadan önce girdi verisini doğrula ve tutarlı biçimde güncelle.
  • YedekDurumu bilinmeyene gösterilecek öneriyi belirle.
  • SunumÖneri sayısını ve görsel sunumu koru; çoklu seçenek ayrı testtir.
  • Kullanıcı gruplarıAynı deney içinde yeni ve aktif kullanıcıları incele.

Sonuç yorumlanırken nelere dikkat edilmeli?

  1. 1Öneri tamamlama artsa da kullanıcıların asıl değere ulaşıp ulaşmadığına bakmadan kazandı deme. İlk değerli eyleme ulaşma, elde tutma ve uygulama terk oranlarını ölçüm planına göre birlikte oku; koruma metriklerinden biri önceden belirlediğin sınırın ötesinde kötüleşirse yayına alma.
  2. 2Ölçtüğün etki bu durum ve aksiyon eşleştirmesine ve bu sunum biçimine aittir; çoklu seçenekli öneri ayrı bir testtir. Yeni ve aktif kullanıcıları ayrı oku; öneri kullanıcının kendi seçtiği yolu ezmemeli, bunu oturum kayıtlarıyla kontrol et.
  3. 3Sonuç belirsiz kaldığında önce iki kolda da tamamlamayı aynı durum ve aksiyon eşleştirmesine göre saydığını, sonra alakasız öneri oranını kontrol et; hatalı durum bilgisi gerçek etkiyi gizleyebilir. Veri düzeldikten sonra mevcut tamamlama oranını ve yakalamak istediğin farkı örneklem büyüklüğü hesaplayıcısına gir. Çıkan kol başı örneklemi kol başına günlük uygun kullanıcı sayısına böl; yeni turun süresi buradan çıkar.

Sık Sorulan Sorular

Önerilen adım iki kolda farklıyken tamamlamayı nasıl adil karşılaştırırım?

Kullanıcıları atamadan önce durum bilgisine göre sınıflandır. Sonra iki kolda da aynı önceden tanımlı durum ve aksiyon eşleştirmesine göre sonraki aksiyonun aynı sürede tamamlanmasını karşılaştır. Böylece kontrol kolunda da her kullanıcının hangi adımı tamamlaması gerektiğini bilirsin.

Durum bilgisi yanlışsa ne olur?

Kullanıcıya zaten bitirdiği veya gereksiz bir görevi önerebilirsin. Girdi verisini atamadan önce doğrula ve tutarlı biçimde güncelle. Alakasız öneri oranını önerileri kayıtlı durum ve uygunluk kurallarıyla karşılaştırarak denetle.

Durumu bilinmeyen kullanıcıya ne gösterilecek?

Testten önce bir yedek öneri belirle; yedek tanımlamadan kişiselleştirme kurma. Durum tespitini kullanıcının paylaşmadığı verilerden türetip bunu ima etme. Kullanıcının kendi seçtiği yolu da öneriyle ezme.

Öneri tamamlama arttıysa test kazanılmış mı?

Önerilen aksiyonun tamamlanması seçilen birincil hedefse bu sonucu değerlendirebilirsin. İlk değerli eylem, elde tutma ve terk gibi sonuçları da önceden belirlenen ölçüm planına göre izle. Yayına alma kararını bu metriklerin her birinin mutlaka artmasına bağlama. Koruma metriklerinde önceden belirlenen sınırı aşan düşüş varsa yayına alma. Kararı tanımlı sonraki aksiyonu tamamlama oranı ile ver.