Dashboard

Kullanılmayan bir özelliği dashboard'da tek seferlik bir ipucu kartıyla tanıtmak kullanımını artırır mı?

Bir özellik arayüzde bulunsa da keşfedilmeyebilir. Tek seferlik, kapatılabilir bir dashboard ipucu dikkat çekip ilk kullanımı artırabilir. İpucu kullanıcının mevcut işini engellememeli.

A/B test senaryosu. Bu sayfa bir test planıdır, gerçek bir deney sonucu içermez.

  • Dashboard
  • Özellik Deneme Oranı

Kontrol / Varyant

Bir tarafta yok, öbüründe var.

Değişen
özellik tanıtım kartı
Sayfa
Dashboard
Değişiklik
eklendi

Az bilinen özellik için dashboard'da tanıtım yok

Hipotez

Özelliği hiç kullanmamış kullanıcı dashboard'da tek seferlik ve kapatılabilir bir ipucuyla karşılaşırsa özelliğin varlığını fark edip denemeye geçebilir. Bu, uygun kullanıcılarda tanımlı süre içindeki özellik deneme oranını artırabilir.

Test planı

Ne zaman değerlendirilmeli?

Değerli bir özellik arayüzde olduğu hâlde keşfedilmiyorsa bu testi planla: kullanım verisinde özelliğe hiç girmeyen hesaplar, ürünün zaten yaptığı bir işi soran destek talepleri ya da anketlerde özelliği bilmediğini söyleyen kullanıcılar gibi. İpucu işe yararsa onu gören kullanıcılar özelliği daha sık dener ve ilk denemeden sonra ona geri döner. Özellik bulunuyor ama işe yaramıyorsa ipucu bunu çözmez, önce özelliği ele al; kartın kullanıcının o an yaptığı asıl görevin önüne geçmediğini de başlatmadan doğrula.

Başarı nasıl ölçülmeli?

Özellik Deneme Oranı

Daha önce özelliği kullanmamış ve deneye önceden atanmış uygun kullanıcılar arasında, tanımlı sürede ilk kullanımı karşılaştır.

Ayrıca izle

  • Özelliği Tekrar Kullanma OranıAtanan kullanıcıların tekrar kullanımını aynı sürede karşılaştır; ilk denemeden tekrara geçişi ayrıca raporla.
  • Ana Görev Tamamlama Süresiİpucu, kullanıcının o an yapmaya çalıştığı asıl işi yavaşlatmamalı.
  • İpucu Kapatma OranıKapatma oranını yalnızca varyant içindeki açıklayıcı metrik olarak kullan.
  • Destek Talebiİpucu kaynaklı kafa karışıklığı destek talebini artırmamalı.

Test nasıl kurulmalı?

  • Tek gösterimKullanılmamış tek bir özellik için tanımlı, kapatılabilir bir kart göster.
  • UygunlukGerçek kullanım geçmişini ve sabit gösterim tetikleyicisini kullan.
  • Sabit kalanÖzelliğe erişim, dashboard yerleşimi ve ana görev korunur.
  • FrekansKart yalnızca bir kez gösterilir; kapatılınca bu deneyde tekrar çıkmaz.
  • Sonraki deneylerMetin, zamanlama, çoklu ipucu ve tekrar gösterim ayrı test edilir.

Sonuç yorumlanırken nelere dikkat edilmeli?

  1. 1Özellik deneme oranı birincil ölçüttür; ama ana görevin tamamlanması yavaşlıyor ya da destek talepleri artıyorsa ilk kullanımdaki artış ipucunu yayına almak için yetmez. Bu tablo, ipucunun asıl işi engellediğine işaret edebilir; kapatma oranına ise yalnızca varyantın içinde, açıklayıcı bir sinyal olarak bak.
  2. 2İlk deneme, özelliğin benimsendiğini tek başına göstermez. Tekrar kullanım oranını atanan tüm kullanıcılar için aynı sürede karşılaştır ve ilk denemeden tekrara geçişi ayrıca raporla. Sonucu yalnızca bu özellik ve bu ipucu için geçerli say.
  3. 3Yalnızca özelliği daha önce kullanmamış kullanıcılar uygun olduğu için kitle küçük kalabilir. Beklediğin farkı yakalamak için kaç kullanıcı gerektiğini örneklem büyüklüğü hesaplayıcısıyla baştan hesapla; sonuç belirsizse testi uzatmadan önce bu sayıya ulaşıp ulaşmadığına bak.

Sık Sorulan Sorular

İpucu kartı kimlere gösterilmeli?

Daha önce özelliği kullanmamış ve deneye önceden atanmış uygun kullanıcılara gösterilmeli. Hedeflemeyi gerçek kullanım geçmişine ve sabit bir gösterim tetikleyicisine dayandır. Varsayıma dayanan bir hedefleme mantığı kurma. Kararı özelliği ilk kez kullanma oranı ile ver.

Kullanıcı ipucunu kapatırsa tekrar gösterilir mi?

Gösterilmez, kart yalnızca bir kez çıkar ve kapatılınca bu deneyde tekrar görünmez. Tanımlı fırsatta yalnızca tek ipucu göster. Tekrar gösterim ve çoklu ipucu ayrı deneylerde test edilir.

İlk deneme artarsa özellik benimsenmiş sayılır mı?

Sayılmaz, tekrar kullanım oranını da atanan kullanıcılar için aynı sürede karşılaştır. İlk denemeden tekrara geçişi ayrıca raporla. Kapatma oranını yalnızca varyant içindeki açıklayıcı metrik olarak kullan.

İpucu kullanıcının işini nasıl aksatabilir?

Kart, kullanıcının o an yapmaya çalıştığı asıl görevi engelleyecek şekilde kurulursa işi yavaşlatabilir. Ana görev tamamlama süresini izle ve bu sürenin uzamadığını kontrol et. İpucu kaynaklı kafa karışıklığının destek taleplerini artırmadığına da bak.