Sohbet düğmesi ve penceresi için A/B testleri (beta)

Hangi sohbet düğmesi yazısı daha fazla sohbet getirir? Yan panel, yüzen pencereden daha iyi çalışır mı? A/B testleriyle farklı ziyaretçilere farklı varyantlar gösterir, hangisinin daha iyi sonuç verdiğini ölçersiniz.

A/B testleri Beta olarak işaretlidir. Yan menüde Kurulum → A/B testleri altında, /app/ab adresinde bulunur. Tüm çalışma alanı için geçerlidirler; her test bir projeye aittir. Test oluşturmak ve değiştirmek projeyi değiştirme yetkisi gerektirir.

Neleri test edebilirsiniz?

Ne test ediliyor? altında Sohbet düğmesi, Sohbet penceresi veya ikisini seçersiniz. Varyant başına şunları değiştirebilirsiniz:

• Renkler – ana renk, vurgu, arka plan, balon yüzeyi, metin, ikincil metin, çizgiler; ayrıca köşe yarıçapı ve yazı tipi.
• Sohbet düğmesi – şekil, boyut, telefon boyutu, yazı, ikinci satır, gösterim, simge.
• Stil – pencere boyutu, yan panel, arka plan veya animasyon gibi Sohbet penceresi bölümündeki tüm ayarlar.
• Metinler – sohbet düğmesinin yazısı ve ikinci satırı (launcher.text, launcher.subtext), ana ekranın karşılaması ve başlangıç noktası (home.greeting, home.start, home.start_sub), üst bölümün başlığı ve ikinci satırı (header.title, header.subtitle_online). Metin başına en fazla 300 karakter.

Varyantın değiştirmediği her şey projedeki ayarında kalır.

Test oluşturma

/app/ab/new altında:

• Ad (en fazla 120 karakter) ve Hipotez (en fazla 1.000 karakter) – ne beklediğiniz ve nedeni.
• Varyantlar – A’dan E’ye 2–5 varyant. A her zaman kontroldür; yani projenizin değişmemiş hâli. Varyant adları en fazla 60 karakter.
• Ağırlıklar – varyant başına 0–100 pay; toplam 100. A sıfırdan büyük olmalıdır.
• Katılan ziyaretçiler – ziyaretçilerinizin %1–100’ü.
• Cihaz – tümü, yalnızca masaüstü veya yalnızca mobil.
• Diller – en fazla 20; boşsa tümü.
• Sayfalar – “yalnızca şurada” ve “şurada değil” için ayrı ayrı en fazla 20 desen; her biri en fazla 200 karakter. “Değil”, “yalnızca”dan önce gelir.
• Birincil metrik – başarının ölçüldüğü değer:
• open – sohbeti açan ziyaretçilerin oranı. Sohbet düğmesinin doğrudan etkisi.
• msg – mesaj yazan ziyaretçilerin oranı.
• lead – iletişim bilgisi (e-posta) bırakan ziyaretçilerin oranı.
• goal – kendi hedefinize ulaşan ziyaretçilerin oranı (aşağıya bakın).
• csat – olumlu değerlendirmelerin oranı (beğenme).
• Algılanacak en küçük etki – %1–100; varsayılan %10. Hesabınız gereken örneklemi bundan hesaplar.
• Bitiş – bitiş tarihi veya ziyaretçi sayısı.
• Net sonuçta otomatik bitir – 7 günden önce değil; yalnızca gereken örnekleme ulaşıldıktan sonra.
• Kazananı proje markasına otomatik uygula – kazanan varyant projenizin ayarı olur.

Varyantlar yalnızca Taslak durumunda değiştirilebilir. Proje başına aynı anda en fazla bir test çalışır (çalışan veya duraklatılmış). Başlatıldıktan sonra test bir dakika içinde ziyaretçilerinize ulaşır.

Kim hangi varyantı görür?

Atama sunucuda yapılır ve her ziyaretçi için sabittir: bir kez B varyantını gören kişi sonraki ziyaretinde yine B görür.

Kodunda kendi markası bulunan, yani renk, köşe yarıçapı ve sohbet düğmesinin şekli ile boyutundan fazlasını içeren data-rc-brand olan sayfalar teste katılmaz. Renkler, yazı tipi ve tema bölümüne bakın. Projede onay zorunlu ise ziyaretçi onay vermeden hiçbir şey sayılmaz.

Belirli varyantı görüntüleme

B varyantını görmek için widget’ın çalıştığı sayfanın adresine ?rc_ab=B ekleyin. Bunu yaptığınızda hiçbir şey sayılmaz.

https://www.example.com/preise?rc_ab=B

Kendi hedefinizi bildirme

Birincil metrik goal için hedefi sayfanızdan bildirirsiniz; örneğin satın alma sonrası teşekkür sayfasında:

ReactiveChat('abGoal');

Örneğin kendi analiz aracınıza iletmek için ziyaretçinin hangi varyantı gördüğünü şöyle sorgulayabilirsiniz:

var v = ReactiveChat('abVariant');   // { test, variant, qa } or null

ReactiveChat('on', 'ab', function (e) {
  // e.test, e.variant, e.qa
});

Kodunuz widget yüklenmeden önce çalışabilecekse önüne Teknik entegrasyon bölümündeki kuyruk satırını ekleyin.

Sonuçlar

/app/ab/{id}/results altında varyant başına şunları görürsünüz:

• birincil metriğin ve diğer tüm metriklerin oranı,
• %95 güven aralığıyla kontrol A’dan fark,
• birden fazla varyant varsa Bonferroni düzeltmeli p değerleri,
• en iyi varyant olma olasılığı,
• ziyaretçi dağılımının ağırlıklarla eşleşip eşleşmediği kontrolü,
• %80 güçte gereken örneklem.

Rakamlar CSV olarak indirilebilir (/app/ab/{id}/csv).

Test veri toplamıyorsa

• Çalışıyor mu? Proje başına yalnızca bir test çalışabilir.
• Sayfa eşleşiyor mu? Cihazı, dili ve sayfa desenlerini kontrol edin.
• Kodda kendi markanız mı var? O zaman sayfa katılmaz.
• Onay “zorunlu” mu? Onay olmadan hiçbir şey sayılmaz.
• ?rc_ab=… ile mi çağrıldı? Bu çağrılar bilinçli olarak sayılmaz.