Tests A/B du bouton du chat et de la fenêtre (bêta)

Quel libellé du bouton du chat génère le plus de conversations ? Un panneau latéral fonctionne-t-il mieux qu’une fenêtre flottante ? Avec les tests A/B, vous montrez des variantes différentes aux visiteurs et mesurez laquelle fonctionne le mieux.

Les tests A/B sont marqués Bêta. Vous les trouverez dans le menu latéral sous Configuration → Tests A/B, à l’adresse /app/ab. Ils s’appliquent à tout l’espace de travail ; chaque test appartient à un projet. Créer et modifier des tests exige le droit de modifier le projet.

Ce que vous pouvez tester

Sous Que teste-t-on ?, choisissez Bouton du chat, Fenêtre de chat ou les deux. Pour chaque variante, vous pouvez modifier :

• Couleurs – couleur principale, accent, arrière-plan, surface des bulles, texte, texte secondaire, séparateurs, ainsi que rayon des coins et police.
• Bouton du chat – forme, taille, taille sur téléphone, libellé, seconde ligne, affichage, icône.
• Style – toutes les options de Fenêtre de chat, comme la taille de fenêtre, le panneau latéral, l’arrière-plan ou l’animation.
• Textes – libellé et seconde ligne du bouton du chat (launcher.text, launcher.subtext), message d’accueil et point d’entrée de l’écran d’accueil (home.greeting, home.start, home.start_sub), titre et seconde ligne de l’en-tête (header.title, header.subtitle_online). Au maximum 300 caractères par texte.

Tout ce qu’une variante ne modifie pas reste conforme aux réglages du projet.

Créer un test

Sous /app/ab/new :

• Nom (120 caractères maximum) et Hypothèse (1000 caractères maximum) – ce que vous attendez et pourquoi.
• Variantes – de 2 à 5, de A à E. A est toujours le témoin, c’est-à-dire votre projet inchangé. Noms de variantes de 60 caractères maximum.
• Pondérations – part de chaque variante de 0 à 100, pour un total de 100. A doit être supérieur à 0.
• Visiteurs participants – de 1 à 100 % de vos visiteurs.
• Appareil – tous, ordinateurs uniquement ou mobiles uniquement.
• Langues – jusqu’à 20 ; une valeur vide signifie toutes.
• Pages – jusqu’à 20 motifs pour « uniquement sur » et 20 pour « pas sur », de 200 caractères maximum chacun. « Pas sur » l’emporte sur « uniquement sur ».
• Indicateur principal – la mesure du succès :
• open – proportion de visiteurs qui ouvrent le chat. L’effet direct du bouton du chat.
• msg – proportion de visiteurs qui écrivent un message.
• lead – proportion de visiteurs qui laissent leurs coordonnées (e-mail).
• goal – proportion de visiteurs qui atteignent votre propre objectif (voir ci-dessous).
• csat – proportion d’évaluations positives (pouce levé).
• Plus petit effet à détecter – de 1 à 100 %, 10 % par défaut. Votre compte calcule l’échantillon requis à partir de cette valeur.
• Fin – une date de fin ou un nombre de visiteurs.
• Terminer automatiquement si le résultat est clair – pas avant 7 jours et uniquement lorsque l’échantillon requis est atteint.
• Appliquer automatiquement la variante gagnante à la marque du projet – la variante gagnante devient le réglage de votre projet.

Les variantes ne peuvent être modifiées qu’à l’état Brouillon. Au maximum un test peut être en cours par projet (actif ou en pause). Après le démarrage, le test atteint vos visiteurs en moins d’une minute.

Qui voit quelle variante

L’attribution se fait sur le serveur et reste fixe pour chaque visiteur : une personne qui a vu la variante B une fois la voit à nouveau lors de sa prochaine visite.

Les pages dont le code d’intégration contient une marque personnalisée, c’est-à-dire un data-rc-brand avec plus que la couleur, le rayon, la forme et la taille du bouton du chat, ne participent pas au test. Voir Couleurs, police et thème. Si le consentement du projet est obligatoire, rien n’est compté sans l’accord du visiteur.

Afficher une variante précise

Ajoutez ?rc_ab=B à l’adresse d’une page où fonctionne le widget pour voir la variante B. Rien n’est compté dans ce cas.

https://www.example.com/preise?rc_ab=B

Signaler votre propre objectif

Pour l’indicateur principal goal, signalez l’objectif depuis votre page, par exemple sur la page de remerciement après un achat :

ReactiveChat('abGoal');

Vous pouvez consulter la variante vue par un visiteur de cette manière, par exemple pour la transmettre à votre propre outil d’analyse :

var v = ReactiveChat('abVariant');   // { test, variant, qa } or null

ReactiveChat('on', 'ab', function (e) {
  // e.test, e.variant, e.qa
});

Si votre code risque de s’exécuter avant le chargement du widget, placez devant lui la ligne de mise en file d’attente indiquée dans Intégration technique.

Résultats

Sous /app/ab/{id}/results, vous voyez pour chaque variante :

• le taux de l’indicateur principal et de tous les autres indicateurs,
• l’écart par rapport au témoin A avec un intervalle de confiance à 95 %,
• les valeurs p, avec correction de Bonferroni en présence de plusieurs variantes,
• la probabilité d’être la meilleure variante,
• une vérification de la correspondance entre la répartition des visiteurs et les pondérations,
• l’échantillon requis avec une puissance de 80 %.

Les chiffres peuvent être téléchargés au format CSV (/app/ab/{id}/csv).

Si un test ne collecte aucune donnée

• Est-il en cours ? Un seul test peut être en cours par projet.
• La page correspond-elle ? Vérifiez l’appareil, la langue et les motifs de pages.
• Marque personnalisée dans le code d’intégration ? La page ne participe alors pas au test.
• Consentement réglé sur « obligatoire » ? Rien n’est compté sans accord.
• Appel avec ?rc_ab=… ? Ces appels ne comptent volontairement pas.