faire du testing une culture : ces organisations devenues expertes
TRANSCRIPT
#CROissants avec Optimizely & Uptilab!
Mercredi 10 décembre 2014
09H00 – 11H00! !
Pershing Hall!
Faire du testing une culture!
Ces organisations devenues expertes!
Mercredi 10 décembre 2014
3"
Faire du testing une culture Ces organisations devenues expertes
1. Optimizely en deux mots
2. Decitre
4. Questions/Réponses
3. Autoscout
1. Optimizely
!
!
!
Dan! Pete!
2006 : "Dan Siroker and Pete Koomen "— Product Manager, Google!
2008 : "Dan — Campagne Obama!
2008 – 2010 : "Carrotsticks, Spreadly, "et Y Combinator.!
2010 : Création d’Optimizely!
Avril 2013 : Levée de $28M pour s’internationaliser!
Mai 2014 : Levée de $57M!
$28M!
$57M!
+8000 Clients!
2. Decitre
7"
L’enseigne Decitre
> Librairie indépendante fondée en 1907 > 1,5 millions de visiteurs uniques mensuels
> Pays d’origine : France > 350+ collaborateurs
8"
L’équipe face au testing Du simple test au processus de testing en continu
Depuis quand ? > Premiers pas mi-2013 > Client « Enterprise » Optimizely fin 2013
Pourquoi ? > Panel trop large de visiteurs pour deviner le design idéal > En finir avec les réunions interminables sur le choix d’une couleur > Obtenir des mesures chiffrées de l’impact des modifications
Objectivité > Intuition!
9"
L’organisation Le testing, une méthodologie qui rassemble
Brainstorming"
Monitoring"
Planning"
Tracking"
Repor9ng"
Toute l ’équipe e-commerce propose des idées!
!
Centralisation des échanges + historisation dans Basecamp!
Priorisation des tests!
Définition des cibles, variantes et KPI!
Toute l’équipe a accès aux résultats!
10"
La mise en œuvre Du simple test au processus de testing en continu
Mise en œuvre en environnement de pré-production > Par les collaborateurs fonctionnels > Avec les développeurs si nécessaire
Passage en production > Validation par l’équipe technique > Lancement du test
11"
Les défis Les challenges rencontrés lors de la mise en place du programme de testing
Défis opérationnels
> Adaptations techniques dans certains cas, utiles sur le long terme > Disposer de suffisamment de trafic Défis organisationnels
> Mobiliser son équipe, puis le groupe > Changer la culture « toute modification doit être justifiée » > Ne jamais hésiter à inviter ses collègue à faire un test > Savoir communiquer autour des résultats
12"
Montée en compétence Tests simples -> Tests élaborés
Du simple test sur le wording d’un CTA…
…au redesign complet de la fiche produit…
…en passant par le bloc d’ajout au panier.
13"
Montée en compétence Editeur visuel -> Commande javascript
14"
Montée en compétence Initiative individuelle -> Effort de groupe
Un CTO convaincu!
Dir. E-Commerce!
L’équipe e-Merchandising!
Chefs de projet!
Divers observateurs!
3. Autoscout24
16"
L’enseigne Autoscout24
> Plus grand portail d’achat/vente de véhicules en Europe > 20 millions d’utilisateurs
> Pays d’origine : Allemagne > Présent dans 18 pays
17"
L’équipe face au testing Le testing, un état d’esprit
« Je ne sais qu’une
chose, c’est que je ne sais rien » !Your
baby is ugly!!
Learn to talk
money!!
Product-!manager!
Designer! Usability"Expert!
Data Analyst! QA! Developer!
18"
La méthodologie Le testing en continu
Objectifs" Compréhension Analyse Préparation Exécution Enseignement Déploiement
Activités"
Analyse"des"données"
existantes"
Sondage"u9lisateurs"
Benchamrk"de"la"
concurrence"
Recueil"d‘idées"et"
d‘opinions"
"
Iden9fica9on"des"
leviers"
Visualisa9on"et"
priorisa9on"des"Idées"
de"test:"
Concep9on"du"test"
Mise"en"place"du"test"
"
Es9ma9on"de"
l’échan9llon"et"
de"la"durée"
Mise"en"pra9que"
Tes9ng"du"
tes9ng"
"
"
Collecte,"
traitement,"
interpréta9on"des"
tests"
StoryRtelling"
Tracking"con9nu"
Si"applicable,"
interna9onalisa9on"
""
"
Facteurs de succès"
Croisement"de"
méthodes"
Elabora9on"de"l‘aperçu"
général"du"test"en"
équipe"
Objec9fs"réalistes"
Alignement"de"
l’équipe"
Compréhension"
commune"de"l’objec9f"
Es9ma9on"précise"de"
la"charge"de"travail"
"
Suivi"
incondi9onnel"
du"revenu""
Environnement"
agile"
"
Communica9on"
des"résultats"
horizontalement"
et"ver9calement"
"
Environnement"agile"
Degré"d’achèvement"
«"Release"on"
demand"»"
Difficultés principales"
Préserver"objec9vité"et"
réalisme"
HIPPO‘s"(Highest"Paid"
Person’s"Opinion)"Ne"pas"
communiquer"les"
résultats"trop"
rapidement"
"
Facteurs"externes"
au"test"et"
imprédic9bles"
pouvant"affecter"
les"résultats"
Alignement"avec"la"
vision"longRterme"du"
produit"
Conserver"son"
rythme"de"croisière"
19"
Compréhension et analyse Comprendre / Analyser le parcours utilisateur
20"
Compréhension et analyse Usability lab
21"
Compréhension et analyse Sondage d’utilisateurs : « pourquoi n’achetez-vous pas notre offre premium ? »
Retour principal : « l’offre gratuite est suffisamment riche »
22"
Compréhension et analyse Benchmark de la concurrence
23"
Préparation Priorisation et planning
24"
Exécution S’inscrire dans une logique de feuille de route
In9tulé"
Hypothèse"
Objec9f(s)"
KPIs"
Ciblage"
URL":""
Original":""X%"
V1":""X%"
V2":""X%"
Durée" Es9mée"à"X"jours"
Date"de"
lancement"[Date]"
Formulation > Faire des réunions des sessions de brainstorming > Répertorier chaque idée
Priorisation > Barème de points > Effort graphique ? (1) > Durée du test ? (0,5) > Potentiel ROI ? (2) > Développement nécessaire ? (1) > Lié au release cycle ? (1) > Contraintes légales ? (1) > Approbation interne ? (0,5)
25"
Enseignements Bien analyser pour mieux communiquer…quelque soit le résultat !
26"
Enseignements Bien analyser pour mieux communiquer…quelque soit le résultat !
27"
Déploiement Agilité, déploiement du design optimisé et story-telling
28"
2."Prépara9on"
3."Exécu9on"
4."Enseignements"
5."Déploiement"
1."Compréhension"
Analyse"
La méthodologie Le testing en continu
29"
blog.optimizely.com community.optimizely.com help.optimizely.com learn.optimizely.com [email protected] @eGautheron – @Optimizely +33 (0)1 81 97 97 23