SlideShare uma empresa Scribd logo
1 de 31
Baixar para ler offline
Statistics 101
http://www.whymeasurethat.com/2013/09/05/data-driven-web-site-progressive-enhancement/
http://www.kaushik.net/avinash/lean-analytics-cycle-metrics-hypothesis-experiment-act/
Étape 1: déterminer ce qu’il
faut améliorer.
• Peut-être en augmentant votre taux de conversion;
• Ou augmenter le nombre d’utilisateurs qui
s’inscrivent;
• Ou avoir un plus de partage des contenus;
• Ou diminuer le taux de désabonnement de votre
service;
Étape 2. Formuler une
hypothèse.
• Une campagne de marketing
• La refonte d’une application
• Un changement dans la façon de pricer
• Revoir les frais d’expédition selon les achats
• Changer la façon d’attirer l’attention
• L’utilisation d’une autre plate-forme
• Modification les libellés des boutons
• Tester une nouvelle fonctionnalité
Définir le test
• Premièrement: Quelle est votre audience cible ?
• Deuxièmement: Que voulez-vous qu’ils fassent ?
• Troisièmement: Pourquoi devraient-ils le faire ?
« Cherchez à savoir si [QUI] fera [QUOI] parce que
[POURQUOI], suffisamment pour améliorer le KPI ciblé. »
Mesurer et décider quoi
faire
• 1. Si le test a été un succès, vous êtes un héros.
Trouver la prochaine métrique cruciale à tester.
• 2. Si le test est un véritable échec, nous devons
revoir votre hypothèse.
• 3. Si le test déplace la ligne, mais pas assez pour
modifier les règles du jeu, vous pouvez exécuter un
autre test en modifiant l’hypothèse d’après ce que
le test vous a appris
Le test a-t-il été un succès ?
Quelle est la meilleure
version ?
100 100
14% 20%
Impossible de dire !
Les différences ne sont statistiquement significatives.
Qu’est-ce que cela veut dire ?
100 100
14% 20%
8.5% – 22.1% 13.3% – 28.9%
On a 95% de chance que la réalité soit dans les fourchettes
suivantes :
Quelle est la meilleure
version ?
1000 1000
14% 20%
La version 2 est meilleure !
12.0% – 16.3% 17.6% – 22.6%
Quelle est la meilleure
version ?
1000 100
14% 20%
Impossible de dire !
12.0% – 16.3% 13.3% – 28.9%
Mon résultat est-il significatif ?
http://www.evanmiller.org/ab-testing/chi-squared.html
Quelle est la meilleure
version ?
1000 100
14% 30%
La version 2 est meilleure !
12.0% – 16.3% 21.9% – 39.6%
Comment dimensionner un A/B test
pour être statistiquement significatif ?
5%
? ?
Quelle taille d’échantillon si souhaitez de valider une
différence > 10%?
30 244 (par branche)
Comment dimensionner un A/B test
pour être statistiquement significatif ?
5%
? ?
Quelle taille d’échantillon si souhaitez de valider une
différence > 50%?
1273 (par branche)
Comment dimensionner un A/B test
pour être statistiquement significatif ?
http://www.evanmiller.org/ab-testing/sample-size.html
• Toujours tester les deux versions simultanément. Auprès
d’une population homogène.
• Ne pas tirer des conclusions trop tôt. Vérifier que le
résultat est statistiquement significatif.
• Evitez de surprendre les visiteurs réguliers. Restez
homogènes
• Privilégiez le deep-testing pour tirer des conclusions sur
l’efficacité
• Ne laissez pas votre instinct infirmer les résultats des tests.
• Itérer, itérer, itérer
http://www.optimisation-conversion.com/webanalytics/guide-du-test-ab-jouez-et-gagnez-a-tous-les-coups/
Synthèse sur les tests A/B
• Q1. Lorsque votre taux de conversion du site Web bondit de 10% à 12%, cela signifie
une hausse de 2% du taux de conversion ou bien une hausse de 20% du taux de
conversion ?
!
• Q2. Pouvez-vous doubler vos ventes en doublant simplement votre budget marketing ?
!
• Q3. Si le taux de conversion de la campagne « A » est de 10% et le taux de conversion
campagne « B » est de 20%, est-ce que cela signifie que la campagne « B » est plus
performante que la campagne « A » ?
!
• Q4. Le temps moyen passé sur votre site web est de 5 minutes. Cela signifie-t-il que
vos visiteurs sont restés en moyenne 5 minutes sur votre site ?
Questionnaire
Corrélation vs. Causalité
Les cohortes
Découvrez le cycle que
suivent vos utilisateurs
Lire une analyse par cohortes
Prochaines étapes
http://www.inc.com/daniel-kahneman/idea-lab-making-smarter-decisions.html

Mais conteúdo relacionado

Destaque

Les nouvelles clés de l'acquisition digitale
Les nouvelles clés de l'acquisition digitaleLes nouvelles clés de l'acquisition digitale
Les nouvelles clés de l'acquisition digitaleAKAMIS
 
Google Analytics & Performance Internet - Formation
Google Analytics & Performance Internet - FormationGoogle Analytics & Performance Internet - Formation
Google Analytics & Performance Internet - FormationEmmanuel Borne
 
Koudetat_SALES_VendreConvaincre
Koudetat_SALES_VendreConvaincreKoudetat_SALES_VendreConvaincre
Koudetat_SALES_VendreConvaincreFranck Dupont
 
Maîtriser et définir sa Content Strategy - Rachel Vanier, Content Specialist ...
Maîtriser et définir sa Content Strategy - Rachel Vanier, Content Specialist ...Maîtriser et définir sa Content Strategy - Rachel Vanier, Content Specialist ...
Maîtriser et définir sa Content Strategy - Rachel Vanier, Content Specialist ...TheFamily
 
Suivi des conversions avancé avec Google Analytics et Google Tag Manager sur ...
Suivi des conversions avancé avec Google Analytics et Google Tag Manager sur ...Suivi des conversions avancé avec Google Analytics et Google Tag Manager sur ...
Suivi des conversions avancé avec Google Analytics et Google Tag Manager sur ...Bruno Guyot
 
Introduction à l’analyse de site web avec Google Analytics - 2016
Introduction à l’analyse de site web avec Google Analytics - 2016Introduction à l’analyse de site web avec Google Analytics - 2016
Introduction à l’analyse de site web avec Google Analytics - 2016Bruno Guyot
 
Installation de Google Tag Manager sur Wordpress et suivi avancé Google Analy...
Installation de Google Tag Manager sur Wordpress et suivi avancé Google Analy...Installation de Google Tag Manager sur Wordpress et suivi avancé Google Analy...
Installation de Google Tag Manager sur Wordpress et suivi avancé Google Analy...Bruno Guyot
 
La croissance via referral - Julien Le Coupanec, Growth Hacker chez TheFamily
La croissance via referral - Julien Le Coupanec, Growth Hacker chez TheFamilyLa croissance via referral - Julien Le Coupanec, Growth Hacker chez TheFamily
La croissance via referral - Julien Le Coupanec, Growth Hacker chez TheFamilyTheFamily
 
Les metrics du SaaS I
Les metrics du SaaS ILes metrics du SaaS I
Les metrics du SaaS ITheFamily
 
De la landing page à l'onboarding - Rahmane Kalfane & Alexis Porhiel, Co-Foun...
De la landing page à l'onboarding - Rahmane Kalfane & Alexis Porhiel, Co-Foun...De la landing page à l'onboarding - Rahmane Kalfane & Alexis Porhiel, Co-Foun...
De la landing page à l'onboarding - Rahmane Kalfane & Alexis Porhiel, Co-Foun...TheFamily
 
L'état d'esprit d'un growth hacker Partie II - Julien Le Coupanec, Growth Hac...
L'état d'esprit d'un growth hacker Partie II - Julien Le Coupanec, Growth Hac...L'état d'esprit d'un growth hacker Partie II - Julien Le Coupanec, Growth Hac...
L'état d'esprit d'un growth hacker Partie II - Julien Le Coupanec, Growth Hac...TheFamily
 

Destaque (12)

Les nouvelles clés de l'acquisition digitale
Les nouvelles clés de l'acquisition digitaleLes nouvelles clés de l'acquisition digitale
Les nouvelles clés de l'acquisition digitale
 
Présentation de SaaS
Présentation de SaaS Présentation de SaaS
Présentation de SaaS
 
Google Analytics & Performance Internet - Formation
Google Analytics & Performance Internet - FormationGoogle Analytics & Performance Internet - Formation
Google Analytics & Performance Internet - Formation
 
Koudetat_SALES_VendreConvaincre
Koudetat_SALES_VendreConvaincreKoudetat_SALES_VendreConvaincre
Koudetat_SALES_VendreConvaincre
 
Maîtriser et définir sa Content Strategy - Rachel Vanier, Content Specialist ...
Maîtriser et définir sa Content Strategy - Rachel Vanier, Content Specialist ...Maîtriser et définir sa Content Strategy - Rachel Vanier, Content Specialist ...
Maîtriser et définir sa Content Strategy - Rachel Vanier, Content Specialist ...
 
Suivi des conversions avancé avec Google Analytics et Google Tag Manager sur ...
Suivi des conversions avancé avec Google Analytics et Google Tag Manager sur ...Suivi des conversions avancé avec Google Analytics et Google Tag Manager sur ...
Suivi des conversions avancé avec Google Analytics et Google Tag Manager sur ...
 
Introduction à l’analyse de site web avec Google Analytics - 2016
Introduction à l’analyse de site web avec Google Analytics - 2016Introduction à l’analyse de site web avec Google Analytics - 2016
Introduction à l’analyse de site web avec Google Analytics - 2016
 
Installation de Google Tag Manager sur Wordpress et suivi avancé Google Analy...
Installation de Google Tag Manager sur Wordpress et suivi avancé Google Analy...Installation de Google Tag Manager sur Wordpress et suivi avancé Google Analy...
Installation de Google Tag Manager sur Wordpress et suivi avancé Google Analy...
 
La croissance via referral - Julien Le Coupanec, Growth Hacker chez TheFamily
La croissance via referral - Julien Le Coupanec, Growth Hacker chez TheFamilyLa croissance via referral - Julien Le Coupanec, Growth Hacker chez TheFamily
La croissance via referral - Julien Le Coupanec, Growth Hacker chez TheFamily
 
Les metrics du SaaS I
Les metrics du SaaS ILes metrics du SaaS I
Les metrics du SaaS I
 
De la landing page à l'onboarding - Rahmane Kalfane & Alexis Porhiel, Co-Foun...
De la landing page à l'onboarding - Rahmane Kalfane & Alexis Porhiel, Co-Foun...De la landing page à l'onboarding - Rahmane Kalfane & Alexis Porhiel, Co-Foun...
De la landing page à l'onboarding - Rahmane Kalfane & Alexis Porhiel, Co-Foun...
 
L'état d'esprit d'un growth hacker Partie II - Julien Le Coupanec, Growth Hac...
L'état d'esprit d'un growth hacker Partie II - Julien Le Coupanec, Growth Hac...L'état d'esprit d'un growth hacker Partie II - Julien Le Coupanec, Growth Hac...
L'état d'esprit d'un growth hacker Partie II - Julien Le Coupanec, Growth Hac...
 

Semelhante a Statistiques 101 - Gilles Barbier, Partner chez TheFamily

Baromètre sur les pratiques de l'A/B testing et de la personnalisation web
Baromètre sur les pratiques de l'A/B testing et de la personnalisation web Baromètre sur les pratiques de l'A/B testing et de la personnalisation web
Baromètre sur les pratiques de l'A/B testing et de la personnalisation web Converteo
 
Refonte de site, comment exploiter les datas
Refonte de site, comment exploiter les datasRefonte de site, comment exploiter les datas
Refonte de site, comment exploiter les datasaltima°
 
[Webinar] Optimisez votre site en alliant Digital Analytics & A/B Testing
[Webinar] Optimisez votre site en alliant Digital Analytics & A/B Testing[Webinar] Optimisez votre site en alliant Digital Analytics & A/B Testing
[Webinar] Optimisez votre site en alliant Digital Analytics & A/B TestingAT Internet
 
Optimiser son site grâce au testing A/B ou multivarié et au ciblage
Optimiser son site grâce au testing A/B ou multivarié et au ciblageOptimiser son site grâce au testing A/B ou multivarié et au ciblage
Optimiser son site grâce au testing A/B ou multivarié et au ciblageRaphaël Fétique
 
Optimiser la performance business de votre site avec l'A/B Testing
Optimiser la performance business de votre site avec l'A/B TestingOptimiser la performance business de votre site avec l'A/B Testing
Optimiser la performance business de votre site avec l'A/B TestingGillesLaborderie
 
Présentation - Matinale TIC - Angers - Thibault Vincent - Optimisation de la ...
Présentation - Matinale TIC - Angers - Thibault Vincent - Optimisation de la ...Présentation - Matinale TIC - Angers - Thibault Vincent - Optimisation de la ...
Présentation - Matinale TIC - Angers - Thibault Vincent - Optimisation de la ...ThibaultVincent
 
Optimisez votre site en alliant Web Analytics & A/B Testing
Optimisez votre site en alliant Web Analytics & A/B TestingOptimisez votre site en alliant Web Analytics & A/B Testing
Optimisez votre site en alliant Web Analytics & A/B TestingOptimizely
 
2017 04 25_Optimiser la conversion de son site
2017 04 25_Optimiser la conversion de son site2017 04 25_Optimiser la conversion de son site
2017 04 25_Optimiser la conversion de son siteClemence Fredenucci
 
Quelle stratégie emailing en 2015 ?
Quelle stratégie emailing en 2015 ?Quelle stratégie emailing en 2015 ?
Quelle stratégie emailing en 2015 ?Florence consultant
 
Voyou! rends moi mon budget!
Voyou! rends moi mon budget!Voyou! rends moi mon budget!
Voyou! rends moi mon budget!Alban Gérôme
 
Baromètre : Les pratiques de l'AB testing et la personnalisation web en France
Baromètre : Les pratiques de l'AB testing et la personnalisation web en FranceBaromètre : Les pratiques de l'AB testing et la personnalisation web en France
Baromètre : Les pratiques de l'AB testing et la personnalisation web en FranceConverteo
 
La boite a_outils_de_l_excellence_operationnelle_presentation minitab
La boite a_outils_de_l_excellence_operationnelle_presentation minitabLa boite a_outils_de_l_excellence_operationnelle_presentation minitab
La boite a_outils_de_l_excellence_operationnelle_presentation minitabMinitab, LLC
 
Optimiser la conversion - Nicolas Jardillier - YOODx 2017
Optimiser la conversion - Nicolas Jardillier - YOODx 2017Optimiser la conversion - Nicolas Jardillier - YOODx 2017
Optimiser la conversion - Nicolas Jardillier - YOODx 2017YOODx
 
10 méthodes UX appliquées à votre projet Web
10 méthodes UX appliquées à votre projet Web10 méthodes UX appliquées à votre projet Web
10 méthodes UX appliquées à votre projet WebCore-Techs
 
Les expérimentations pour optimiser sa conversion : un processus continu indi...
Les expérimentations pour optimiser sa conversion : un processus continu indi...Les expérimentations pour optimiser sa conversion : un processus continu indi...
Les expérimentations pour optimiser sa conversion : un processus continu indi...Marie-Rose Tripault
 
Témoignage Wonderbox - refonte site globale & tests utilisateurs
Témoignage Wonderbox - refonte site globale & tests utilisateursTémoignage Wonderbox - refonte site globale & tests utilisateurs
Témoignage Wonderbox - refonte site globale & tests utilisateursFerpection
 
Révision du plan d’architecture Web: Bien plus qu’une refonte !
Révision du plan d’architecture Web: Bien plus qu’une refonte !Révision du plan d’architecture Web: Bien plus qu’une refonte !
Révision du plan d’architecture Web: Bien plus qu’une refonte !Chantale Laberge
 
SEO / UX / CRO - De l’intention à la conversion par iProspect, Testapic et A/...
SEO / UX / CRO - De l’intention à la conversion par iProspect, Testapic et A/...SEO / UX / CRO - De l’intention à la conversion par iProspect, Testapic et A/...
SEO / UX / CRO - De l’intention à la conversion par iProspect, Testapic et A/...iProspect France
 

Semelhante a Statistiques 101 - Gilles Barbier, Partner chez TheFamily (20)

Baromètre sur les pratiques de l'A/B testing et de la personnalisation web
Baromètre sur les pratiques de l'A/B testing et de la personnalisation web Baromètre sur les pratiques de l'A/B testing et de la personnalisation web
Baromètre sur les pratiques de l'A/B testing et de la personnalisation web
 
Refonte de site, comment exploiter les datas
Refonte de site, comment exploiter les datasRefonte de site, comment exploiter les datas
Refonte de site, comment exploiter les datas
 
[Webinar] Optimisez votre site en alliant Digital Analytics & A/B Testing
[Webinar] Optimisez votre site en alliant Digital Analytics & A/B Testing[Webinar] Optimisez votre site en alliant Digital Analytics & A/B Testing
[Webinar] Optimisez votre site en alliant Digital Analytics & A/B Testing
 
Optimiser son site grâce au testing A/B ou multivarié et au ciblage
Optimiser son site grâce au testing A/B ou multivarié et au ciblageOptimiser son site grâce au testing A/B ou multivarié et au ciblage
Optimiser son site grâce au testing A/B ou multivarié et au ciblage
 
Optimiser la performance business de votre site avec l'A/B Testing
Optimiser la performance business de votre site avec l'A/B TestingOptimiser la performance business de votre site avec l'A/B Testing
Optimiser la performance business de votre site avec l'A/B Testing
 
Présentation - Matinale TIC - Angers - Thibault Vincent - Optimisation de la ...
Présentation - Matinale TIC - Angers - Thibault Vincent - Optimisation de la ...Présentation - Matinale TIC - Angers - Thibault Vincent - Optimisation de la ...
Présentation - Matinale TIC - Angers - Thibault Vincent - Optimisation de la ...
 
Optimisez votre site en alliant Web Analytics & A/B Testing
Optimisez votre site en alliant Web Analytics & A/B TestingOptimisez votre site en alliant Web Analytics & A/B Testing
Optimisez votre site en alliant Web Analytics & A/B Testing
 
2017 04 25_Optimiser la conversion de son site
2017 04 25_Optimiser la conversion de son site2017 04 25_Optimiser la conversion de son site
2017 04 25_Optimiser la conversion de son site
 
Quelle stratégie emailing en 2015 ?
Quelle stratégie emailing en 2015 ?Quelle stratégie emailing en 2015 ?
Quelle stratégie emailing en 2015 ?
 
Voyou! rends moi mon budget!
Voyou! rends moi mon budget!Voyou! rends moi mon budget!
Voyou! rends moi mon budget!
 
Baromètre : Les pratiques de l'AB testing et la personnalisation web en France
Baromètre : Les pratiques de l'AB testing et la personnalisation web en FranceBaromètre : Les pratiques de l'AB testing et la personnalisation web en France
Baromètre : Les pratiques de l'AB testing et la personnalisation web en France
 
La boite a_outils_de_l_excellence_operationnelle_presentation minitab
La boite a_outils_de_l_excellence_operationnelle_presentation minitabLa boite a_outils_de_l_excellence_operationnelle_presentation minitab
La boite a_outils_de_l_excellence_operationnelle_presentation minitab
 
Optimiser la conversion - Nicolas Jardillier - YOODx 2017
Optimiser la conversion - Nicolas Jardillier - YOODx 2017Optimiser la conversion - Nicolas Jardillier - YOODx 2017
Optimiser la conversion - Nicolas Jardillier - YOODx 2017
 
Slide stratégie emailing 2016
Slide stratégie emailing 2016Slide stratégie emailing 2016
Slide stratégie emailing 2016
 
10 méthodes UX appliquées à votre projet Web
10 méthodes UX appliquées à votre projet Web10 méthodes UX appliquées à votre projet Web
10 méthodes UX appliquées à votre projet Web
 
Etendre l'AB testing à toute l'entreprise
Etendre l'AB testing à toute l'entrepriseEtendre l'AB testing à toute l'entreprise
Etendre l'AB testing à toute l'entreprise
 
Les expérimentations pour optimiser sa conversion : un processus continu indi...
Les expérimentations pour optimiser sa conversion : un processus continu indi...Les expérimentations pour optimiser sa conversion : un processus continu indi...
Les expérimentations pour optimiser sa conversion : un processus continu indi...
 
Témoignage Wonderbox - refonte site globale & tests utilisateurs
Témoignage Wonderbox - refonte site globale & tests utilisateursTémoignage Wonderbox - refonte site globale & tests utilisateurs
Témoignage Wonderbox - refonte site globale & tests utilisateurs
 
Révision du plan d’architecture Web: Bien plus qu’une refonte !
Révision du plan d’architecture Web: Bien plus qu’une refonte !Révision du plan d’architecture Web: Bien plus qu’une refonte !
Révision du plan d’architecture Web: Bien plus qu’une refonte !
 
SEO / UX / CRO - De l’intention à la conversion par iProspect, Testapic et A/...
SEO / UX / CRO - De l’intention à la conversion par iProspect, Testapic et A/...SEO / UX / CRO - De l’intention à la conversion par iProspect, Testapic et A/...
SEO / UX / CRO - De l’intention à la conversion par iProspect, Testapic et A/...
 

Mais de TheFamily

Building a design culture from day one
Building a design culture from day oneBuilding a design culture from day one
Building a design culture from day oneTheFamily
 
Individual Contributors vs Managers
Individual Contributors vs ManagersIndividual Contributors vs Managers
Individual Contributors vs ManagersTheFamily
 
Build the decentralized team you ever dreamed of
Build the decentralized team you ever dreamed ofBuild the decentralized team you ever dreamed of
Build the decentralized team you ever dreamed ofTheFamily
 
CEOs best practices to win time back & focus on what matters
CEOs best practices to win time back & focus on what mattersCEOs best practices to win time back & focus on what matters
CEOs best practices to win time back & focus on what mattersTheFamily
 
Managing fully remote teams
Managing fully remote teamsManaging fully remote teams
Managing fully remote teamsTheFamily
 
State of European Tech by Atomico
State of European Tech by AtomicoState of European Tech by Atomico
State of European Tech by AtomicoTheFamily
 
Building a real estate startup
Building a real estate startupBuilding a real estate startup
Building a real estate startupTheFamily
 
A VC view on Enterprise Sales
A VC view on Enterprise SalesA VC view on Enterprise Sales
A VC view on Enterprise SalesTheFamily
 
Find your style and create emotions
Find your style and create emotionsFind your style and create emotions
Find your style and create emotionsTheFamily
 
From product to ecosystem
From product to ecosystemFrom product to ecosystem
From product to ecosystemTheFamily
 
Demystifying the product black box
Demystifying the product black boxDemystifying the product black box
Demystifying the product black boxTheFamily
 
The secrets to create bank brand love
The secrets to create bank brand loveThe secrets to create bank brand love
The secrets to create bank brand loveTheFamily
 
Building an insurance startup with Alan, Luko, Coverd & Balderton
Building an insurance startup with Alan, Luko, Coverd & BaldertonBuilding an insurance startup with Alan, Luko, Coverd & Balderton
Building an insurance startup with Alan, Luko, Coverd & BaldertonTheFamily
 
Mixing Product & Tech by Jean Lebrument, CTO & CPO at Brigad
Mixing Product & Tech by Jean Lebrument, CTO & CPO at BrigadMixing Product & Tech by Jean Lebrument, CTO & CPO at Brigad
Mixing Product & Tech by Jean Lebrument, CTO & CPO at BrigadTheFamily
 
A new breed of CTO - Philippe Vimard, CTO & COO at Doctolib
A new breed of CTO - Philippe Vimard, CTO & COO at DoctolibA new breed of CTO - Philippe Vimard, CTO & COO at Doctolib
A new breed of CTO - Philippe Vimard, CTO & COO at DoctolibTheFamily
 
Building a logistics startup  with Trusk, Totem & SpaceFill
Building a logistics startup  with Trusk, Totem & SpaceFillBuilding a logistics startup  with Trusk, Totem & SpaceFill
Building a logistics startup  with Trusk, Totem & SpaceFillTheFamily
 
Building an accounting startup with Fred de la compta, Acasi & Chaintrust
Building an accounting startup with Fred de la compta, Acasi & ChaintrustBuilding an accounting startup with Fred de la compta, Acasi & Chaintrust
Building an accounting startup with Fred de la compta, Acasi & ChaintrustTheFamily
 
Scale your tech team from 0 to Series A
Scale your tech team from 0 to Series A Scale your tech team from 0 to Series A
Scale your tech team from 0 to Series A TheFamily
 
Onboarding developers and setting them up for success
Onboarding developers and setting them up for successOnboarding developers and setting them up for success
Onboarding developers and setting them up for successTheFamily
 
Apprendre à penser comme un journaliste
Apprendre à penser comme un journalisteApprendre à penser comme un journaliste
Apprendre à penser comme un journalisteTheFamily
 

Mais de TheFamily (20)

Building a design culture from day one
Building a design culture from day oneBuilding a design culture from day one
Building a design culture from day one
 
Individual Contributors vs Managers
Individual Contributors vs ManagersIndividual Contributors vs Managers
Individual Contributors vs Managers
 
Build the decentralized team you ever dreamed of
Build the decentralized team you ever dreamed ofBuild the decentralized team you ever dreamed of
Build the decentralized team you ever dreamed of
 
CEOs best practices to win time back & focus on what matters
CEOs best practices to win time back & focus on what mattersCEOs best practices to win time back & focus on what matters
CEOs best practices to win time back & focus on what matters
 
Managing fully remote teams
Managing fully remote teamsManaging fully remote teams
Managing fully remote teams
 
State of European Tech by Atomico
State of European Tech by AtomicoState of European Tech by Atomico
State of European Tech by Atomico
 
Building a real estate startup
Building a real estate startupBuilding a real estate startup
Building a real estate startup
 
A VC view on Enterprise Sales
A VC view on Enterprise SalesA VC view on Enterprise Sales
A VC view on Enterprise Sales
 
Find your style and create emotions
Find your style and create emotionsFind your style and create emotions
Find your style and create emotions
 
From product to ecosystem
From product to ecosystemFrom product to ecosystem
From product to ecosystem
 
Demystifying the product black box
Demystifying the product black boxDemystifying the product black box
Demystifying the product black box
 
The secrets to create bank brand love
The secrets to create bank brand loveThe secrets to create bank brand love
The secrets to create bank brand love
 
Building an insurance startup with Alan, Luko, Coverd & Balderton
Building an insurance startup with Alan, Luko, Coverd & BaldertonBuilding an insurance startup with Alan, Luko, Coverd & Balderton
Building an insurance startup with Alan, Luko, Coverd & Balderton
 
Mixing Product & Tech by Jean Lebrument, CTO & CPO at Brigad
Mixing Product & Tech by Jean Lebrument, CTO & CPO at BrigadMixing Product & Tech by Jean Lebrument, CTO & CPO at Brigad
Mixing Product & Tech by Jean Lebrument, CTO & CPO at Brigad
 
A new breed of CTO - Philippe Vimard, CTO & COO at Doctolib
A new breed of CTO - Philippe Vimard, CTO & COO at DoctolibA new breed of CTO - Philippe Vimard, CTO & COO at Doctolib
A new breed of CTO - Philippe Vimard, CTO & COO at Doctolib
 
Building a logistics startup  with Trusk, Totem & SpaceFill
Building a logistics startup  with Trusk, Totem & SpaceFillBuilding a logistics startup  with Trusk, Totem & SpaceFill
Building a logistics startup  with Trusk, Totem & SpaceFill
 
Building an accounting startup with Fred de la compta, Acasi & Chaintrust
Building an accounting startup with Fred de la compta, Acasi & ChaintrustBuilding an accounting startup with Fred de la compta, Acasi & Chaintrust
Building an accounting startup with Fred de la compta, Acasi & Chaintrust
 
Scale your tech team from 0 to Series A
Scale your tech team from 0 to Series A Scale your tech team from 0 to Series A
Scale your tech team from 0 to Series A
 
Onboarding developers and setting them up for success
Onboarding developers and setting them up for successOnboarding developers and setting them up for success
Onboarding developers and setting them up for success
 
Apprendre à penser comme un journaliste
Apprendre à penser comme un journalisteApprendre à penser comme un journaliste
Apprendre à penser comme un journaliste
 

Statistiques 101 - Gilles Barbier, Partner chez TheFamily

  • 4. Étape 1: déterminer ce qu’il faut améliorer. • Peut-être en augmentant votre taux de conversion; • Ou augmenter le nombre d’utilisateurs qui s’inscrivent; • Ou avoir un plus de partage des contenus; • Ou diminuer le taux de désabonnement de votre service;
  • 5. Étape 2. Formuler une hypothèse. • Une campagne de marketing • La refonte d’une application • Un changement dans la façon de pricer • Revoir les frais d’expédition selon les achats • Changer la façon d’attirer l’attention • L’utilisation d’une autre plate-forme • Modification les libellés des boutons • Tester une nouvelle fonctionnalité
  • 6. Définir le test • Premièrement: Quelle est votre audience cible ? • Deuxièmement: Que voulez-vous qu’ils fassent ? • Troisièmement: Pourquoi devraient-ils le faire ? « Cherchez à savoir si [QUI] fera [QUOI] parce que [POURQUOI], suffisamment pour améliorer le KPI ciblé. »
  • 7. Mesurer et décider quoi faire • 1. Si le test a été un succès, vous êtes un héros. Trouver la prochaine métrique cruciale à tester. • 2. Si le test est un véritable échec, nous devons revoir votre hypothèse. • 3. Si le test déplace la ligne, mais pas assez pour modifier les règles du jeu, vous pouvez exécuter un autre test en modifiant l’hypothèse d’après ce que le test vous a appris
  • 8. Le test a-t-il été un succès ?
  • 9.
  • 10. Quelle est la meilleure version ? 100 100 14% 20% Impossible de dire ! Les différences ne sont statistiquement significatives.
  • 11. Qu’est-ce que cela veut dire ? 100 100 14% 20% 8.5% – 22.1% 13.3% – 28.9% On a 95% de chance que la réalité soit dans les fourchettes suivantes :
  • 12. Quelle est la meilleure version ? 1000 1000 14% 20% La version 2 est meilleure ! 12.0% – 16.3% 17.6% – 22.6%
  • 13. Quelle est la meilleure version ? 1000 100 14% 20% Impossible de dire ! 12.0% – 16.3% 13.3% – 28.9%
  • 14. Mon résultat est-il significatif ? http://www.evanmiller.org/ab-testing/chi-squared.html
  • 15. Quelle est la meilleure version ? 1000 100 14% 30% La version 2 est meilleure ! 12.0% – 16.3% 21.9% – 39.6%
  • 16.
  • 17. Comment dimensionner un A/B test pour être statistiquement significatif ? 5% ? ? Quelle taille d’échantillon si souhaitez de valider une différence > 10%? 30 244 (par branche)
  • 18. Comment dimensionner un A/B test pour être statistiquement significatif ? 5% ? ? Quelle taille d’échantillon si souhaitez de valider une différence > 50%? 1273 (par branche)
  • 19. Comment dimensionner un A/B test pour être statistiquement significatif ? http://www.evanmiller.org/ab-testing/sample-size.html
  • 20. • Toujours tester les deux versions simultanément. Auprès d’une population homogène. • Ne pas tirer des conclusions trop tôt. Vérifier que le résultat est statistiquement significatif. • Evitez de surprendre les visiteurs réguliers. Restez homogènes • Privilégiez le deep-testing pour tirer des conclusions sur l’efficacité • Ne laissez pas votre instinct infirmer les résultats des tests. • Itérer, itérer, itérer http://www.optimisation-conversion.com/webanalytics/guide-du-test-ab-jouez-et-gagnez-a-tous-les-coups/ Synthèse sur les tests A/B
  • 21. • Q1. Lorsque votre taux de conversion du site Web bondit de 10% à 12%, cela signifie une hausse de 2% du taux de conversion ou bien une hausse de 20% du taux de conversion ? ! • Q2. Pouvez-vous doubler vos ventes en doublant simplement votre budget marketing ? ! • Q3. Si le taux de conversion de la campagne « A » est de 10% et le taux de conversion campagne « B » est de 20%, est-ce que cela signifie que la campagne « B » est plus performante que la campagne « A » ? ! • Q4. Le temps moyen passé sur votre site web est de 5 minutes. Cela signifie-t-il que vos visiteurs sont restés en moyenne 5 minutes sur votre site ? Questionnaire
  • 23.
  • 24.
  • 25.
  • 27.
  • 28. Découvrez le cycle que suivent vos utilisateurs
  • 29. Lire une analyse par cohortes