
Lec 57: Quantitative UX Metrics & A/B Testing
Lec 57 : Métriques UX quantitatives et tests A/B
Mots-clés
Résumé
189 mots
Évaluation critique
Valeur des informations & solidité de l’argumentation
La valeur des informations est bonne : la conférencière explique clairement les métriques comportementales (taux de succès, temps, erreurs), l’importance des intervalles de confiance, l’usage de questionnaires standardisés (SUS, SEQ, etc.) et les étapes d’un test A/B rigoureux. L’argumentation est solide, appuyée sur des exemples comme le test des 41 nuances de bleu de Google et un cas simplifié. Le lien entre recherche qualitative et quantitative est bien mis en évidence, soulignant que le test A/B conclut le cycle en fournissant des preuves.
Rigueur scientifique, qualité des sources, adéquation du titre
La rigueur scientifique est correcte : la conférencière insiste sur la déclaration a priori des métriques, la randomisation, et les pièges classiques (peeking, prolifération de métriques). Les sources citées sont implicites (cours NPTEL, instruments standardisés) mais elle n’aborde pas de références bibliographiques précises. L’adéquation titre-contenu est parfaite. Les commentaires YouTube sont indisponibles ; aucune tendance ne peut être déduite.
157 mots
Adéquation titre / contenu
Le titre correspond exactement au contenu : la vidéo traite des métriques UX quantitatives et du test A/B.
Qualité & fiabilité
8/10
Exposé structuré, exemples concrets, recours à des instruments standardisés, mais sans démonstration statistique approfondie.
Moments clés
Repères établis par PSI à partir de la transcription : le créateur n'a pas défini de chapitres.
- Introduction et objectifs : comment transformer l'expérience en décisions.
- Métriques de performance : taux de succès, intervalles de confiance.
- Temps de réalisation : médiane, géométrique moyenne, succès uniquement.
- Questionnaires standardisés : SUS, SEQ, UMUX-Lite et benchmarks.
- Étapes du test A/B : hypothèse, randomisation, métrique primaire, taille d'échantillon.
- Pièges : peeking, prolifération de métriques, effets de nouveauté.
- Exemple de Google (41 nuances de bleu) et distinction significatif vs important.
- Exemple simplifié : A/B test avec succès, conclusion et cycle complet.
Sources citées
- Page du cours NPTEL - User Research Methods — Description de la vidéo, cours complet.
- Playlist YouTube du cours — Description de la vidéo, playlist contenant la leçon.
Apport & nouveautés
L’apport de cette vidéo réside dans la synthèse claire des méthodes quantitatives pour l’évaluation UX, avec une insistance sur l’importance des intervalles de confiance et des tests A/B bien conçus. Elle fournit un cadre pratique pour les designers, reliant recherche qualitative et quantitative.
Pour aller plus loin :
- System Usability Scale — Instrument clé pour mesurer l’utilisabilité perçue.
- A/B testing — Méthodologie expérimentale pour comparer deux designs.
- Statistical power — Fondamentaux pour dimensionner les échantillons.
75 mots
Profil radar
Le profil radar montre un bon équilibre entre quantité et qualité d'information, avec un niveau technique modéré et une fiabilité correcte. Points forts : la clarté de l'exposé et l'utilisation d'exemples concrets.