L’insensibilité à la taille de l’échantillon est un biais cognitif qui se produit lorsque les gens estiment la probabilité d’un résultat ou situation en se basant sur les résultats sur un échantillon sans égard à la taille ni à la représentativité de cet échantillon.

En quoi sommes-nous concernés dans nos projets ?

Il arrive souvent que l’argument de « la voix du client » soit utilisé par vos parties prenantes pour justifier leurs choix ou les priorités qu’elles souhaitent voire satisfaites par votre projet. Et la voix du client est utile et doit être entendue. Parler avec les clients est important, mais ne basez pas vos suppositions sur les priorités des fonctionnalités de vos livrables sur seulement quelques entretiens. Plus l’échantillon est faible et plus la variation risque d’être grande.

Comment éviter le plus possible ce travers ?

Vous savez que le choix et la taille de l’échantillon sont primordiaux pour contrer le biais cognitif lié à notre insensibilité naturelle envers ces aspects. Efforcez-vous, avec l’équipe, de prendre en compte la taille et les caractéristiques de votre panel. Placez davantage d’efforts en amont sur les critères de sélection de l’échantillon. Travaillez avec de très nombreux clients et basez votre priorisation et vos décisions de produit sur des données factuelles plutôt que des suppositions ou des extrapolations basées sur les réponses d’une poignée de clients.

Ce biais peut-il nous être utile ?

Votre attention bienveillante à la qualité des échantillons choisis pour justifier les décisions de projet va rapidement infuser le projet, vos parties prenantes et vos équipes. Vous pourrez, après avoir enraciné les bonnes pratiques sur l’aspect quantitatif de ces échantillons, commencer à introduire l’aspect qualitatif. Par exemple, les clients choisis pour cette enquête terrain sont-ils bien représentatifs de la cible marketing visée ? Localisation, taille, usages, processus, secteurs économiques… Ne limitez pas vos enquêtes ou entretiens à des questionnaires à choix multiples, utilisez davantage de questions ouvertes pour que les répondants s’expriment pleinement.

Enfin, en utilisant des approches Agiles comme Scrum, validez les premiers livrables de vos itérations (ou sprints) avec vos clients pour avoir des retours concrets immédiats et infléchir ou corriger votre direction rapidement.