Validité, biais et reproductibilité
Évaluer si une étude dit vrai, généralise bien et peut être refaite.
1
Validité
Comparer les deux sens
Validité interne
- L’étude teste bien l’effet étudié.
- Les variables pertinentes sont contrôlées.
- Les causes alternatives sont limitées.
Validité externe
- Le résultat vaut hors de l’échantillon.
- La population plus large reste concernée.
- Le contexte réel compte aussi.
À retenir
Interne dit si le résultat tient dans l’étude. Externe dit s’il voyage ailleurs. Contrôle strict ne garantit pas généralisation.
2
Biais
Sources d’erreur fréquentes
Repérer vite
- Biais de sélection : échantillon non représentatif.
- Biais de confirmation : on cherche surtout ce qui confirme.
3
Fiabilité des mesures
Mesure et répétition
| Notion | Idée centrale | Question clé |
|---|---|---|
| Fidélité | Mesure stable et cohérente | L’outil donne-t-il le même résultat ? |
| Réplication | Refaire l’étude avec les mêmes méthodes | Obtient-on le même effet ? |
| Reproductibilité | Retrouver le résultat ailleurs | Le résultat survit-il à un autre contexte ? |
Point de vigilance
Fidèle ne veut pas dire vrai. Une mesure peut être stable tout en mesurant mal.
4
Vérifier une étude
Démarche courte
- 1
Identifier la population et la méthode.
- 2
Chercher les contrôles et les comparaisons.
Cas simple
Une étude teste un nouveau cours sur 20 volontaires recrutés dans un seul club, puis conclut que la méthode marche pour tous les étudiants.
- Le recrutement n’est pas aléatoire, donc l’échantillon peut être biaisé.
- Le club ne représente pas tous les étudiants, donc la validité externe est faible.
- Sans groupe comparable, la cause du progrès reste incertaine.
La conclusion est trop large. L’étude peut être utile, mais elle ne suffit pas pour généraliser.
5
Crise de la reproductibilité
Ce qui est en jeu
- La crise de la reproductibilité questionne la solidité de certains résultats.
- Des études sont difficiles à reproduire malgré des méthodes annoncées semblables.
- La rigueur méthodologique devient indispensable pour convaincre.
Mini-défi
- Dans quel cas la validité interne est-elle menacée ?
- Quel biais apparaît quand on retient surtout les résultats attendus ?