Fiabilité et validité des mesures

Une mesure utile doit être valide (elle mesure ce qu'elle prétend mesurer) et fiable (reproductible). La fiabilité est une condition nécessaire, pas suffisante, de la validité.

Types de validité

De contenu : le test couvre bien le construit (jugement d'experts).
De critère : accord avec une mesure de référence (concurrente) ou prédiction d'un résultat futur (prédictive). Exemple : un test de terrain comparé à la VO2max mesurée en laboratoire.
De construit : le test se comporte comme attendu théoriquement (distingue des groupes de niveaux différents).

Fiabilité : relative et absolue

Relative : le classement des sujets est conservé d'un essai à l'autre. Elle s'exprime par le coefficient de corrélation intraclasse (ICC). Repères de Koo et Li (2016) : < 0,50 faible ; 0,50 à 0,75 modérée ; 0,75 à 0,90 bonne ; > 0,90 excellente (Koo et Li recommandent d'appliquer ces repères à l'IC 95 % de l'ICC plutôt qu'à l'estimation ponctuelle). L'ICC dépend de la forme choisie (ICC(2,1), ICC(3,1), accord absolu ou cohérence), qu'il faut préciser ; ils conseillent aussi au moins 30 sujets hétérogènes.
Absolue : la mesure se répète-t-elle avec la même valeur ? Elle s'exprime en unités de la variable : erreur type de mesure (SEM), plus petit changement détectable (MDC ou SDC), erreur typique et CV.

SEM = SD × √(1 − ICC). MDC₉₅ = 1,96 × √2 × SEM ≈ 2,77 × SEM. Un changement individuel inférieur au MDC peut être du bruit de mesure.

Accord entre deux méthodes : Bland-Altman

On trace la différence entre les deux méthodes (axe Y) en fonction de leur moyenne (axe X). On calcule le biais (différence moyenne) et les limites d'agrément à 95 % : biais ± 1,96 × SD des différences. La corrélation de Pearson ne suffit pas à montrer l'accord : deux appareils peuvent être parfaitement corrélés avec un écart systématique.

Exemple : un test de saut mesuré deux jours de suite : SD = 4 cm, ICC = 0,95 : SEM = 0,89 cm ; MDC₉₅ = 2,5 cm. Un gain de 1,5 cm après un cycle d'entraînement n'est donc pas distinguable de l'erreur de mesure pour un individu.

🎯 À retenir

Fiabilité nécessaire mais non suffisante pour la validité.
ICC : < 0,5 faible, 0,5-0,75 modérée, 0,75-0,9 bonne, > 0,9 excellente.
SEM = SD × √(1 − ICC) ; MDC95 = 1,96 × √2 × SEM.
Bland-Altman : biais et limites d'agrément à ± 1,96 SD des différences.
Un changement inférieur au MDC peut n'être que du bruit de mesure.

SEM = SD × √(1 − ICC)

Erreur type de mesure

SD : écart-type interindividuel
ICC : coefficient intraclasse

📌 SD = 4 cm, ICC = 0,95 : SEM = 0,89 cm.

MDC95 = 1,96 × √2 × SEM

Plus petit changement détectable

SEM : erreur type de mesure

📌 SEM = 0,894 : MDC95 = 2,48 cm.

biais ± 1,96 × SD(différences)

Limites d'agrément de Bland-Altman

biais : moyenne des différences

📌 Biais 0,5 ; SD = 1,2 : limites de −1,85 à 2,85.

⚠️ Erreurs fréquentes

Valider un appareil par une simple corrélation avec la référence.
Utiliser l'ICC seul sans l'erreur absolue exprimée en unités.

Pour s'entraîner

✅ QCM : Méthodologie de la recherche et statistiques 🃏 Fiches

Calculateurs liés

← Taille d'effet, puissance et limites de la p-value Tests de terrain, normes et interprétation individuelle →