La formule
Interpreter le resultat
En dessous de 0,05, on parle conventionnellement de significatif, et en dessous de 0,01 de hautement significatif. Ces seuils sont des conventions héritées de Fisher, pas des lois — une valeur p de 0,049 et une de 0,051 disent presque exactement la même chose.
Ou cela se complique. Une valeur p n'est pas la probabilité que l'hypothèse soit vraie, et ce n'est pas une mesure de la taille de l'effet. Une différence infime et inutile produira une très petite valeur p si l'échantillon est suffisamment grand.
Que des données aussi extrêmes se produiraient moins de 5 % du temps si l'hypothèse nulle était vraie. Cela ne signifie pas qu'il y a 95 % de chances que l'alternative soit correcte.
Bilatéral, sauf si vous aviez une hypothèse directionnelle avant de voir les données. Passer à un test unilatéral après coup divise la valeur p par deux et constitue un moyen bien connu de fabriquer de la significativité.
Comment calculer
Une valeur p est la probabilité d'observer un résultat au moins aussi extrême que celui observé, en supposant que l'hypothèse nulle est vraie. C'est une mesure du caractère surprenant des données si rien ne se passait.
Le calcul exact nécessite la fonction de répartition de la loi normale, qui n'a pas de forme fermée élémentaire. L'approximation logistique utilisée ici est précise à environ 0,01 près sur la plage habituelle des scores z.