Test de Kolmogorov-Smirnov

En statistiques, le test de Kolmogorov-Smirnov est un test d'hypothèse utilisé pour déterminer si un échantillon suit bien une loi donnée connue par sa fonction de répartition continue, ou bien si deux échantillons suivent la même loi. Le test de Kolmogorov-Smirnov est par exemple utilisé pour tester la qualité d'un générateur de nombres aléatoires[1].

Test de Kolmogorov-Smirnov
Type
Test non-paramétrique (d)Voir et modifier les données sur Wikidata
Inventeurs
Nommé en référence à

Principe

modifier
 
Fonction de répartition empirique Fn (en bleu) et fonction de répartition théorique F (rouge).

On modélise une loi donnée par sa fonction de répartition F (voir courbe rouge sur la figure). La fonction de répartition associe à tout x (en abscisses), la probabilité qu'une variable suivant cette loi soit plus petite que x (en ordonnées). Le test consiste alors à comparer la fonction de répartition de la loi (fonction de répartition théorique) à la fonction de répartition empirique Fn (en bleu). Cette dernière est une fonction de répartition obtenue en attribuant la probabilité 1/n à chacun des n éléments de l'échantillon. On mesure alors la différence entre les deux courbes. Si cette différence est inférieure à un seuil, alors on décide que l'échantillon provient bien de cette loi donnée. Plus précisément, on rejette l'hypothèse que l'échantillon provienne de la loi s'il y a une valeur de x pour laquelle |Fn(x) - F(x)| est grande.

Définition formelle

modifier

Soit   n variables iid définies sur un espace de probabilité  , à valeurs dans  , avec pour fonction de répartition F. La fonction de répartition empirique   de l'échantillon   est définie par :

 

  est la fonction indicatrice de l'événement A.

Notons bien que   est une variable aléatoire, car elle dépend des valeurs de l'échantillon  . On a la convergence suivante :

 

pour toute constante c > 0. Le terme α(c) vaut 0,05 pour c = 1,36.

Remarquons que la limite à droite ne dépend pas de F. Cela découle du fait que   converge en loi vers un pont brownien changé de temps par l'inverse F−1 de F. La série α(c) se déduit des propriétés de ce dernier processus.

Il est ainsi facile de proposer un test d'hypothèse pour décider si un échantillon provient bien d'une loi donnée, ou si deux échantillons ont la même loi, lorsque leurs fonctions de répartitions sont continues.

On peut aussi considérer   et  .

Mise en œuvre

modifier
  • ks.test avec R.
  • scipy.stats.kstest avec Python pour déterminer si un échantillon suit une loi donnée
  • scipy.stats.ks_2samp avec Python pour déterminer si deux échantillons suivent la même loi de distributions
  • ksmirnov avec Stata
  • kstest avec Matlab.

Voir aussi

modifier

Références

modifier

Notes et références

modifier
  1. (en) Donald E. Knuth, The Art of Computer Programming, vol. 2, 3e éd., Addison-Wesley Professional, 784 p. (ISBN 0-201-89684-2), p. 48–55.

Liens externes

modifier