Distance de Cook

mesure de l'influence d'un point de données dans l'analyse de régression

En statistique, la distance de Cook est couramment utilisée pour estimer l'influence d'une donnée lors de l'utilisation de méthodes des moindres carrés[1].

Dans le cas général, de l'utilisation de la méthode des moindres carrés, la distance de Cook peut être utilisée de plusieurs façons : pour indiquer les données qu'il serait intéressant de vérifier; pour indiquer les régions de l'espace de conception où il serait bon d'être en mesure d'obtenir plus de points de données. Ce nom vient du statisticien américain R. Dennis Cook, qui a introduit le concept en 1977[2],[3].

Définition modifier

La distance de Cook mesure l'effet de la suppression d'une donnée. Les données avec d'importants résidus (Données aberrantes) et/ou fort effet de levier peuvent fausser le résultat et la précision d'une régression. Les points ayant une distance de Cook importante sont considérés comme méritant un examen plus approfondi dans l'analyse. Pour l'expression algébrique, il faut définir d'abord :

 

comme une matrice de projection   (matrice de projection des   observations de chaque variable explicative). Ensuite, nous avons  , qui est l'estimation MCO de   qui résulte de l'omission de la  -ème observation ( ). Ensuite, nous avons[4] :

 

  est le résidu (i.e. la différence entre la valeur observée et la valeur ajustée par le modèle proposé) pour l'individu  , et  , défini comme :

 

est l'influence, i.e., le  -ème élément de la diagonale de  . Avec cela, nous pouvons définir la distance de Cook comme :

 

  est le nombre de paramètres ajustés, et   est l'erreur quadratique moyenne du modèle de régression. L'expression suivante est algébriquement équivalente :

 

où    est l'estimateur MCO de la variance du terme d'erreur, défini comme :

 

Et une troisième expression équivalente est :

 

où :

   est la prédiction du modèle de régression complète pour l'observation j ;
  est la prédiction pour l'observation j à partir d'un modèle de régression ajustée dans lequel l'observation i a été omise.

Détection des observations très influentes modifier

Il y a des opinions différentes au sujet de quel seuil les valeurs à utiliser pour repérer des points sont très influents. Une directive opérationnelle simple de   a été suggérée[5]. D'autres ont indiqué que  , où   i est le nombre d'observations, pourrait être utilisé[6].

Une approche conservatrice repose sur le fait que la distance de Cook a la forme W/p, où W est formellement identique au test de Wald que l'on utilise pour les tests que   en utilisant certaines  . Rappelant que W/p a une distribution    (avec p et n-p degrés de liberté), nous voyons que la distance de Cook est équivalent à la statistique F pour tester cette hypothèse, et nous pouvons donc utiliser  comme un seuil[7].

Notes et références modifier

  1. William Mendenhall, Terry Sincich, (1996).
  2. Dennis R. Cook (février 1977).
  3. Idem (mars 1979).
  4. Hayashi, Fumio (2000).
  5. Dennis R. Cook, Sanford Weisberg (1982).
  6. Kenneth A. Bollen, Robert W. Jackman (1990).
  7. Herman Aguinis, Ryan K. Gottfredson, Harry Joo (2013).

Voir aussi modifier

Bibliographie modifier

Articles connexes modifier