Sample attrition bias in randomized experiments: A tale of two surveys

Pré-publication, Document de travail: La littérature sur les expériences aléatoires contrôlées a contribué au renouveau de l'évaluation microéconométrique des politiques publiques en portant l'accent sur la participation endogène aux programmes. Les questions de mesure et d'attrition ont reçu moins d'attention. Ce travail analyse l'important impact de l'attrition dans une expérience d'accompagnement des demandeurs d'emploi à large échelle. On s'appuie sur deux enquêtes indépendantes suivant la même population initiale de 8000 demandeurs d'emploi. La première est une longue enquête téléphonique dont le taux de réponse est remarquablement faible (50%) et déséquilibré. La seconde résulte de la combinaison de données administratives et d'une courte interrogation téléphonique visant les chômeurs sortis des listes du chômage ; cette base de données enrichie a un taux de réponse équilibré et sensiblement plus élevé (80%). Des estimations naïves sur ces deux sources sans tenir compte de la non réponse conduisent à des résultats étonnamment contrastés. Utilisant les données administratives enrichies comme références, on montre que les résultats basés sur l'enquête téléphonique longue manquent de validité interne et externe. On examine les méthodes disponibles pour borner l'effet en présence d'un échantillon sélectionné, en les appliquant au cas de la conformation imparfaite. Les bornes obtenues à partir des deux enquêtes sont compatibles, mais celles de la longue enquête téléphonique sont peu informatives. On conclut sur les conséquences pour les stratégies de collecte de données.

Auteur(s)

Luc Behaghel, Bruno Crépon, Marc Gurgand, Thomas Le Barbanchon

Date de publication
  • 2009
Mots-clés JEL
C14 C21 C24 J64 J68
Mots-clés
  • Job search
  • Counselling
  • Attrition
  • Sample selection
  • Unemployment
  • Sélection de l’échantillon
  • Accompagnement
  • Recherche d’emploi
  • Chômage
Référence interne
  • PSE Working Papers n°2009-15
Version
  • 1