Annals of Youtube Science 2(1): Sondages et taux de non-réponse

Il est temps de reprendre la série de billets Annals of Youtube Science, dont le « volume 1 », publié entre janvier et septembre de l’an dernier, compte 16 épisodes. Cette année, je vais faire plus « light« , mais continuer quand même : c’est un bon moyen pour moi de faire le tour des canaux Youtube sur lesquels on trouve régulièrement des conférences intéressantes. J’en profite pour indiquer que je viens de rétro-publier l’épisode 1(12), qui était resté coincé dans le purgatoire des billets au format « brouillon ».

Roger Tourangeau, de l’entreprise américaine Westat, a donné fin 2017 une conférence passionnante au Santa Fe Institute (canal Youtube) sur les paradoxes d’un phénomène bien connu dès que l’on s’intéresse aux enquêtes de population — les taux de non-réponse ont explosé, mais pas les erreurs moyennes sur les quantités dont on connaît la valeur réelle, comme les résultats électoraux :

La slide qui résume le paradoxe :

Le problème est le suivant : sur les 25 dernières années, les taux de réponse aux enquêtes en population générale ont chuté de manière dramatique, vers des taux à un chiffre. On pourrait se dire que c’est le bon moment pour en revenir – car c’était la norme, en gros, avant la Seconde guerre mondiale – à des méthodes non probabilistes, de type « échantillonnage par quotas » — mais ce serait ignorer le paradoxe soulevé par Merkle et Edelman : le taux de réponse ne détermine pas l’erreur moyenne de mesure.

Tourangeau donne tout ce qu’il faut pour comprendre les fondements empiriques et théoriques du paradoxe—paradoxe peu connu (ou peu enseigné, en tout cas) dans les pays européens, où les instituts de sondage ne font, de toute manière, que très peu d’échantillonnage réellement aléatoire : Tourangeau cite, à titre d’exemple, la kyrielle d’enquêtes britanniques s’étant complètement trompées sur l’élection générale de 2015.