La tenue d'enquêtes

Note : Le présent guide vise à ce que les enquêtes menées au BVG soient conformes aux exigences et aux attentes raisonnables des spécialistes dans le domaine, de même qu'aux normes de VOR du Bureau du vérificateur général. Les termes « doit » et « devrait » utilisés dans ce document d'orientation ne correspondent pas nécessairement à des politiques et à des normes du BVG. Toutefois, ils indiquent quelles sont les exigences et les attentes relatives à la tenue des enquêtes.

L'essai préliminaire consiste à administrer l'instrument de collecte des données auprès d'un petit nombre de répondants tirés de la population visée par l'enquête à pleine échelle. Si des problèmes surviennent pendant l'essai préliminaire, il est probable que des problèmes semblables se présenteront dans l'administration à pleine échelle. L'essai préliminaire vise à repérer les problèmes que peut présenter l'instrument de collecte des données et à trouver des solutions possibles.

Il n'est pas possible d'anticiper tous les problèmes susceptibles de se présenter au moment de la collecte des données. La terminologie utilisée dans les questionnaires ou dans les interviews peut ne pas être comprise par les répondants, et les renseignements à extraire des documents peuvent ne pas être facilement disponibles. Pour réduire l'erreur à un niveau acceptable, il faut faire l'essai préliminaire des instruments de collecte des données.

Comme il est essentiel d'appliquer des méthodes uniformes pour être en mesure de faire des énoncés généraux, il est sage d'apporter aussi peu de modifications que possible aux instruments de collecte des données une fois la collecte lancée. Dans le cas du questionnaire postal, les modifications sont impossibles une fois que les instruments de collecte des données ont été distribués. Si l'on fait l'essai préliminaire du questionnaire postal ou d'autres instruments de collecte des données, il est possible de leur apporter des modifications avant de les administrer à pleine échelle, et ainsi d'appliquer des méthodes uniformes pendant la collecte des données.

Si l'essai préliminaire révèle que la probabilité d'obtenir de façon satisfaisante des données fondées, uniformes et pertinentes pour atteindre les objectifs de vérification est faible, il faut laisser tomber les points qui causent des problèmes ou chercher d'autres techniques de collecte des données.

Principes de l'essai préliminaire

L'essai préliminaire doit être mené dans une situation qui est la plus semblable possible à la collecte réelle des données et sur des membres de la population aussi semblables que possible à ceux qui seront échantillonnés.

Il faut prendre des notes précises au sujet des problèmes qui sont survenus et proposer des solutions possibles.

Essai préliminaire des questionnaires

L'essai préliminaire des questionnaires a un objectif important, soit bien comprendre le raisonnement qui entraîne les réponses de sorte que le vérificateur puisse déterminer avec exactitude si le questionnaire est bien rempli, si les questions sont réellement comprises par le répondant et si les questions posent bien les questions que le vérificateur pense poser. L'essai préliminaire permet également au vérificateur de déterminer si les répondants sont capables de fournir les renseignements nécessaires et s'ils sont disposés à le faire.

Dans l'essai préliminaire, le répondant doit concrètement répondre au questionnaire, et exprimer son opinion pendant qu'il le fait ou après. On peut par exemple donner le questionnaire en tant qu'interview, et demander des précisions sur certaines réponses et clarifier les questions en cours de route. On peut aussi obtenir l'opinion du répondant au cours d'une interview postérieure au questionnaire ou dans un groupe de discussion. Il existe aussi une autre méthode courante, soit de demander au répondant de penser tout haut pendant qu'il répond.

L'essai préliminaire permet aussi au vérificateur responsable de faire l'essai de solutions aux problèmes éprouvés avec le questionnaire. Par exemple, s'il s'agit de formulations différentes pour une question, il peut utiliser une formulation avec la moitié de l'échantillon de l'essai préliminaire, et la deuxième avec l'autre moitié pour savoir ce qui fonctionne le mieux.