En 2022, l’enquête annuelle de victimation multimode « Vécu et Ressenti en matière de Sécurité » conçue par le service statistique ministériel de la sécurité intérieure (SSMSI) a pris la suite de l’enquête « Cadre de vie et sécurité » menée chaque année par l’Insee entre 2007 et 2021.
Concevoir une enquête proposée en première intention par internet sur des thématiques sensibles, souvent inédites, et auprès de populations rares a nécessité la mise en œuvre de tests adaptés pour évaluer les questionnaires ainsi que les communications à destination des enquêtés (lettres, courriels ou SMS) qui constituent pour une majorité d’entre eux l’unique lien avec le service producteur. Ainsi, afin de poursuivre l’évaluation scientifique de l’enquête socle et de tester rigoureusement les questionnaires thématiques avant de les mettre en collecte en population générale, le SSMSI a mis en place une procédure de prétests originale dès 2021.
En s’appuyant sur la littérature récente, en particulier l’état des savoirs produits par les deux conférences internationales pluridisciplinaires sur le développement, l’évaluation et le test de questionnaire (QDET) organisées en 2002 puis en 2016, les prétests qualitatifs de l’enquête VRS ont été conçus pour permettre d’identifier les motivations et les freins à la participation, évaluer l’acceptation du questionnaire et les temps de réponse et repérer les effets de mesure. Dans une approche « userexperience » (UX), le protocole des prétests du SSMSI prévoit : le recrutement ciblé de 80 panélistes répartis en 4 strates selon leur profil (population « générale » ou « spécifique ») et le mode de passation du questionnaire thématique pendant le prétest (internet ou téléphone), l’étude observationnelle du comportement de réponse, la mise en place des tests cognitifs par entretien semi-directif.
Afin d’illustrer l’apport spécifique de l’évaluation qualitative et de sensibiliser les concepteurs d’enquête du service statistique public à cet enjeu des tests d’une enquête multimode principalement auto-administrée par internet, le SSMSI propose dans ce rapport une sélection d’enseignements issus des prétests ayant apporté des éléments de compréhension précieux sur l’engagement à répondre, la qualité des réponses ou encore la charge de réponse perçue dans le contexte de l’enquête VRS.