Questions obligatoires : ce que coûte une réponse forcée
Rendre chaque question obligatoire ressemble à un remède contre les données manquantes. La recherche montre que vous échangez des cases vides contre des abandons et des réponses inventées. Voici quand une question obligatoire a sa place, et quoi faire à la place.
Par SurveyLane · L'équipe derrière SurveyLane
Tous les outils d'enquête permettent de rendre une question obligatoire, et des données complètes ont l'air propres. Pourtant, une question obligatoire ne peut forcer personne à répondre. La personne qui voulait passer la question se retrouve face à un choix : répondre quand même, inventer quelque chose ou fermer l'onglet. Seul le premier cas apparaît dans votre export pour ce qu'il est.
Ce que fait vraiment le réglage obligatoire
Quand une question est obligatoire, le répondant ne peut pas avancer tant qu'elle n'a pas de réponse. Les méthodologues parlent de réponse forcée ou de rappel dur. Cela vaut pour tous les types de questions, texte libre compris.
Il ne touche que la personne qui a voulu passer. Que fait-elle quand vous l'arrêtez ? Elle peut finalement répondre honnêtement. Elle peut taper ou cocher n'importe quoi pour franchir le blocage. Ou partir. Une question obligatoire n'est rentable que si le premier groupe est bien plus grand que les deux autres.
Pourquoi les gens laissent une question vide
On saute rarement une question par paresse. En général, la question n'offre aucun moyen de répondre sincèrement :
- La personne ne comprend pas la question, ou la lit de deux façons.
- Aucune option ne correspond à sa situation.
- Elle ne connaît pas la réponse, et deviner lui semble malhonnête.
- La question est personnelle et elle préfère garder la réponse pour elle.
- La question ne la concerne pas, et le filtrage ne l'a pas vu.
Beaucoup de vides sur une seule question signalent un problème de formulation ou de liste de réponses. Forcez une réponse et ce signal devient du bruit, impossible à filtrer, puisque vous ne savez plus qui aurait voulu passer.
L'article sur les questions à choix multiples traite du côté de la liste de réponses, notamment pourquoi "je ne sais pas" et "non concerné" sont deux réponses différentes.
Les preuves : les réponses forcées font fuir
L'expérience la plus nette vient de Jean Philippe Décieux, Alexandra Mergener, Kristina Neufang et Philipp Sischka, publiée dans la revue Psihologija en 2015. Sur environ 20 000 étudiants de deux universités allemandes invités par e-mail, 625 ont participé. Le questionnaire comptait une centaine d'items sur le couple et la sexualité. Chacun recevait au hasard une version parmi trois : saut libre, réponse obligatoire, ou réponse obligatoire avec l'option "je préfère ne pas répondre" dans chaque liste.
Dans la version obligatoire, 80 répondants sur 205 (39 %) ont essayé au moins une fois de passer une question et ont vu la page d'erreur. Dans ce groupe, 35 % ont abandonné. Chez tous ceux qui n'ont jamais été bloqués, et dans la version avec "je préfère ne pas répondre", le taux d'abandon était de 9 %.
Dans le groupe forcé, l'abandon a bondi de 7,5 points de pourcentage à une question ouverte sur ce que les répondants aimeraient changer chez leur partenaire, et de 8,7 points à une question sur leur expérience des infections sexuellement transmissibles. Elles étaient presque au bout. Les auteurs les appellent les "mauvais abandons" : des répondants motivés que vous perdez à cause de la conception.
Décieux et ses collègues citent aussi une étude de 2007, de Stefan Stieger, Ulf-Dietrich Reips et Martin Voracek. L'abandon y atteignait 64,1 % dans un groupe à réponses forcées, contre 18,6 % quand on pouvait passer les questions.
Les panels se comportent autrement
Gerald Albaum et ses collègues en 2010, puis Catherine Roster et ses collègues en 2014, avec des échantillons aux États-Unis et à Hong Kong, ont constaté que la réponse forcée n'augmentait pas l'abandon et réduisait nettement les non-réponses partielles. Les deux études reposaient sur des panels en ligne.
Les membres d'un panel sont payés par questionnaire complété et vont au bout par habitude. Vos clients ne vous doivent rien : là où un panéliste hausse les épaules, un client décroche.
Avec un échantillon de panel, une question obligatoire coûte peu de questionnaires complets, mais peut encore coûter de l'honnêteté. Si vos répondants vous rendent service, attendez-vous au résultat des étudiants.
Une réponse forcée n'est pas toujours une vraie réponse
L'abandon se compte. Le second coût se voit moins. À la fin de l'enquête de Décieux, on demandait aux répondants, en termes neutres, à combien de questions ils n'avaient pas répondu honnêtement. Parmi ceux qui avaient été bloqués, 25 % en reconnaissaient au moins une. Dans la version avec "je préfère ne pas répondre", c'était 13 %. Et les plus agacés du groupe forcé étaient déjà partis avant cette question : l'écart réel peut être plus grand.
Les psychologues parlent de réactance : privés de la liberté de refuser, certains résistent, en abandonnant ou en répondant faux. Imaginez une question obligatoire sur le revenu dans une enquête client. Quelqu'un qui ne veut pas le partager coche la première tranche, ou celle du milieu. La colonne est complète, et votre ventilation par revenu contient des réponses que personne ne pensait.
Même chose pour les connaissances. Demandez de façon obligatoire "combien de fois avez-vous contacté le support l'an dernier ?" et ceux qui l'ignorent tapent une estimation, souvent un chiffre rond. L'article sur les questions sensibles explique pourquoi les gens embellissent déjà leurs réponses. Forcer la réponse aggrave les choses.
"Je préfère ne pas répondre" et son prix
L'option "je préfère ne pas répondre" ressemble au compromis évident : personne ne passe la question par erreur, et chacun garde une sortie honnête. Dans l'étude de Décieux, elle a fait disparaître l'abandon supplémentaire, et les mensonges déclarés tombaient à environ la moitié du niveau des répondants bloqués.
Edith de Leeuw, Joop Hox et Anja Boevé ont montré en 2015 que proposer explicitement cette option augmente les données manquantes et réduit souvent la fiabilité des réponses obtenues. Une sortie facile finit par être prise.
Proposez-la donc là où refuser est une réponse légitime. Revenu, santé, sexualité, religion, une question sur un responsable nommément désigné : ici, "je préfère ne pas le dire" est une information, et vous l'acceptez. Une question sur la fonctionnalité la plus utilisée la semaine dernière n'en a pas besoin.
Dans l'analyse, comptez ces réponses comme manquantes, pas comme un point de votre échelle.
Les rappels doux : demander une fois, puis lâcher prise
Il existe mieux que les deux extrêmes. Laissez passer la question et affichez alors un court message qui demande si c'était voulu. Ensuite, la personne continue, quoi qu'elle décide. C'est ce qu'on appelle un rappel doux, ou soft prompt.
Comme le résument Décieux et ses collègues, DeRouvray et Mick Couper en 2002, puis Stéphane Ganassali en 2008, ont constaté qu'un message sur une question passée réduisait les non-réponses, même si la laisser vide restait permis. Tarek Al Baghal et Peter Lynn ont comparé un message juste après la question passée avec un rappel à la fin du questionnaire. Le message immédiat a bien mieux marché, ramenant les non-réponses près du niveau du face-à-face. Dans l'étude de de Leeuw, autoriser le saut puis relancer poliment a donné le meilleur taux de réponse de toutes les conceptions testées.
Un rappel doux rattrape le saut accidentel, et celui qui hésitait répond souvent. Celui qui a une vraie raison de refuser reste tranquille. La formulation décide si le message ressemble à une question ou à un mur. Comparez :
- "Erreur : veuillez répondre à toutes les questions avant de continuer."
- "Vous n'avez pas répondu à cette question. Elle nous aide à comprendre pourquoi des clients résilient, mais vous pouvez la passer si vous préférez."
La seconde dit pourquoi la réponse compte et que passer est permis. Affichez-la à côté de la question, une seule fois. Un message qui revient à chaque clic sur "suivant" est un rappel dur avec un détour.
Quelles questions méritent d'être obligatoires
Certaines questions ont vraiment besoin d'une réponse. Le test est simple : si cette question reste vide, le reste de l'enquête fonctionne-t-il encore ?
- Les questions de consentement, sans oui desquelles vous ne pouvez pas continuer, ni juridiquement ni éthiquement.
- Les questions de sélection qui décident si une personne fait partie de l'échantillon.
- Les questions de filtrage dont la réponse décide du bloc suivant. L'article sur la logique conditionnelle montre comment un embranchement dépend de cette réponse.
Votre question de résultat principale manque volontairement à cette liste. Rendre obligatoire la question NPS ou la satisfaction globale est tentant, puisque vous présentez ce chiffre. Mais une note forcée est justement celle à laquelle vous pouvez le moins vous fier. Utilisez un rappel doux et indiquez combien de personnes ont répondu.
Gardez ces quelques questions factuelles et sans ambiguïté.
Ne forcez jamais une réponse ouverte
Un champ de texte libre obligatoire réunit tous les problèmes ci-dessus. Taper demande un effort, surtout sur un téléphone, et quelqu'un qui n'a rien à dire invente quelque chose. Vous obtenez "rien", "na" ou "...". Chez Décieux, l'un des plus grands bonds d'abandon a eu lieu sur une question de ce type.
Rendez les questions ouvertes facultatives et placez tôt la plus importante. L'article sur les enquêtes pour smartphone explique pourquoi taper sur un écran tactile raccourcit les réponses, et le guide d'analyse des réponses ouvertes traite du texte que vous recevez.
Lire les vides que vous avez autorisés
Indiquez la base de chaque chiffre. "62 % satisfaits (n = 412)" montre que moins de personnes ont répondu à cette question qu'à l'enquête. Ne traitez jamais une case vide comme un zéro ou comme le point le plus bas de l'échelle : une non-réponse deviendrait une opinion tranchée. Méfiez-vous aussi des analyses qui suppriment en silence tout répondant ayant laissé un vide. Combinez dix questions, retirez tous ceux qui en ont passé une, et vous pouvez perdre un tiers de votre échantillon. Et pas un tiers au hasard.
Le taux de saut par question est aussi un indicateur de qualité. Une question passée cinq fois plus souvent que ses voisines a un problème, souvent une formulation floue ou une option manquante. L'article sur les mauvaises réponses d'enquête couvre les autres signaux d'alerte. Avec le serveur MCP de SurveyLane, demandez à un assistant quelles questions sont le plus souvent passées, et si ceux qui les sautent diffèrent des autres sur le reste.
Tester la décision avant le lancement
Impossible de deviner quelles questions les gens voudront passer. Lancez d'abord l'enquête auprès d'une petite partie de votre échantillon, avec le saut autorisé partout. Le taux de saut par question vous montre où la formulation doit être retravaillée. Le guide pour tester une enquête avant l'envoi explique comment organiser cela.
Questions fréquentes
Faut-il rendre chaque question de mon enquête obligatoire ?
Non. Forcer chaque réponse augmente l'abandon chez ceux qui voulaient passer une question et pousse une partie des autres vers des réponses fausses. Rendez obligatoires seulement les questions sans lesquelles l'enquête ne peut pas fonctionner, comme le consentement, la sélection et le filtrage, et utilisez un rappel doux partout ailleurs.
Une question obligatoire améliore-t-elle la qualité des données ?
Elle améliore l'exhaustivité, ce qui est autre chose. Il y a moins de cases vides, mais certaines réponses ne servent qu'à franchir le blocage. Dans une expérience, les répondants bloqués reconnaissaient presque deux fois plus souvent des réponses malhonnêtes que ceux à qui l'on offrait la possibilité de refuser.
Quelle est la différence entre un rappel doux et une question obligatoire ?
Une question obligatoire empêche le répondant de continuer tant qu'il n'a pas répondu. Un rappel doux affiche un court message quand quelqu'un passe une question, lui demande si c'était voulu, puis le laisse continuer dans tous les cas. Les non-réponses baissent, sans l'abandon supplémentaire de la réponse forcée.
Dois-je ajouter une option je préfère ne pas répondre à chaque question ?
Seulement là où refuser est une réponse légitime, par exemple pour le revenu, la santé ou d'autres sujets personnels. Sur des questions ordinaires, elle offre une sortie facile et peut réduire la fiabilité de vos données, alors améliorez plutôt la liste de réponses ou le filtrage.