Aller au contenu
Boîte à outilsExpectTools

En accès libre

Boîte 3 · Module 2

Construire un questionnaire

Concevoir un questionnaire ne s’improvise pas : chaque question décide de ce qu’on pourra analyser.

Des étapes de validation aux pièges de formulation, de quoi construire un questionnaire clair, pertinent, et adapté à vos objectifs. Un modèle de questionnaire vous attend dans la boîte.

Environ 47 min en tout. 6 parties, chacune se lit à part.

Par Nicolas Naïditch, sociologue de la santé

Option : garde les démonstrations vues dans ce navigateur. Rien n’est envoyé.

3 min · 1 démonstration · 3 fiches · 2 ressources

Avant d’écrire un questionnaire, demandez-vous s’il n’en existe pas déjà un, validé, qui mesure ce que vous cherchez : qualité de vie, douleur, anxiété, expérience des soins.

Voir

Cinq dimensions, ou dix-neuf ?

Deux questionnaires de qualité de vie.

À retenir Un questionnaire générique compare des maladies entre elles ; un spécifique voit ce qui compte dans une maladie.

Pour en savoir plus · 3 fiches à dérouler

Fiche 1/3Deux familles de questionnairesLes questionnaires ad hoc construits pour une enquête, sans validation de leurs propriétés psychométriques. C’est le…
  • Les questionnaires ad hocconstruits pour une enquête, sans validation de leurs propriétés psychométriques. C’est le cas de la plupart des enquêtes associatives.
  • Les questionnaires validésdéveloppés selon une méthode stricte, avec des propriétés mesurées. Parmi eux, les PROMs (Patient-Reported Outcome Measures) rapportent les résultats des soins tels que les patients les vivent : qualité de vie, douleur, anxiété ; les PREMs (Patient-Reported Experience Measures) rapportent leur expérience des soins.
Fiche 2/3Générique ou spécifiqueUn questionnaire générique s’applique à toutes les pathologies et permet de les comparer ; un questionnaire spécifique…

Un questionnaire générique s’applique à toutes les pathologies et permet de les comparer ; un questionnaire spécifique est construit pour une maladie et voit ce qui y compte vraiment. Dans le diabète, l’EQ-5D-5L mesure cinq dimensions de la qualité de vie ; l’ADDQOL en explore dix-neuf, dont la liberté de manger et de boire.

Fiche 3/3Avant d’en adopter unLa traduction un questionnaire validé en anglais ne l’est pas en français. Les conditions d’utilisation licence…
  • La traductionun questionnaire validé en anglais ne l’est pas en français.
  • Les conditions d’utilisationlicence, autorisation, citation.
  • Les modalités de passationauto-questionnaire, entretien, en ligne.
  • Le prixcertains sont payants.

Entre deux questionnaires équivalents, comparez leurs propriétés psychométriques et leur usage dans la littérature.

12 min · 2 démonstrations · 1 exercice · 2 fiches · 2 ressources

Même sans viser une validation complète, inspirez-vous de ses étapes. Deux exigences ne se négocient pas : couvrir ce qui compte (validité de contenu), et être compris, ce que vérifient les entretiens cognitifs. Les personnes concernées jugent aussi si les questions mesurent ce qu’elles annoncent (validité apparente).

Voir

Que garder d’une validation ?

Six étapes.

À retenir Un questionnaire ad hoc garde au moins la première moitié : la littérature, les personnes concernées, et des entretiens cognitifs, cinq à quinze par série selon les guides.

Votre question veut-elle dire ce que vous croyez ?

Une question qui semble claire.

À retenir Une question qui semble claire à son auteur laisse souvent trois doutes au répondant ; les entretiens cognitifs les font apparaître.

ExerciceLa personne répond-elle à la question que vous pensez poser ?

Tester le sens avant de diffuser · cas fictifs, rien n’est gardé ni envoyé

Un entretien cognitif examine comment on comprend une question, retrouve une information et choisit une réponse. Il complète le prétest chronométré.

Vous préparez une enquête sur le renoncement aux soins. Avant de la diffuser, vous écoutez comment trois personnes comprennent les formulations proposées. Les paroles ont été inventées pour l’exercice.

Cas fictif

De quand parle-t-on ?

Question proposée · « Avez-vous déjà renoncé à des soins ? »

Parole fictive · « J’ai répondu oui pour des lunettes que je n’ai pas achetées il y a dix ans. Pour cette année, je ne sais pas. »

Quel problème faut-il examiner en premier ?

La période de référence n’est pas définieOui. « Déjà » fait chercher sur toute une vie, ce qui ne correspond pas forcément à l’objectif de l’enquête.

La personne ne répond pas franchementRien ne permet de conclure à un manque de franchise. Elle explique justement son raisonnement.

Il faut tout de suite recruter plus de répondantsPlus de répondants ne fixent pas une période que chacun comprend différemment.

La réponse peut être cohérente pour la personne et inadaptée à votre objectif. Préciser une période est une piste, sans supposer qu’une même durée convient à toutes les enquêtes.

À essayer ensuite Essayer une période explicite, puis demander à la personne comment elle retrouve les épisodes concernés.

Cas fictif

Deux raisons dans une case

Question proposée · « Au cours des 12 derniers mois, avez-vous renoncé à des soins pour des raisons financières ou faute de rendez-vous ? Oui · Non »

Parole fictive · « Pour l’argent, non. Pour le rendez-vous, oui. Si je coche oui, vous allez croire que je n’avais pas les moyens ? »

Quel diagnostic aide le plus à réviser cette question ?

Deux raisons sont regroupées, sans pouvoir les distinguerOui. Un « oui » ne dit pas quel obstacle a joué, ni si les deux se combinent.

Il faut supprimer toute question sur les obstaclesLe sujet reste pertinent. C’est la façon de recueillir les raisons qui doit changer.

Il faut expliquer à l’oral ce que la personne doit cocherUne consigne improvisée masque le défaut. Le questionnaire doit fonctionner seul, comme lors de la diffusion.

Repérer d’abord un besoin de soins non satisfait, puis recueillir les motifs avec des choix adaptés, sépare les informations. Plusieurs motifs peuvent être autorisés si la situation le demande.

À essayer ensuite Tester ces deux étapes, et vérifier comment la personne distingue renoncer, reporter, et ne pas avoir eu besoin de soins.

Cas fictif

Un zéro qui ne dit pas tout

Question proposée · « Au cours des 12 derniers mois, combien de fois avez-vous renoncé à une consultation dont vous aviez besoin ? 0 · 1 · 2 · 3 ou plus »

Parole fictive · « J’ai mis zéro parce que je n’ai pas eu besoin de consulter. Mais quelqu’un qui a tout obtenu met aussi zéro. »

Que faut-il clarifier avant de garder cette formulation ?

Distinguer l’absence de besoin du besoin satisfaitOui. La même réponse recouvre deux situations différentes, selon l’indicateur que vous voulez construire.

Transformer automatiquement zéro en donnée manquanteZéro est une vraie réponse ici. La remplacer sans comprendre le chemin de réponse ferait perdre de l’information.

La personne ne devrait pas pouvoir répondre zéroRetirer zéro exclurait les personnes qui n’ont pas renoncé. Il faut clarifier le parcours, pas forcer une réponse.

La bonne correction dépend du dénominateur visé. Une question filtre sur le besoin de consulter, ou une réponse dédiée, distingue les situations. La nouvelle formulation reste à éprouver auprès de profils variés.

À essayer ensuite Écrire l’indicateur attendu avec son dénominateur, puis retester le filtre et les réponses.

Le geste à retenir

Le prétest cognitif explore quatre étapes de la réponse, comprendre, se souvenir, juger, répondre. Demander « Vous avez compris ? » ne suffit pas. On fait raconter le raisonnement, sans souffler la bonne interprétation.

Pour chaque formulation, lisez d’abord la question, puis le raisonnement de la personne. Choisissez le problème à examiner en premier. Le but est de réparer la question, puis de la tester à nouveau.

CDC · Comprendre comment une personne répond à une question ↗

Mettre le raisonnement à l’épreuve · sans note

Vérifier la compréhension

Quelle relance renseigne le mieux sur la façon dont une personne comprend une question ?

« Vous avez bien compris ? »Un oui ou un non renseigne peu sur le sens réellement donné à la question.

« Pouvez-vous me redire avec vos mots ce que cette question vous demande ? »Oui. Cette relance fait entendre une interprétation, sans dicter celle attendue.

« Ici, on parle des rendez-vous médicaux, donc vous cochez oui ? »La relance donne l’interprétation et suggère la réponse. Elle masque les difficultés de la question.

Une reformulation se complète par une relance sur le souvenir mobilisé, ou sur le choix de la réponse.

CDC · Comprendre comment une personne répond à une question ↗

Modèle à remplir

Grille de prétest cognitif

Une ligne par question et par problème observé, de la formulation testée à la version retestée.

⬇ Télécharger · CSV · 1 Ko
Voir le modèle en entier · 13 champs

Utilisez des identifiants de séance, jamais de nom. Les quatre étapes viennent du modèle de la réponse à une enquête, comprendre, se souvenir, juger, répondre. Le prétest chronométré du module « Construire un questionnaire » vient ensuite.

Une ligne du tableur rassemble les champs ci-dessous ; dupliquez-la pour chaque nouvelle entrée. Les textes entre crochets sont à remplacer par les vôtres. Aperçu lu dans le fichier publié.

Tous les champs de Grille de prétest cognitif
Champ à renseignerRepère à remplacer
Identifiant de la séance[séance]
Version du questionnaire[version]
Identifiant de la question[question]
Formulation testée[texte]
Éléments utiles du profil, sans identification[profil utile]
Relance ouverte utilisée[relance ouverte]
Réponse ou note, anonymisée[note]
Étape en difficulté · comprendre, se souvenir, juger ou répondre[étape]
Problème observé[problème]
Modification proposée[modification]
Raison du choix[raison]
Version à tester à nouveau[version]
Résultat du nouvel essai[résultat]

Pour en savoir plus · 2 fiches à dérouler

Fiche 1/2La méthode des questionnaires validésUne revue bibliographique : les travaux existants, les concepts clés. Un comité scientifique : des experts pour…
  1. Une revue bibliographique : les travaux existants, les concepts clés.
  2. Un comité scientifique : des experts pour orienter le projet.
  3. Une enquête qualitative : les thèmes et les questions qui comptent pour les personnes concernées.
  4. Des entretiens cognitifs : vérifier que chaque question est comprise.
  5. Une étude pilote : tester les questions et leur ordre, repérer les items redondants ou mal classés.
  6. Une étude psychométrique : validité de construit et de critère, consistance interne (alpha de Cronbach), reproductibilité.
Fiche 2/2Ce qu’un questionnaire ad hoc doit garderLa validité de contenu le questionnaire couvre les aspects les plus importants de ce qu’on veut mesurer. Elle se…
  • La validité de contenule questionnaire couvre les aspects les plus importants de ce qu’on veut mesurer. Elle se construit par la littérature, et surtout par des entretiens.
  • La validité apparentele jugement des personnes concernées, pour qui les questions mesurent bien ce qu’elles annoncent.
  • La compréhensionchaque question est comprise, sans ambiguïté, par la population visée ; elle se vérifie par des entretiens cognitifs.

Testez votre questionnaire à l’oral : on demande aux personnes de lire et de réagir à voix haute (« thinking aloud »). Deux ou trois entretiens révèlent déjà beaucoup d’erreurs de formulation ; les guides de référence en comptent cinq à quinze par série.

10 min · 4 démonstrations · 1 exercice · 4 fiches · 2 ressources

La nature d’une variable, c’est-à-dire de la question posée et des réponses attendues, détermine le traitement statistique possible. Anticipez l’analyse en choisissant la nature de chaque variable.

Voir

Variable, modalité, effectif : de quoi parle-t-on ?

Une question, onze réponses.

À retenir Une variable est une question ; ses modalités, ses réponses possibles ; un individu, une ligne ; l’effectif compte, la population totalise.

Quelle nature pour quelle question ?

Deux familles.

À retenir Qualitative ou quantitative : la nature de la question décide de ce qu’on pourra calculer.

Un âge, ou une classe d’âge ?

Deux façons de demander l’âge.

À retenir Un âge peut toujours devenir une classe ; une classe ne redevient jamais un âge. Préférez le nombre, sauf bonne raison.

Une profession, c’est un nombre ?

La profession.

À retenir La même variable peut se coder de trois façons ; chaque codage est une hypothèse, et décide des tests possibles.

OutilLes types de questions, en pratique

Vos réponses, telles que l’analyse les reçoit

Répondez : à droite, la ligne que votre réponse ajoute à la base de données.

1 · Quel âge avez-vous ?
2 · Êtes-vous satisfait de ce cours ?
3 · De 0 à 10, le recommanderiez-vous ?
4 · Quels réseaux sociaux utilisez-vous ?
5 · Avez-vous un traitement pour votre maladie ?
6 · Avez-vous des remarques ?

Votre ligne dans la base de données

VariableValeurNature

Une personne, une ligne. Une question à choix multiples, une colonne par case. Une question filtrée, « non concerné » pour les autres.

Pour en savoir plus · 4 fiches à dérouler

Fiche 1/4Le vocabulairela question qui décrit les individus. Modalité : une réponse possible. Individu : la plus petite unité statistique.…
  • Variable : la question qui décrit les individus.
  • Modalité : une réponse possible.
  • Individu : la plus petite unité statistique.
  • Effectif (n) : le nombre d’individus dans une modalité.
  • Population (N) : l’ensemble des individus de l’étude.
Fiche 2/4Les natures de variablesQualitative ouverte un texte libre. À éviter : difficile à traiter, dépendante de l’aisance à écrire, risquée pour…
  • Qualitative ouverteun texte libre. À éviter : difficile à traiter, dépendante de l’aisance à écrire, risquée pour l’anonymat. Si vous voulez des verbatims, faites des entretiens.
  • Qualitative nominaledes catégories, sans ordre ; le genre, la maladie. Binaire quand il n’y en a que deux, oui ou non. On la décrit par des effectifs et des pourcentages.
  • Qualitative ordinaledes catégories qu’on peut ordonner ; un niveau de satisfaction, des classes d’âge. Les écarts entre catégories ne sont pas supposés égaux.
  • Quantitativeune quantité. Mesurée, elle se lit sur une échelle continue, même arrondie ; l’âge, le poids, une durée. Comptée, elle est discrète ; un nombre de consultations. On la décrit par une moyenne et un écart-type, ou une médiane.
Fiche 3/4Un nombre n’est pas toujours une quantitéUn code numérique ne change pas la nature d’une réponse. Coder non = 0 et oui = 1, ou numéroter les professions de 1 à…

Un code numérique ne change pas la nature d’une réponse. Coder non = 0 et oui = 1, ou numéroter les professions de 1 à 8, laisse une variable qualitative ; la moyenne de ces codes n’a pas de sens. Une seule question notée de 1 à 5 reste en général ordinale.

Un score, qui additionne les réponses à plusieurs questions, se traite comme une quantité si l’outil le justifie, un questionnaire validé par exemple. Notez la nature de chaque variable dans le dictionnaire des variables, avant le terrain ; le choix d’un test partira d’elle.

Fiche 4/4Choisir, c’est déjà interpréterUne même variable peut se coder de plusieurs façons, et aucun codage n’est neutre. Ordonner les professions suppose une…

Une même variable peut se coder de plusieurs façons, et aucun codage n’est neutre. Ordonner les professions suppose une hiérarchie de diplôme, de revenu, de stabilité d’emploi, qu’il faut pouvoir justifier ; leur donner des notes de 1 à 4 suppose des écarts égaux, ce qui gomme les rapports sociaux qu’elles recouvrent. Le niveau d’études se prête mieux au chiffrage, parce que les années de formation s’additionnent ; il mesure pourtant un diplôme, pas des compétences.

Privilégiez une variable quantitative quand c’est possible : un âge peut toujours devenir une classe d’âge ; une classe ne redevient jamais un âge.

9 min · 5 démonstrations · 3 fiches

Pensez aux enquêtés et aux analyses : une question se comprend d’une seule façon, ses modalités couvrent tous les cas sans se chevaucher, et son traitement est prévu.

Voir

Où est le piège ?

Trois questions de questionnaires réels.

À retenir Des classes qui se chevauchent, un « autre » fourre-tout, un « je ne sais pas » oublié : trois pièges, trois réécritures.

0 à 10, 1 à 10, ou 1 à 6 ?

Trois échelles pour la même question.

À retenir Il n’y a pas de mauvaise échelle, mais il faut en connaître les conséquences ; et garder la même du début à la fin.

Une question, combien de variables ?

Une question à choix multiples.

À retenir Un QCM devient autant de variables oui / non que de cases.

Quelles modalités pour le genre ?

Une question, deux jeux de modalités.

À retenir Deux formulations, deux jeux d’avantages : choisissez selon votre population, pas selon une opinion.

Quatre modalités, ou cinq ?

Trois échelles pour la même question.

À retenir Une valeur centrale sert de refuge ; une échelle déséquilibrée pousse la réponse : comptez le oui et le non.

Pour en savoir plus · 3 fiches à dérouler

Fiche 1/3Penser aux enquêtés, et aux analysesChaque formulation a deux destinataires : la personne qui répond, et l’analyse qui viendra. Les modalités du genre, par…

Chaque formulation a deux destinataires : la personne qui répond, et l’analyse qui viendra. Les modalités du genre, par exemple, ne se choisissent pas selon des opinions (principe de neutralité axiologique) mais selon la population et la question. Proposer une modalité non binaire coûte peu ; sa rareté se traite à l’analyse, en la décrivant à part, sans retirer les personnes qui l’ont choisie.

Fiche 2/3Les échellesUne valeur centrale ou non : les gens s’y réfugient facilement, et un « 5 » est difficile à interpréter. L’amplitude…
  • Une valeur centrale ou non : les gens s’y réfugient facilement, et un « 5 » est difficile à interpréter.
  • L’amplitude : 0 à 10, 1 à 10, 1 à 6 ; en théorie convertibles, en pratique on ne s’y place pas de la même façon.
  • Une seule échelle du début à la fin, si vous voulez calculer un score.
  • Une légende dans un seul sens : du début à la fin, et pas de double négation. On évite aussi ici les questions formulées à l’envers ; c’est un choix, qui simplifie la réponse et le calcul du score.

Échelle numérique de 0 à 10, ou modalités en mots (« oui, plutôt »…) : le choix vous appartient. Une échelle numérique donne plus de finesse ; des modalités en mots sont parfois plus simples pour répondre. Veillez à l’équilibre entre modalités positives et négatives.

Fiche 3/3Les pièges courantsDeux questions en une : un « et » dans la question, une modalité qui mesure deux choses. Des classes qui se chevauchent…
  • Deux questions en une : un « et » dans la question, une modalité qui mesure deux choses.
  • Des classes qui se chevauchent ou laissent des trous.
  • Pas de « je ne sais pas » quand certains ne peuvent pas savoir.
  • Un « autre » fourre-tout, souvent le signe de modalités incomplètes.
  • Un QCM sans nécessité : chaque case devient une variable à part.

Pour évaluer des connaissances, préférez de vraies questions avec de bonnes réponses à une auto-évaluation (« estimez votre niveau de 1 à 5 »), très biaisée.

5 min · 1 démonstration · 1 exercice · 3 fiches · 1 ressource

Moins de dix minutes au prétest chronométré, environ 70 variables comme repère de pratique, des sections par thème, des filtres qui marchent, et les questions qui comptent placées là où l’on répond encore.

Voir

Qui répondra à la dernière question ?

Un questionnaire en entonnoir.

À retenir Des répondants s’arrêtent en route : les questions principales viennent tôt, et l’on décide dès le départ d’analyser les questionnaires inachevés.

OutilL’outil

Le fil du questionnaire

Chaque question sert un objectif ; chaque objectif dit comment on saura qu’il est atteint.

Pour en savoir plus · 3 fiches à dérouler

Fiche 1/3La tailleTrop long, les répondants abandonnent ; c’est souvent le symptôme d’un projet mal cadré. Comptez, comme repère de…

Trop long, les répondants abandonnent ; c’est souvent le symptôme d’un projet mal cadré. Comptez, comme repère de pratique, 70 variables au plus ; ce n’est pas une norme méthodologique. Ce qui tranche est la durée, à viser sous dix minutes, chronométrée au prétest par une personne « naïve ». Les questions ouvertes, les classements et les choix contraints prennent plus de temps.

Fiche 2/3L’ordre et la formedes questions générales pour entrer en douceur, puis les principales, puis les secondaires. À condition d’avoir décidé…
  • L’entonnoir : des questions générales pour entrer en douceur, puis les principales, puis les secondaires. À condition d’avoir décidé dès le départ d’analyser aussi les questionnaires inachevés, question par question, en donnant pour chaque résultat le nombre de personnes qui ont répondu.
  • Les critères d’inclusion en tête, pour filtrer.
  • Une section par construit : accès aux soins, qualité de vie, satisfaction.
  • Des filtres, vérifiés, pour que chacun ne réponde qu’à ce qui le concerne ; sinon, une modalité « je ne suis pas concerné ».
  • Des questions obligatoires avec modération : trop, c’est l’abandon.
Fiche 3/3Les questions à ne pas poserDirectement identifiantes nom, prénom, adresse électronique, téléphone. Indirectement identifiantes code postal…
  • Directement identifiantesnom, prénom, adresse électronique, téléphone.
  • Indirectement identifiantescode postal, commune, date de naissance complète, surtout combinés à l’âge ou au sexe.
  • Sensiblesla santé, l’orientation ou la vie sexuelle, l’origine ethnique, les opinions politiques, les convictions religieuses, l’appartenance syndicale. Hors la santé, souvent objet de l’enquête, on ne les recueille que si l’étude le justifie ; les opinions religieuses sortent du cadre de la MR-004, et une autorisation de la CNIL peut être nécessaire.

Préférez des tranches et des catégories générales, et ajoutez « je ne souhaite pas répondre » aux questions délicates. Le modèle de questionnaire de la boîte propose des variables sociodémographiques standard, dont la PCS et le niveau d’études, avec cette option.

8 min · 4 exercices

Quatre exercices : reconnaître la nature d’une variable, réparer des questions, savoir ce qu’on peut demander, et mettre un questionnaire au régime.

Quelle nature ?

Sept questions.

La réparation

Cinq questions, peut-être fautives. Réparez chacune avec le bon outil ; le mauvais outil est refusé, et dit pourquoi.

Peut-on la poser ?

Sept questions pour une enquête sans nom ni adresse.

Le questionnaire au régime

Onze questions pour deux objectifs : rangez chacune sous l’objectif qu’elle sert. Les autres partent à la corbeille.

La bibliothèque du module

Les références du module

6 références réunies pour ce module, des sources des démonstrations aux lectures conseillées. Chaque dos du rayon mène à sa fiche, et un clic copie la référence, prête à coller dans votre bibliographie.

  1. OUV TOU 2000Ouvrage

    Tourangeau R., Rips L. J., Rasinski K.

    The psychology of survey response

    Cambridge University Press

    DOI ↗
  2. ART NAÏ 2023Article

    Naïditch N., Hehn C., Ounajim A., Fagherazzi G., Gasch-Illescas A., Braithwaite B., Thébaut J.-F.

    « PRODIAB: perspectives on the use of patient-reported outcome measures among diabetic patients »

    Diabetes Epidemiology and Management, 9, 100128

    DOI ↗
  3. ART ROU 2022Article

    Roussel C. et al.

    « Place of patient-reported outcomes & experiences measurements (PROMS/PREMS) in the assessment and pricing of health technologies in France »

    Thérapie, 77, 103-115

    DOI ↗
  4. ART STE 1946Article

    Stevens S. S.

    « On the theory of scales of measurement »

    Science, 103(2684), 677-680

    DOI ↗
  5. ART TSA 2017Article

    Tsang S., Royse C. F., Terkawi A. S.

    « Guidelines for developing, translating, and validating a questionnaire in perioperative and pain medicine »

    Saudi Journal of Anaesthesia, 11(Suppl 1), S80-S89

    DOI ↗
  6. ART VAN 2013Article

    van der Heide I. et al.

    « The relationship between health, education, and health literacy: results from the Dutch Adult Literacy and Life Skills Survey »

    Journal of Health Communication, 18(Suppl 1), 172-184

    DOI ↗

Des questions qui viennent des personnes concernées ? Des entretiens d’abord, le questionnaire ensuite ▸ ou faire relire votre questionnaire ▸