Ce matin encore, je suis tombé sur un questionnaire d’enquête diffusé par une doctorante. Il cumulait les défauts classiques : flou des concepts, absence d’opérationnalisation, illusion de mesure. Cela m’a incité à revenir sur quelques exigences méthodologiques de base... et à proposer une formation sur ces questions.

Un questionnaire ne révèle pas la réalité. Il la construit, souvent sans que le chercheur en ait pleinement conscience.

Un questionnaire ne recueille pas des opinions brutes ; il transforme une réalité complexe en indicateurs simplifiés.

Ce passage est une opération méthodologique lourde : sélection de certains aspects de la réalité, exclusion d’autres, traduction en langage compréhensible par le répondant.
Autrement dit, un questionnaire est toujours une réduction construite.

Par exemple, dire « mesurer la motivation » revient en réalité à choisir certains comportements (participation, effort, persévérance) et à en ignorer d’autres (émotions, trajectoire personnelle, contexte social).

Ce que tu mesures dépend donc moins des réponses… que de ce que tu as décidé de rendre mesurable.

Des questions de recherche testables

La difficulté n’est pas de poser une question mais de la rendre empiriquement testable.

Un bon critère de qualité consiste à pouvoir répondre par l’affirmative à la question : « Puis-je imaginer une réponse observable à ma question ? »

Exemple :

 

« Les étudiants sont-ils motivés ? » : il s’agit d’une question naïve. Elle suppose que la motivation est directement observable et mesurable en une seule question.

 

« Les étudiants déclarent-ils persévérer lorsqu’une tâche devient difficile ? » : ici, la question participe d’une construction méthodique. La motivation est approchée à partir d’indices déclaratifs multiples (persévérance, engagement, stratégies, etc.).

Mais il faut aller plus loin. Une question de recherche sérieuse implique une population définie, un contexte (institution, niveau, discipline) et une temporalité. Sans cela, les résultats sont ininterprétables hors contexte.

La construction des variables

C’est ici que se joue la qualité scientifique du questionnaire. Une variable doit être décomposable, observable indirectement et reconstituable à partir de plusieurs indices.

Prenons un exemple en FLE, celui de l’autonomie dans l’apprentissage. Elle peut être décomposée en plusieurs capacités : la capacité à chercher des ressources seul, à s’auto-corriger et à organiser son apprentissage.

Chaque dimension est observable, mais indirectement, à travers plusieurs indices. C’est pourquoi la mesure de l’autonomie se fera à travers les réponses à plusieurs items.

Pourquoi plusieurs items ? Parce qu’un seul item peut être mal compris, interprété différemment et/ou influencé par le contexte immédiat. La multiplication des items permet de stabiliser la mesure.

Le problème central : la validité

On insiste souvent sur la « bonne formulation ». C’est secondaire. La vraie question que tu devrais te poser est : « Est-ce que mes items mesurent bien ce que je crois mesurer ? »

Exemple classique : « J’aime travailler en groupe ». Tu crois mesurer l’esprit de collaboration. Mais tu mesures peut-être la sociabilité, l’insécurité face au travail individuel ou encore l’habitude scolaire. C’est un problème de validité de construit.

Donc, une formulation claire ne garantit rien ; seule la cohérence globale du dispositif donne du sens à ton enquête.

Le mirage des échelles

Les échelles de type Likert (le plus souvent 5 échelons exprimant chacun le degré d’accord ou de désaccord avec une assertion proposée) donnent une illusion de précision.

Mais la distance entre les échelons 1 et 2 n’est pas nécessairement la même qu’entre les échelons 4 et 5, les répondants n’utilisent pas tous l’échelle de la même manière, certains évitent systématiquement les extrêmes, etc. Résultat : des données comparables en apparence sont instables en réalité.

La bonne pratique consiste à regrouper plusieurs items, éviter les interprétations trop fines, analyser des tendances plutôt que des micro-écarts.

Les inévitables biais

Les biais ne sont pas des erreurs ponctuelles ; ils sont intrinsèques au dispositif. Il peut notamment s’agir de :

– biais de désirabilité sociale, particulièrement fort en contexte éducatif : les étudiants répondent comme de « bons étudiants » ;

– biais de compréhension : une même question simple peut être interprétée différemment selon le niveau de langue, le profil culturel ou les vécus scolaires ;

– biais d’acquiescement : les enquêtés ont parfois tendance à répondre « d’accord » par facilité ;

– biais de contexte : une question précédente peut modifier la réponse à la suivante.

Il n’est donc pas question de neutraliser ces biais, mais d’apprendre à vivre avec et à les limiter.

Ne pas négliger le pré-test

Le pré-test, trop souvent bâclé, n’est pourtant pas une simple formalité. Il sert à observer les hésitations, repérer les incompréhensions, identifier les réponses absurdes (même si elles semblent cohérentes pour le répondant). Tu devras donc chercher non pas « ce qui marche », mais bien « ce qui ne marche pas ».

La grande illusion des pourcentages

Une fois les réponses collectées, le danger s’installe.
Une erreur typique consiste à présenter des pourcentages comme des faits.

Exemple : « 72 % des étudiants se sentent motivés »

Cela ne signifie rien si aucune définition de « motivé » n’a été fournie, si la construction des items n’a pas été explicitée et si les biais potentiels ou constatés ne sont pas analysés.

Un questionnaire ne produit pas la réalité ; il produit une lecture possible de la réalité.

Le questionnaire est un outil séduisant parce qu’il donne une impression de rigueur. Mais en sciences humaines [1], la rigueur ne vient pas du chiffre ; elle vient de la construction du dispositif.

Un mauvais questionnaire produit des données propres et fausses. Un bon questionnaire produit des données imparfaites… mais interprétables.

Une formation en ligne, centrée sur les enjeux méthodologiques et les procédés de construction des questionnaires d’enquête en sciences humaines, peut être organisée sur demande.

__________

Un questionnaire ne mesure jamais directement des phénomènes comme la motivation ou l’autonomie. Il en propose une reconstruction à partir d’indices déclaratifs, eux-mêmes dépendants d’un cadre méthodologique. Cet article met en évidence les principales illusions liées aux questionnaires d’enquête et propose des repères pour en améliorer la validité. — Résumé généré par l’IA.

Écrire des questions est facile. Construire un instrument de mesure l’est beaucoup moins.
© Pexels.com — CC0