Séminaire d’Analyses comparatives et enquête

sociologique

5e et 6e séances : Le questionnaire

• Rappel bibliographique :

Rodolphe Ghiglione et Benjamin Matalon (1978), Les enquêtes sociologiques. Théories et pratiques, Paris, Armand Colin, Collection U

La recherche par questionnaire nécessite que :

► l’exploitation statistique de chaque question soit déjà prévue,

► tous les questionnaires soient les mêmes,► le questionnaire ne soit pas modifié durant le cours du

travail de terrain (même si on y repère de grosses erreurs),

► toutes les explications soient prévues sur le questionnaire (l’idéal est que le questionnaire n’ait à rien réexpliquer, si ce n’est relire la question) ou que les enquêteurs donnent, toujours et tous, les mêmes réexplications…

→ La formulation et la constitution du questionnaire sont donc des étapes extrêmement cruciales… (Attention au GIGO !!!)

A ne jamais oublier !!!

• Ce qui sous-tend tout ce qui vient d’être dit :

La standardisation est absolument nécessaire parce que c’est elle qui permet la comparaison.

Sans standardisation, pas de comparabilité !

• Malheureusement, il n’y a pas de méthode rigoureuse pour construire un bon questionnaire. Il n’y a pas de règles pour la construction d’un questionnaire. Au mieux, on dispose d’une « méthodologique négative », en ce sens qu’on ne peut qu’insister sur les erreurs habituelles afin d’y être particulièrement attentifs…

Il faut donc être attentif...

• … au texte des questions,• … à leur ordre,• … au choix des questions d’ouverture,• … à l’enchaînements des questions,• … à la cohérence du contenu,• … à la diversité des formes,• … au temps de l’enquête,• … à l’ennui et à l’irritation du répondant…

Différents types de questions…

• Selon le contenu

→ questions de faits

→ questions d’opinion

Selon la forme

→ questions fermées

→ questions ouvertes

Parfois, autre chose que des questions (ordonnancements, notes, catégorisations, mise en correspondance, tarte…)

Questions ouvertes ou fermées ?

• Enormément de questions ouvertes dans vos exercices…

• Pour quelles raisons les choisit-on ?→ à première vue, plus facile…(c’est oublier le codage)→ on n’a pas pu élaborer une liste des réponses à

proposer (souvent le signe que la question est mal posée, ou mal construite…)

→ éviter le caractère fastidieux des longs questionnaires fermés

→ donner l’impression au sujet qu’il est écouté vraiment→ possibilités de plusieurs codages→ éviter le cadre fixé par les questions fermées

Pourtant, on privilégiera les questions fermées…

• Elles se prêtent mieux au traitement statistique.• Simplicité des réponses et des consignes.• Elles étendent souvent le champ des possibles

(même si parfois elles le réduisent).• Tous les sujets utilisent la même nomenclature.• On obtient souvent des réponses vagues et

conformes aux questions ouvertes.• Les questions ouvertes donnent souvent lieu à

des réponses pauvres.

Parfois, on a tendance à laisser les enquêtés faire le travail du chercheur…

• Quelles sont les tâches que vous effectuez le plus souvent ?• Dans quels domaines pensez-vous que les étrangers peuvent

apporter quelque chose à la Suisse ?• Quelles solutions préconisez-vous pour que les étrangers apportent

quelque chose à la Suisse ?• Dans quelle faculté étudiez-vous ?• Dans quelle optique faites-vous des études ?• L’Université est-elle uniquement un lieu d’apprentissage ? Si non,

précisez…• Comment vous partagez-vous la tâche de la cuisine ? du ménage ?• De quelle orientation politique vous sentez-vous le plus proche ?• Connaissez-vous les associations existant au sein de votre faculté ?

Si oui, de quelle façon ?• Que représente pour vous l’armée ? Que pensez-vous de l’armée ?• Quel est votre rapport aux normes en général ?• ...

Risque des questions fermées

• Elles fixent en fait un cadre de référence.→ Elles font penser à certaines réponses « non

spontanément »- C’est un avantage :►Cela rappelle ce que certains peuvent avoir oublié.►Cela facilite les réponses non-conformes.- C’est un inconvénient :►Cela rend séduisante une réponse non envisagée.►Cela indique ce qu’on considère comme acceptable.→ Les questions fermées peuvent donc étendre ou

restreindre le champ des réponses possibles → importance capitale du choix des réponses proposées.

Quelques remarques sur les questions fermées

Plusieurs types :- Indiquer la réponse la plus adéquate.- Indiquer plusieurs réponses adéquates

(qu’importe le nombre).- Indiquer un nombre fixé de réponses adéquates.- Ordonner toutes les réponses.- Ordonner les réponses les plus adéquates.!!! Attention à ne pas demander une tâche trop

difficile à l’interviewé !!!Ne pas oublier les réponses « ne sait pas », « ne

veut pas », « autres réponses ».

La formulation des questions

• Attitude empirique : tester le plus souvent possible les questions.

• Difficultés et risques du vocabulaire « savant ».*• Termes vagues vs estimations numériques ou

échelles de fréquence.*• Définition précise d’un terme vs son usage

social variable.• Risque de considérer des présupposés comme

acquis.→ Ce qui est en jeu ici : la standardisation.

Questions de fait

• En principe, on pourrait les saisir autrement que par questionnaire.

• Facteurs de distorsion :

→ erreurs de mémoire

→ désirabilité sociale (sous-estimer le dévalorisant, surestimer le valorisant)*

• Les faits peuvent être des événements uniques ou des événements répétitifs.

Questions de fait

• Un problème fréquent : la catégorie socioprofessionnelle

→ le métier

→ le secteur

→ le statut

Problèmes spécifiques aux événements répétitifs

• période d’observation courte ou longue

• avantages et désavantages du carnet de comptes

• conséquences sur les relations entre comportements

Questions d’opinion

• Encore plus difficiles que les questions de faits (les mêmes problèmes avec, en plus, l’absence de « référent objectif »)

• Au mieux une validation interne (cohérence des différentes réponses, adéquation avec des comportements…)

• L’opinion qu’on prend comme objet existe-t-elle ? (même si le sujet répond à la question)

Distinction entre questions d’opinion et questions de fait

• Elle n’est pas toujours aussi claire…→ Dans un couple, les montants des salaires n’ont

rien à voir avec la répartition des tâches.→ Dans le tableau suivant, choisissez le sexe qui

selon vous sera plus apte à assumer ce rôle.→ Les tâches domestiques…a) …doivent être également réparties;b) … doivent être également réparties mais

incombent plus souvent à la femme;c) … sont seulement pour la femme.

Formulation des questions

• Veiller au confort du répondant.*• Veiller au sens de la réponse.*• Veiller à la qualité des items :- pas de confusion de niveaux,* - veiller à les rendre exclusifs (en tout cas, si on

ne permet qu’une réponse),*- veiller à couvrir au maximum l’étendue de la

réalité…*• Veiller à la structure logique de la question.*

Organisation des questions

• Biais de positivité

• Effet de halo*

• Equilibre entre énoncés favorables et défavorables

Approche qualitative vs approche quantitative

• Habituellement :

1. D’abord, une phase qualitative…► pour aborder un problème sur lequel on a peu d’hypothèses► pour aborder un problème dont on sait mal comment il se pose

pour la populationDeux éléments nécessaires à la construction d’un questionnaire.2. Ensuite, la phase quantitative…► Il faut savoir précisément ce que l’on cherche.► Il faut s’assurer que les questions ont un sens pour chacun.► Il faut s’assurer que tous les aspects de la question ont été

abordés. ► Un prétest du questionnaire est souvent nécessaire.

Approche qualitative vs approche quantitative

• Parfois :

La phase qualitative n’est pas nécessaire.► On sait déjà tout ce qu’il faut savoir pour réaliser le

questionnaire, càd que l’objet a déjà été bien étudié.

La phase quantitative sera suivie d’une (nouvelle) phase qualitative.

► pour interpréter des résultats inattendus.

Attention : Il ne faut bien sûr pas réduire les exploitations qualitatives à leur apport aux enquêtes par questionnaire.

Objectifs d’un questionnaire

• Quatre grands types d’objectifs :

► estimer des grandeurs absolues

► estimer des grandeurs relatives

► décrire une sous-population, une population

► vérifier des hypothèses (relations entre plusieurs variables)

1. Estimer des grandeurs absolues

1. Estimer des grandeurs absolues

1. Estimer des grandeurs absolues

2. Estimer des valeurs relatives

2. Estimer des valeurs relatives

3. Décrire une (sous-)population

4. Vérifier une hypothèse

4. Vérifier une hypothèse

4. Vérifier une hypothèse

4. Vérifier une hypothèse

4. Vérifier une hypothèse

4. Vérifier une hypothèse

La recherche par questionnaire nécessite que :

► l’exploitation statistique de chaque question soit déjà prévue,

► tous les questionnaires soient les mêmes,► le questionnaire ne soit pas modifié durant le cours du

travail de terrain (même si on y repère de grosses erreurs),

► toutes les explications soient prévues sur le questionnaire (l’idéal est que le questionnaire n’ait à rien réexpliquer, si ce n’est relire la question) ou que les enquêteurs donnent, toujours et tous, les mêmes réexplications…

→ La formulation et la constitution du questionnaire sont donc des étapes extrêmement cruciales… (Attention au GIGO !!!)

A ne jamais oublier !!!

• Ce qui sous-tend tout ce qui vient d’être dit :

La standardisation est absolument nécessaire parce que c’est elle qui permet la comparaison.

Sans standardisation, pas de comparabilité !