Introduction aux méthodes de recherche en administration publique Module M2

Introduction aux méthodes de recherche en administration

publique Module M2

| Diapositive 2 |

Module M2: objectifs

• Encourager les participants à poursuivre la réflexion méthodologique sur la base d’une ou plusieurs questions de recherche

• Discuter de certains problèmes méthodologiques, en particulier en relation avec la recherche qualitative

• Se familiariser avec quelques techniques d’enquête qualitative

| Diapositive 3 |

Comment choisir une méthode

• Type de question• Compétences• Audience souhaitée• Ressources disponibles• Critères d’évaluation appliqués par l’audience

recherchée

| Diapositive 4 |

Exemple: étude réalisée par Pro Infirmis, sur les trajectoires des personnes frappées par

un refus de rente AI

• 69 personnes ayant reçu un refus à une demande de rente AI

• Méthode d’échantillonnage n’est pas spécifiée (à travers des contacts avec des assistants sociaux ?)

• Résultats:– 35% sont à la charge de la famille– 39% sont à l’aide sociale– 26% travaillent à temps partiel ou ont d’autres sources de

revenu

| Diapositive 5 |

Réactions: • OFAS:   « L'OFAS réfute les résultats. … ce travail qualitatif ne

permet pas de tirer des conclusions ou, en tout cas pas de conclusions statistiques » (Le Temps, 20.04.06).

• Beat Kappeler: Le mot «qualitatif» … veut marquer la différence avec les méthodes dites quantitatives. Par la pauvreté de la démarche cependant, certaines de ces études n'ont aucun sérieux. Au mieux, elles pourraient déblayer le terrain, esquisser une étude ultérieure à faire, mais de là à en faire une branche reconnue de la science sociale, il y a un pas que je ne franchirai pas (Le Temps, 22.04.06).

| Diapositive 6 |

Pourquoi choisir des méthodes…

• … quantitatives: – Représentativité statistique– Test d’hypothèses mesurables– Recherche de corrélations

• … qualitatives:– Développement d’hypothèses– Identification de mécanismes (relation de cause à effet)– Etudes de la motivation des acteurs

| Diapositive 7 |

Exercice 1: Choisir une méthode

• Point de départ: une question de recherche• Traitement quantitatif ou qualitatif?• Comment allez vous répondre à cette question?• Quels sont vos doutes, incertitudes? Quels obstacles

voyez-vous?

| Diapositive 8 |

Le research design qualitatif

• Quatre stratégies (liste non exauhstive):– Etude de cas– Méthode comparative– Enquête par échantillonnage orienté– Triangulation

• Elle peuvent être combinées

| Diapositive 9 |

Etude de cas

• Reconstitution de manière fiable et précise d’une situation, d’une trajectoire.

• Le cas peut être: – Une personne: biographie– Une organisation: entreprise, ONG– Une unité politique: commune, canton, pays– Un processus: réforme, modernisation, déclin

• Reconstitution: complète, factuelle, suivre une structure logique (souvent chronologique)

Quinn Patton, M. (2002). Qualitative Research and evaluation methods. Thousand Oaks, Sage Publ.

| Diapositive 10 |

Méthode comparative• Comparaison de plusieurs cas (ev. études de cas).• Choix des cas à comparer guidé par les hypothèses• En principe: les cas devraient présenter toute les

combinaisons possible de variables indépendantes

• Des research design plus sophistiqués existent aussi (voir notamment les travaux de Charles Ragin)

Kriesi, H. (1994). Les Démocraties occidentales. Une approche comparée.

Paris, Economica.

Ragin, C. The Comparative Method: Moving Beyond Qualitative and

Quantitative Strategies. Berkeley. University of California Press 1987

| Diapositive 11 |

Hypothèse: Religion et degré de modernisation économique expliquent le degré d’égalité

homme-femme dans un canton• Religion: canton catholique – protestant• Degré de modernisation: canton agricole et

canton tertiaire

Pro

testa

nt

Ca

tholiq

ue

Agricole Tertiaire

GE,BS

AI, FR, VS,JU

AR, TG

TI

| Diapositive 12 |

La méthode qualitative ne permet en principe pas de tester des

hypothèse, mais:• Elle peut permettre de les élaborer• Par exemple, en identifiant quels aspects de la

religion ont un impact sur l’égalité H-F• Si les résultats sont compatibles avec l’hypothèse:

alors celle-ci est plus « robuste »

| Diapositive 13 |

Enquête par échantillonnage orienté

• Dans les enquêtes statistique: échantillonnage par tirage au sort (chaque cas a la même probabilité d’être sélectionné)

• Dans les enquête qualitative, l’échantillonnage par tirage au sort ne fait pas beaucoup de sens (pas de possibilité d’exploiter les lois des grands nombres)

• D’autre stratégies d’échantillonnage doivent être utilisées

Quinn Patton, M. (2002). Qualitative Research and evaluation methods. Thousand Oaks, Sage Publ.

| Diapositive 14 |

Stratégies d’échantillonnage orienté

• Choix de cas extrêmes, déviants: ex. enfants prodige,

criminels violents

• Choix de cas typiques: identification de plusieurs

catégories et analyse d’un ou plusieurs cas de chaque

catégorie.

• Echantillon homogène: choix de cas très similaires. Permet

l’approfondissement (ex. personnes frappés par une

maladie).

• Maximum variation sampling: maximisation de la variation

sur quelques dimensions qui semblent pertinentes par

rapport l’objet d’étude

| Diapositive 15 |

Stratégies d’échantillonnage orienté• Echantillonnage par « boule de neige ». Un premier

cas signale d’autres cas qui remplissent certaines caractéristiques. Utile pour thèmes sensibles. (ex. les sans papiers)

• Echantillonnage théorique: les cas sont sélectionnés de façon à représenter toute les combinaison possibles (ou pertinentes) de variables indépendante

• Echantillonnage dans le temps (entretiens tous les x mois)

| Diapositive 16 |

Combien de cas?

• Pas de règle fixe• Dépend de la stratégie choisie• Arbitrage entre nombre et profondeur de l’analyse• Idée de saturation: l’analyse de nouveaux cas

n’apporte plus d’informations nouvelles

| Diapositive 17 |

Essentiel pour tout échantillonnage:

• Motivation du choix. Présentation et discussion du raisonnement fait. Avantages et inconvénients, év. Par rapport à des alternatives.

• Présentation précise de la procédure. Comment avez-vous sélectionné vos cas?

• Objectif: montrer que l’échantillon n’a pas été constitué de manière arbitraire, et que des biais systématiques sont peu probables.

| Diapositive 18 |

Triangulation

• Expression reprise de jargon militaire. • Le monde social est complexe. Pour obtenir des

réponses plus fiables, il convient de croiser plusieurs points de vue.

• Les résultats sur lesquels on observe une convergence seront plus robustes

Bussman, W., U. Klöti and P. Knöpfel (1997). Einführung in die Politikevaluation. Basel, Helbing & Lichtenhahn.

Quinn Patton, M. (2002). Qualitative Research and evaluation methods. Thousand Oaks, Sage Publ.

| Diapositive 19 |

Différents types de triangulation

• Triangulation des données. Utilisation de sources différentes (indépendantes)

• Triangulation des enquêteurs• Triangulation des théories• Triangulation des méthodes

| Diapositive 20 |

Exemple de triangulation: évaluation d’un programme de

réinsertion professionnelle• Identification des mesures plus efficaces sur la base de la

littérature scientifique

• Analyse statistique des sorties du chômage en relation avec la

participation aux mesures

• Entretiens avec les responsables de la mise en œuvre du

dispositif

• Entretiens avec les bénéficiaires

• Entretiens avec les employeurs qui ont engagé des anciens

bénéficiaires

| Diapositive 21 |

Combiner plusieurs stratégies de recherche

• Les quatre stratégies présentées peuvent être combinées

• Elle devront vraisemblablement être adaptées à vos sujets

• Plus que les prescriptions au sens strict, retenir l’esprit

| Diapositive 22 |

Obtention de données en recherche qualitative

• Analyse de documents (presse, rapports officiels, lois,…).

• Perspective historique: archives• Observation participante• L’entretien

| Diapositive 23 |

Types d’entretien: questions de base

• Distinction en fonction de l’objectif: – Obtention d’informations sur un thème– Obtention de matériau empirique

• Arbitrage entre ouverture et comparabilité des réponses

• Entretien individuel ou entretien de groupe

Blanchet, A. and A. Gotman (2005). L'entretien. Paris, Armand Colin.

Quinn Patton, M. (2002). Qualitative Research and evaluation methods. Thousand Oaks, Sage Publ.

| Diapositive 24 |

Entretiens individuels

• Entretien ouvert: seul quelques thèmes sont lancés. La personne interviewée dispose d’un maximum de liberté. Peut être couplé avec des relances

• Entretien semi-directif: un certain nombre de questions (p.ex. 5 à 10) à l’intérieur desquelles l’interviewé dispose d’une certaine liberté

• L’entretien structuré: questions plus nombreuses, relativement précises. Peu de liberté.

| Diapositive 25 |

Types de question

• Expérience/comportement• Opinion, valeurs• Emotions• Connaissances• Expériences sensorielles• Caractéristiques socio-démographiques

Dimension temporelle: les questions peuvent se rapporter au présent, au passé, à l’avenir

| Diapositive 26 |

L’ordre des questions

• Pas de règle universelle• Démarrer par des questions simples, peu

chargées, factuelles• Opinions et émotions sont traitées dans un

deuxième temps• Question sociodémographiques: ennuyeuses.

Mieux pas au début. Soit à la fin, soit à plusieurs endroits.

| Diapositive 27 |

La formulation des question

• Des questions ouvertes doivent être vraiment ouvertes:– Quelle-est votre opinion sur le programme XY?– Que pensez vous du service XY?

• Plutôt que:– Pensez vous que le dispositif XY est efficace?– Etes-vous satisfait du service XY?

| Diapositive 28 |

Les questions doivent être univoques et claires

• Une question doit contenir une seule question: – Etes vous favorable au subventionnement des énergies

alternatives et à l’abandon du nucléaire?

• La formulation de la question doit être adaptée à la personne interviewé

• La compréhension de termes ou concepts peu communs doit être testée au début

| Diapositive 29 |

Les questions et l’attitude de l’intervieweur doivent être neutres

• Les questions ne doivent pas indiquer une préférence pour une réponse plutôt qu’une autre: – Que pensez-vous de l’acharnement du système fiscal suisse sur la

classe moyenne?

• Aucun jugement de valeur sur les opinions exprimées par la personne interviewé (ni positif ni négatif)

• Respect pour la personne et sa disponibilité à partager ses opinions/expériences

| Diapositive 30 |

Pas que des questions…

• Description d’une situation. La question porte sur comment agirait la personne.– Imaginons qu’on vous demande d’être candidat au Grand Conseil.

Quelle serait votre réaction?

• Vignettes avec des personnages fictifs. La question porte sur ce que devrait faire tel ou tel autre personnage.

• Utiles pour traiter de thèmes sensibles

| Diapositive 31 |

Relances

• Liste de points préparés à l’avance• Nouveau points intéressants qui émergent durant

l’entretien• Demandes d’approfondissement

– Pourquoi? – Pouvez-vous développer?

• Dernière question: souhaitez-vous ajouter quelque chose?

| Diapositive 32 |

Quel support?

• Enregistrement ou notes?– l’enregistrement permet de se concentrer sur les questions à

poser. Il garantit en plus un restitution complète de l’entretien (mais n’oubliez pas de tester le matériel)

• Retranscription complète ou synthèse?– Cela dépend si on s’intéresse à ce qui a été di ou à comment cela

a été dit

• Compromis: synthèse + citations

| Diapositive 33 |

L’entretien de groupe (focus group)+ Efficient: permet de récolter plusieurs points

de vue avec un seul entretien

+ Permet de reproduire certaines dynamiques de groupe qui existent dans la réalité

- Moins de questions peuvent être posées- Peu adapté pour des thèmes sensibles ou

controversés- Demande une certaine expertise

Duchesne, S. and F. Haegel (2005). L'entretien collectif. Paris, Armand ColinMorgan, D. and R. Krueger (2006). The focus group kit. Thousands Oaks, Sage.

| Diapositive 34 |

L’entretien de groupe (focus group)

• Le focus group est idéal lorsque: – L’objectif est l’identification de quelques thèmes plutôt que leur

approfondissement– Les participant occupent des positions similaires me ne se

connaissent pas

• Doit être bien ciblé. Le modérateur doit s’assurer que la discussion reste sur le thème

| Diapositive 35 |

Exercice 2: Préparer une grille d’entretien

• Point de départ: une question de recherche• Quel(s) type(s) d’entretien?• Quelles questions?• Quels sont vos doutes, incertitudes? Quels obstacles

voyez-vous?

| Diapositive 36 |

Techniques d’analyse de données qualitatives

• Enjeu: transformer des données en résultats• Pas de règle absolue• Point de départ: objectifs de la recherche• Identification de thèmes (anciens et nouveaux)• Analyse du contenu (aussi par ordinateur)

| Diapositive 37 |

Techniques de synthèse: classification

• Classification (taxonomie): l’ensemble des cas est divisé en catégories et sous-catégorie

• Les catégories sont mutuellement exclusives• Modèle: les sciences naturelles, p.ex. botanique ou

zoologie

| Diapositive 38 |

Techniques de synthèse: typologie

• Typologie: sur la base des information obtenues, sont

identifiés des types-idéaux, qui combinent de manière

cohérente certaines caractéristiques considérées

comme essentielles

• Les types-idéaux peuvent être vus comme des

caricatures. Il n’existent pas forcement dans la réalité.

• Les cas concrets peuvent être plus ou moins proches

de chaque type-idéal

| Diapositive 39 |

Techniques de synthèse: concepts

• Application de concepts tirés de la littérature • Les cas observés sont interprétés en fonction de

concepts élaborés sur la base de recherches précédentes.

• Des concepts nouveaux peuvent être développés également par le chercheur (exemple: pauvreté – exclusion sociale)

| Diapositive 40 |

Techniques de synthèse: séquences

• Séquences: même logique, que la typologie mais dans le temps (phases).

• Utile lorsque les unité d’analyse sont des processus ou des trajectoires

• Exemple: exclusion sociale - désaffiliation

| Diapositive 41 |

Conclusion: quelques conseils pour la suite

• Peu de prescriptions méthodologiques générales dans les méthodes qualitatives

• Application de l’intuition et du bon sens• Gardez à l’esprit les objectif fondamentaux:

– Répondre à une question– Convaincre votre audience que votre réponse est la bonne