Une méthodologie evidence-based pour mesurer les compétences linguistiques

Une méthodologie evidence-based pour

mesurer les compétences linguistiques

Evidence-based HRM (EB HRM)

Selor event

14/11/2013

Evidence-based approach

1. Le projet et les résultats

2. Pourquoi et comment évaluer la qualité ?

3. Quelle evidence à quel moment ?

4. Valeur ajoutée de l’approche evidence-based

1. Le projet et les résultats

Compétences réceptives Compétences productives

Spécifications et contenus

de test

Nouveaux outils

d’évaluation

Modules de formation

pour assesseurs

Tests 2.0

2. Pourquoi et comment évaluer la qualité ?

In theory there is no difference between theory and practice.

In practice there is.

Yogi Berra

expectations reality

reality theory

Sources:

-ALTE quality management checklists

-Manual for Language Test Development and Examining (ALTE on behalf of the Council of Europe)

2009

DESIGN

ADMINI-STER

PROCESS

ANALYSE & REVIEW

2012

3. Quelle evidence à quel moment ?

Analyses quantitatives

Assesseurs : enquêtes et workshops

Validation scope Choix modèle de validation

Groupes de travail :

deliverables

Expérimentations (prétesting)

Analyse du prétesting

validation de contenu &

décisions finales (scoring)

Mise en œuvre

LANCEMENT

ANALYSE &

REVIEW

analyses quantitatives

enquêtes et workshops

validation scope

modèle validation

ANALYSE &

REVIEW

CONTEXT VALIDITY

THEORY BASED VALIDITY

SCORING VALIDITY

EXTERNAL CRITERION

VALIDITY

CONSEQUENTIAL VALIDITY

RESPONSE

SCORE

Adapted from: Weir (2005) Language Testing and Validation

TEST TASKS & CONCEPT

REDESIGN

deliverables

Adapted from: R. Jakobson 1963 & ALTE 2011 individual component checklist

ADMINISTER &

PROCESS

prétesting

analyse du prétesting

validation & décisions

4. Valeur ajoutée de l’approche evidence-based

Stakeholders

Institutionnels

Services publics

Employeurs

Management Selor

Académiques

Comité scientifique

Selor

Task force linguistique

Individuels

Assesseurs

Candidats

Usagers des services publics

EVIDENCE BASED APPROACH

DANK U VOOR UW AANDACHT!

MERCI POUR VOTRE ATTENTION !