Vers un accompagnement docimologique
instrumenté à l’aide la plateforme e-C&QCST
pour les enseignants de l’Université de Liège qui pratiquent le testing standardisé
Vinciane Crahay, Jean-Luc Gilles
v.crahay@ulg.ac.be
VI. Perspectives
Mise en place du dispositif dans le cadre de la session de juin
Vers une communauté de praticiens et d’utilisateurs e-C&QCST
II. Questions de recherche
Comment accompagner les enseignants à l’utilisation de la
plateforme e-C&QCST ?
Quel intérêt pour les enseignants à utiliser la plateforme ?
V. Construction du dispositif
d’accompagnement de formation
différencié basé sur des profils d’utilisateur
I. Contexte
e-CQCST : un outil en ligne pour construire et gérer les évaluations standardisées (Gilles & al, 2004, 2005, 2007)
2. Design Modalities of the Questions (MQ), importance of each MQ (CP x MQ) (PE x CP x MQ) selection 1. Analysis Points to evaluate (PE), Priorities (P), Categories of Performances (CP) Specification table (PE x CP) 3. Questions Selection or writing of the questions which are linked to the trinomials selected Item bank
4. Training …on the modalities of the
questions defined Blank tests (paper or
web based) 5. Testing The standardized test is proposed Online exams, paper tests linked
with OMR 7. Feedback
Personalized and tailored feedbacks are proposed on the basis of final version of the results online access FB
6. Correction Set up of the correction of the test
Quality check and discussion of the results before the final version 8.Regulation
analysis of the opi-nions of the people who
intervened in the test Advices for the
next test 2. Design Modalities of the Questions (MQ), importance of each MQ (CP x MQ) (PE x CP x MQ) selection 2. Design Modalities of the Questions (MQ), importance of each MQ (CP x MQ) (PE x CP x MQ) selection 1. Analysis Points to evaluate (PE), Priorities (P), Categories of Performances (CP) Specification table (PE x CP) 1. Analysis Points to evaluate (PE), Priorities (P), Categories of Performances (CP) Specification table (PE x CP) 3. Questions Selection or writing of the questions which are linked to the trinomials selected Item bank
4. Training …on the modalities of the
questions defined Blank tests (paper or
web based) 5. Testing The standardized test is proposed Online exams, paper tests linked
with OMR 7. Feedback
Personalized and tailored feedbacks are proposed on the basis of final version of the results online access FB
6. Correction Set up of the correction of the test
Quality check and discussion of the results before the final version 6. Correction
Set up of the correction of the test
Quality check and discussion of the results before the final version 8.Regulation
analysis of the opi-nions of the people who
intervened in the test Advices for the
next test
Le Cycle de Gestion Qualité des Tests
Standardisés (CGQTS)
La plateforme accessible via internet “electronic Construction & Quality
Control in Standardized Testing”
(e-C&QCST)
III. Hypothèses des avantages et freins
Un investissement au départ Un gain de temps par la suiteErgonomie perfectible
Plateforme toujours en développement
Actuellement, pas d’autres modalités de questionnement que VF ou QCM Répond à la majorité des demandes
Impossible d’importer des questions, questions à encoder manuellement Fonctionnalité à compléter
Processus en huit étapes Importance de l’accompagnement
Concepts complexes : r.bis classiques et spectraux, table de spécification,… Importance de l’accompagnement
Autonomie de son évaluation Centralisation des données Critères de qualité Démarche structurée Répartition/gestion des tâches Table de spécification Validité Banques de questions Validation des questions
Préparation des étudiants à la matière et au dispositif d’évaluation Monitoring d’utilisation des tests Passation électronique/papier Impression du questionnaire avec mise
en forme automatique
Correction (résultats et statistiques) Plusieurs versions de correction Gestion des feedbacks pour les
étudiants
Freins et Pistes de solutions Avantages
IV. Identification des profils d’utilisateur
Besoins
Sensibilité aux
freins
QUESTIONNAIRE
Objectif: - Évaluation certificative - Évaluation formative - Évaluation formative + certificative- Avec ou sans feedbacks SEANCE OPTIONNELLE
Formation technique sur l’outil informatique
RÔLE EN TANT QU’ACCOMPAGNATEUR:
Faire prendre conscience des possibilités inexploitées de la plateforme Contact: - Personnalisé En groupe en fonction -des besoins En ligne Acteurs: - Une équipe (enseignants, assistants) - Un enseignant - Un enseignant et une secrétaire
ACCOMPAGNEMENT pour construire une évaluation de qualité SEANCE COMMUNE
