G©n©ration semi-automatique de tests de r©visions @Tice2014

  • View
    260

  • Download
    2

Embed Size (px)

DESCRIPTION

Présentation sur la génération semi-automatique de tests de révisions recyclant les notes des étudiants à la conférence TICE 2014.

Text of G©n©ration semi-automatique de tests de r©visions @Tice2014

  • 1. Gnration semi-automatique de tests dauto-valuationpourvus de feedback rsultant de la prise de notescollaborativesFranck Silvestre, Philippe Vidal, Julien BroisinIRIT, University of Toulouse III, FranceTICE 2014Novembre 7 20141

2. Contexte de la recherche valuations informatises Tests en ligne Feedback Tsaap-Notes2 3. Le dfiFaciliter la cration de tests de rvisions en lignefournissant du feedback3 4. Le bnfice des tests en ligne Facilitent la mise en oeuvre dvaluationsformatives frquentes [17] [14] Mise disposition du feedback aux apprenants- nimporte quel instant,- depuis nimporte quel lieu,- aussi souvent quils le souhaitent [16]4 5. Les enjeux autour du feedback La qualit du feedback est une cl de succs delapprentissage [1][7][9] Le feedback rdig par lenseignant nest pastoujours compris par lapprenant [8][4] Lenseignant comme seul source du feedback nestpas soutenable [16]5 6. Limites du feedback dans les tests en ligne Saisi par lenseignant- Dans le dialecte de lenseignant- Consommateur de temps Identique pour tous lesapprenants6 7. Tsaap-Notes [18] Prise de notes collective Micro-blogging, scope etfragment Systme de vote interactif Notes prises par lestudiants sur les questionsposes en cours7 8. Lapproche notes as feedback Recycler les questions poses en cours Recycler les notes prises par les tudiants Pour gnrer des tests de rvisions avec feedbackprovenant des notes des tudiantsSemi-au t omat ic8 9. Comment ? 1/39 10. Comment ? 2/310 11. Comment ? 3/311 12. Bnfices La mise en oeuvre des tests de rvisions en ligneest facilite Feedback dans le dialecte des tudiants Valorisation des productions tudiantes Rsultats tudiants ?12 13. Premire exprimentation 54 tudiants inscrits 1re anne Master Informatique UE Dveloppement dapplications rparties avecJava EE 10 heures de cours dispenses en face face 35 prsents en moyenne13 14. Participation la prise de notesQuestions Notes147052,53517,50Sans indic. recyclage Avec indic. recyclage 15. Participation aux tests de rvisions 47 tudiants (87% des inscrits) ont particip auxtests de rvision15 16. Rsultat au test dvaluation sommative Test Moodle comptant pour 30% de la note finale 102 questions dont 82 issues des questions poses en coursMoyenne / 20 cart type161813,594,502013 2014 17. Conclusion Gnration semi-automatique de tests recyclant lesproductions des tudiants pour le feedback Premiers rsultats encourageants Besoin de protocole dexprimentation plusrigoureux17 18. Perspectives Personnalisation des tests gnrs- Comment qualifier lapprenant ?- Comment slectionner les questions pertinentes pourun apprenant donn ?- Comment slectionner les feedbacks adapts unapprenant donn ?- Quelle frquence de rvision propose ? Vers un sytme de tutorat social intelligent18 19. Merci pour votre attention ! Questions? 20. Bibliographie1. P. Black and D. Wiliam. Assessment and classroom learning. Assessment in education, 5(1) :774, 1998.2. J. Bull and C. McKenna. A blueprint for computer-assisted assessment. 2003.3. J. E. Caldwell. Clickers in the large classroom : Current research and best-practice tips. CBE-Life Sciences Education, 6(1) :920, 2007.4. K. Chanock. Comments on essays : do students understand what tutors write? 2000.5. M. Ebner, C. Lienhardt, M. Rohs, and I. Meyer. Microblogs in higher educationa chance to facilitate informal and process-orientedlearning ? Computers & Educa- tion, 55(1) :92100, 2010.6. S. A. Gauci, A. M. Dantas, D. A. Williams, and R. E. Kemm. Promoting student- centered active learning in lectures with apersonal response system. Advances in Physiology Education, 33(1) :6071, 2009.7. J.HattieandR.Jaeger.Assessmentandclassroomlearning:Adeductiveapproach. Assessment in Education, 5(1) :111122, 1998.8. R. Higgins. Be more critical : rethinking assessment feedback. DYE. V, PC4000., 2000.9. R. Higgins, P. Hartley, and A. Skelton. The conscientious consumer : reconsidering the role of assessment feedback in studentlearning. Studies in Higher Education, 27(1) :5364, 2002.10. IMS Global Learning Consortium. Ims question & test interoperability specification. http://www.imsglobal.org/question/, 2012.11. R. Junco, G. Heiberger, and E. Loken. The effect of twitter on college student engagement and grades. Journal of ComputerAssisted Learning, 27(2) :119132, 2011.12. M. Kam, J. Wang, A. Iles, E. Tse, J. Chiu, D. Glaser, O. Tarshish, and J. Canny. Livenotes : a system for cooperative andaugmented note-taking in lectures. In Proceedings of the SIGCHI conference on Human factors in computing systems, pages 531540. ACM, 2005.13. H. Kwak, C. Lee, H. Park, and S. Moon. What is twitter, a social network or a news media ? In Proceedings of the 19thinternational conference on World wide web, pages 591600. ACM, 2010.14. M. Lea. Computer conferencing and assessment : new ways of writing in higher education. Studies in Higher Education, 26(2) :163181, 2001.15. T. Miller. Formative computer-based assessment in higher education : the effec- tiveness of feedback in supporting studentlearning. Assessment & Evaluation in Higher Education, 34(2) :181192, 2009.16. D. J. Nicol and J. T. Boyle. Peer instruction versus class-wide discussion in large classes : a comparison of two interactionmethods in the wired classroom. Studies in Higher Education, 28(4) :457473, 2003.17. D. J. Nicol and D. Macfarlane-Dick. Formative assessment and self-regulated lear- ning : a model and seven principles of goodfeedback practice. Studies in higher education, 31(2) :199218, 2006.18. C. Ricketts and S. Wilks. Improving student performance through computer-based assessment : insights from recent research.Assessment & evaluation in higher education, 27(5) :475479, 2002.19. F. Silvestre, P. Vidal, and J. Broisin. Tsaap-notes an open micro-blogging tool for collaborative notetaking during face-to-facelectures. In Proceedings of the 14th IEEE International Conference on Advanced Learning Technologies. IEEE, 2014.20. M. Uhari, M. Renko, and H. Soini. Experiences of using an interactive audience response system in lectures. BMC MedicalEducation, 3(1) :12, 2003.20