Category Archives: Non classé

Félicitations à Franck Silvestre !!

Franck Silvestre, membre de l’équipe TALENT, a soutenu le 5 avril 2024 son habilitation à diriger des recherches (HDR) intitulée Évaluation formative et génération de feedbacks soutenues par la technologie.

Félicitations à lui !!!!!!!!

Le jury était composé de :

Rapporteurs

  • Philippe Dessus, Professeur, Université Grenoble Alpes
  • Sébastien George, Professeur, Le Mans Université
  • Élise Lavoué, Professeure, Université Jean-Moulin Lyon 3

Examinateurs

  • Frédéric Amblard, Professeur, Université Toulouse Capitole
  • Grégoire Borst, Professeur, Université Paris Cité
  • Julien Broisin, Maître de conférences HDR, Université Toulouse 3 Paul Sabatier

Soutenance HDR Franck Silvestre

C’est un immense plaisir de pouvoir communiquer les informations relatives à la soutenance pour l’obtention de mon Habilitation à Diriger les Recherches.

Titre

Évaluation formative et génération de feedbacks soutenues par la technologie

Date et Lieu

Le 5 avril 2024 à 8H30 à l’Université Toulouse Capitole en salle MI 107 à la Manufacture des Tabacs.

Accès à distance

Il sera possible de suivre la soutenance à distance via le lien suivant : https://youtube.com/live/Pu8qyRZC7x4?feature=share

Résumé

J’effectue mes travaux de recherche au sein de l’Institut de Recherche en Informatique de Toulouse. Ces travaux s’inscrivent dans le champ large des recherches en Ingénierie des Environnements Informatiques pour l’Apprentissage Humain (IEIAH). Je m’intéresse depuis ma thèse débutée en 2012 à la manière dont la technologie peut venir en soutien de l’évaluation formative mise en œuvre en classe ou hors classe.

Les recherches sur les situations en classe ont conduit à des contributions portant sur les processus d’évaluation formative mobilisables en face-à-face (processus en N phases, processus à 2 votes) ainsi que dans la conception de systèmes interactifs facilitant la mise en œuvre de séquences pédagogiques mobilisant de tels processus (Tsaap-Notes, Elaastic). Ces recherches ont été réalisées dans le cadre de deux thèses~: la mienne et celle de Rialy Andriamiseza, soutenue en 2022, que j’ai codirigée avec Julien Broisin.

Les recherches sur les situations hors classe ont débuté dans le cadre de ma thèse. Ces travaux ont conduit à des contributions sur la génération automatique de feedbacks pour les tests autocorrectifs. Ils se poursuivent aujourd’hui dans le cadre de la thèse de Denis Ollivier codirigée avec Julien Broisin et coencadrée avec Jean-Baptiste Raclet. Ces travaux en cours portent sur l’ingénierie des systèmes interactifs soutenant les activités de révisions des apprenants.

L’intersection de mes recherches avec la psychologie, les neurosciences et les sciences de l’éducation m’ont mené à une relecture des travaux réalisés ces 10 dernières années. Cette relecture m’a permis de formuler une nouvelle situation prototypique pour les recherches en IEIAH. Celle-ci est fondée sur l’étude des systèmes technologiques soutenant (respectivement limitant) les états cognitifs et émotionnels favorables (respectivement défavorables) à l’apprentissage humain. C’est dans ce cadre que sont formulés les axes du projet de recherche présenté dans le mémoire. Les problématiques abordées concernent l’adaptation des processus d’évaluation formative et la génération, par des agents humains ou artificiels, de feedback textuel personnalisé.

Mots clés Évaluation formative, feedback, systèmes interactifs, learning analytics, design-based research, méthodes mixtes, système 1 et système 2, évaluations par les pairs, intelligences artificielles génératives.

Abstract

My research work takes place at the Institut de Recherche en Informatique de Toulouse. This work falls within the broad field of research in Technology-Enhanced Learning (TEL). Since starting my thesis in 2012, I’ve been interested in how technology can support formative assessment in and out of the classroom.

Research on classroom situations has led to contributions on formative assessment processes that can be mobilized face-to-face (N-phase process, 2-votes-based process), as well as in the design of interactive systems facilitating the implementation of pedagogical sequences mobilizing such processes (Tsaap-Notes, Elaastic). This research was carried out as part of two PhD thesis~: my own and that of Rialy Andriamiseza, defended in 2022, which I co-directed with Julien Broisin.

Research on out-of-class situations began as part of my PhD thesis. This work led to contributions on the automatic generation of feedback for self-correcting tests. It continues today in the context of Denis Ollivier’s thesis, co-directed with Julien Broisin and co-supervised with Jean-Baptiste Raclet. This ongoing work focuses on the engineering of interactive systems to support learners’ revision activities.

The intersection of my research with psychology, neuroscience and educational science has led me to reconsider the work carried out over the last 10 years. This review has guided the formulation of a new prototypical situation for TEL research. This is based on the study of technological systems supporting (respectively limiting) cognitive and emotional states favorable (respectively unfavorable) to human learning. It is within this framework that the main lines of the research project presented in this document are formulated. The mentioned issues concern the adaptation of formative evaluation processes and the generation, by human or artificial agents, of personalized textual feedback.

Keywords Formative assessment, feedback, interactive systems, learning analytics, design-based research, mixed methods, system 1 and system 2, peer evaluations, generative artificial intelligence.

Membres du jury

Rapporteurs :

  • Philippe Dessus, Professeur, Université Grenoble Alpes
  • Sébastien George, Professeur, Le Mans Université
  • Élise Lavoué, Professeure, Université Jean-Moulin Lyon 3

Examinateurs :

  • Frédéric Amblard, Professeur, Université Toulouse Capitole
  • Grégoire Borst, Professeur, Université Paris Cité
  • Julien Broisin, Maître de conférences HDR, Université Toulouse 3 Paul Sabatier

Réunion pour le projet LAFE

Cette semaine, l’équipe TALENT a eu le plaisir de recevoir Elaine Teixeira et Rafael Ferreira Mello à Toulouse pour la deuxième réunion de LAFE (Learning Analytics solutions to support On time Feedback). Leur venue a également été l’occasion pour eux de présenter leurs travaux au cours d’un séminaire en deux parties : « Unplugged Learning Analytics in Education to Promote Inclusion in Global South » (Rafael) et « Learning Analytics in Introductory Programming » (Elaine).

Le projet LAFE vise à favoriser la mobilité entre le Brésil, la France et le Chili. Au cours de cette réunion, nous avons eu l’occasion de discuter des différents outils que nous développons et nous avons organisé les prochaines étapes de la collaboration. Le site web du projet est en cours de préparation.

Publication du livre Apprendre à apprendre

Jean-François Parmentier est co-auteur du livre Apprendre à apprendre, publié aux éditions Dunod et qui paraîtra en juin 2023. Il a en particulier travaillé sur le chapitre « Interagir : l’apprentissage à plusieurs ».

Résumé :

Apprendre à apprendre est la compétence du XXIe siècle pour s’adapter dans un monde en transition. Dans une société qui ne cesse d’évoluer, où nos métiers se réinventent et se transforment, notre capacité d’adaptation est plus que jamais une nécessité. Développer de nouvelles compétences, être innovant dans ses pratiques, gagner en expertise ou encore se reconvertir sont des enjeux primordiaux. Et tous impliquent le même processus  : apprendre.

Tout changement, qu’il soit sociétal, environnemental, organisationnel ou technologique, invite à de nouveaux apprentissages. Dans la peau de professionnels, explorez à travers ce livre six facettes essentielles de l’apprentissage (la motivation, l’organisation, l’attention, les stratégies d’apprentissage individuelles et collectives ainsi que la métacognition) et levez le voile sur les blocages liés à notre façon d’apprendre pour entrer dans une dynamique d’amélioration continue afin d’apprendre à apprendre.

Intervention de Franck Silvestre pour la conférence de consensus du CNESCO

La 7e conférence de consensus du CNESCO sur l’évaluation en classe au service de l’apprentissage des élèves s’est tenue les 23 et 24 novembre 2022 au Conservatoire national des Arts et Métiers (CNAM).

Franck Silvestre a participé à cette conférence avec son intervention « Comment le numérique peut-il aider les enseignants à mettre en œuvre des évaluations formatives ? ».

Rialy Andriamiseza a soutenu sa thèse

Rialy Andriamiseza a soutenu avec succès sa thèse « Recommandations fondées sur les Learning Analytics pour les pratiques d’évaluation formative assistée par la technologie » le vendredi 25 novembre 2022, devant le jury composé de Sebastien George, Elise Lavoué, Vanda Luengo, Philippe Dessus, Franck Silvestre et Julien Broisin.

Félicitations à lui !

Résumé : L’évaluation formative est un levier pour améliorer l’apprentissage et l’enseignement. La fourniture de feedback aux étudiants et aux enseignants dans le but d’atteindre les objectifs d’apprentissage est au cœur de tout processus d’évaluation formative. Dans les contextes d’enseignement de masse, des systèmes technologiques sont apparus pour soutenir la mise en œuvre de processus d’évaluation formative. Ces systèmes génèrent des données qui peuvent servir de base pour améliorer ces processus et les services qu’ils offrent. Par conséquent, nous adressons les questions de recherche suivantes : Quelles informations utiles peut-on obtenir à partir de l’analyse d’un jeu de données collecté via l’utilisation en contexte réel d’un système d’évaluation formative ? Comment peut-on exploiter ces informations pour aider les enseignants à orchestrer leurs séquences d’évaluation formative ? À partir de la littérature et d’un jeu de données collecté via l’usage d’un système d’évaluation formative nommé Elaastic, nous mobilisons les learning analytics pour apporter des connaissances sur les pratiques d’évaluation formative. Ces connaissances nous ont permis de concevoir (i) des recommandations pour les concepteurs de systèmes d’évaluation formative (ii) des recommandations pour les enseignants qui orchestrent des séquences d’évaluation formative (iii) un modèle d’orchestration conçu pour aider les enseignants à prendre des décisions tout au long de la séquence. Par la suite, Nous testons ce modèle d’orchestration en l’implantant dans Elaastic par le moyen de recommandations explicables et en collectant des données de son utilisation. L’analyse de ces données montre (1) que les enseignants ne suivent pas les recommandations et (2) que si ces recommandations avaient été suivies, les séquences auraient été significativement plus bénéfiques pour les apprenants. Les travaux futurs proposent des améliorations et extensions possibles de ce modèle d’orchestration.

Réunion du projet européen PROF-XXI

Les 12 et 13 septembre 2022, TALENT a eu l’honneur d’accueillir la réunion du projet européen PROF-XXI. Des visiteurs du Guatemala, de Colombie, d’Espagne et du Portugal ont participé à l’événement.

Dans le cadre de cet événement, nous avons organisé une session ouverte pour discuter des expériences et des politiques de promotion de l’éducation hybride. Nous avons compté, dans ce cas, avec la participation d’António Teixeira (Universidade Aberta de Portugal) comme keynote, des participants du projet pour présenter leurs expériences en Amérique latine et une autre table ronde avec des experts de la France. Vous trouverez ici les noms des participants et leurs affiliations.  

L’événement a été un succès, avec plus de 40 personnes présentes.

Participants Table ronde Expériences en Amérique Latine : 

  • Mario Solarte, Asociado Universidad del Cauca, Colombia ;
  • Carlos Delgado Kloos, Catedrático Universidad Carlos III de Madrid, España ;
  • Miguel Morales, Director del Área de Educación Digital, Universidad Galileo, Guatemala,
  • Olga Lucía Saavedra Villega, Directora CEA USB ;
  • JORGE MALDONADO MAHAUAD, Director CEA Universidad de Cuenca.

Participants Table Ronde Experiences en France:

  • Claude Maranges, Directeur du Département Formation et Vie Etudiante, Université Fédérale Toulouse Midi Pyrénées (claude.maranges@univ-toulouse.fr) ;
  • Alain Bérard, Directeur adjoint du C2IP – Centre d’Innovation et d’Ingénierie Pédagogiques de l’INSA Toulouse (alain.berard@insa-toulouse.fr) ;
  • Patrice Terrier, Vice-président délégué au développement des usages du numérique et des systèmes d’information Université Toulouse II – Jean Jaurès (patrice.terrier@univ-tlse2.fr) ;
  • Sylvain Crémoux, Chargé de mission Développement et évaluation des formations et des enseignements (sylvain.cremoux@cnrs.fr) ;
  • Elodie Guillon, Cheffe de projet THE Campus – Hybridation des formations, Université de Toulouse.

Vous pouvez consulter les principaux résultats obtenus dans le cadre du projet sur le site web du projet.