TestWe imagine le futur des examens avec l’IA
Quand l’IA générative s’est présentée, les équipes de TestWe ont immédiatement décidé de lancer des projets. Plusieurs prototypes ont été créés. Présentation des premiers retours d’enseignants utilisateurs de l’IA avec TestWe.
Du bon usage de l’IA dans l’éducation et la formation
Quand ChatGPT est devenu accessible au grand public, les équipes pédagogiques ont noté la présence de réponses « GPT » dans les devoirs. Le premier réflexe du monde de l’éducation a été de trouver un moyen d’éviter cette nouvelle forme de « triche ». Nous avions fait un article sur ce sujet.
En tant que start-up innovante, nous ne pouvions pas passer à côté de cette évolution du traitement de données donc de la connaissance. Les premières réflexions de nos équipes ont porté sur la nature de l’usage. Comment les professeurs pourraient se servir d’un outil avec de l’IA générative. Rapidement, l’allégement de tâches répétitives et fastidieuses, sans valeur ajoutée pour les équipes pédagogiques est apparu comme une aubaine. Avec la volonté de laisser en permanence les derniers mot et décision au professeur ou responsable pédagogique. Il n’est évidemment pas question que « la machine » soit en autonomie sur un examen ou une certification.
Réinventer l’intégralité du processus des examens en ligne
Création de l’examen avec l’IA
La première piste de recherche a été la création des examens en ligne. Une des étapes les plus chronophages quelle que soit la plateforme. La réalisation de QCM notamment, un format qui est particulièrement adapté aux épreuves à distance. La possibilité de générer des modules avec des réponses libres et argumentées a été aussi prototypée.
Notation et commentaires
Avec le développement des épreuves à distance, sans limitation de nombre de candidats et de lieux, le volume des « copies » à corriger a fortement augmenté. Le temps de correction lui, n’a pas été allongé. Les témoignages d’enseignants en difficulté en période de partiels ou de sélection de candidats se multiplient. Et souvent c’est le temps du « commentaire » qui est sacrifié.
Deux prototypes testés : « en termes de gain de temps, c’est énorme ! »
Les retours d’expérience sur une version Alpha de plusieurs professeurs d’écoles de commerce mais aussi d’ingénieurs sont unanimes : le gain de temps est impressionnant.
La création de questions : gain de temps et pertinence
Créer un QCM d’une vingtaine de questions peut nécessiter une demi-journée. Avec le prototype de TestWe, les alpha testeurs ont obtenu des contenus pertinents en 3 minutes. Il ne leur restait plus qu’à peaufiner cette matière première de l’IA pour, une heure plus tard mettre l’examen à disposition des élèves. « J’ai été bluffé » dit un professeur expérimenté.
Ils ont aussi apprécié la possibilité de proposer à l’outil des sources différentes pour générer les questions. Il est ainsi possible de donner une thématique générale ou un document plus long comme un dossier journalistique, une étude, une thèse ou bien encore un ancien QCM.
Corrections et commentaires : impressionnant !
La méthodologie de ce test était simple : les copies des élèves sont analysées l’IA qui donne une note et une série de commentaires. Le professeur de son côté fait le même travail. Les deux notes sont comparées et les commentaires analysés par l’enseignant. Le résultat est surprenant : les notes sont très proches et surtout les commentaires sont pertinents. Et même plus, ils ont le mérite d’exister. Comme l’avoue un professeur : “pour fournir autant de commentaires, nous en aurions pour des mois. Là où l’IA TestWe a mis 3 minutes”.
Et après le test ?
Pour Cédric de Jacquelot, CTO de TestWe : « nous avions déjà été assez bluffés par les résultats. Le retour des professeurs testeurs nous confortent. Nous devons maintenant analyser la courbe d’apprentissage de l’IA et surtout ses limites sur certains sujets. Mais clairement, l’apport de nos solutions dans une plateforme comme TestWe est validé par les principaux concernés : les enseignants ».