À l'aide des dernières fonctionnalités d'IA de Wonda, les étudiants de Harvard ont créé leurs propres personnages IA d'un jeu mystère pour leur cours d'apprentissage des langues, suscitant ainsi l'engagement et améliorant leurs compétences linguistiques.
L'apprentissage d'une nouvelle langue demande beaucoup de pratique et des interactions réelles.
Et si vous pouviez utiliser l'IA pour vous aider ? C'est exactement ce que Nicole Mills, membre du corps professoral de Harvard, a décidé de faire lors d'un cours de langue pour débutants à l'université de Harvard avec Wonda.
L'expérience était un exercice de simulation unique en son genre, dans laquelle 50 étudiants ont été invités à participer à leur propre enquête sur un meurtre mystérieux en utilisant l'IA dans le cadre de leur cours de français.
Avec Les dernières fonctionnalités d'IA de Wonda, les étudiants ont pu créer des personnages et participer à une enquête sur un meurtre et un mystère en seulement deux séances de 75 minutes en classe et mettre en pratique leurs compétences en matière de prononciation, d'écriture et de conversation dans un environnement virtuel très engageant et culturellement immersif.
Pour commencer, voici une présentation de 6 minutes de ce que les élèves ont réussi à créer et de la manière dont ils ont pu interagir avec leurs propres personnages IA en classe.
L'expérience s'inscrivait dans le cadre d'un cours de langue pour débutants où les étudiants participent à une simulation globale de la vie à Paris. Les élèves créent des personnages francophones fictifs qui vivent virtuellement dans le même bâtiment à Paris et créent un scénario collectif en écrivant des mémoires du point de vue de leur personnage.
À la fin du semestre, lors d'une unité sur les beaux-arts à Paris, ils apprennent que l'un des personnages a été assassiné lors d'un meurtre surréaliste scène au Centre Pompidou, l'un des musées d'art moderne les plus connus de la ville.
Les années précédentes, les étudiants soumettaient une composition de 250 mots en français décrivant leur alibi, leurs suspects potentiels et leurs réflexions sur les auteurs de ce crime surréaliste, avant de participer à un « procès » en classe au cours duquel ils ont interrogé les personnages pour dévoiler le voisin coupable.
Mais cette année, Nicole a voulu faire les choses différemment en utilisant l'IA dans le cadre de Wonda Summer 2023.
À l'aide des dernières fonctionnalités d'IA de Wonda, les élèves ont pu créer leurs propres avatars animés 3D personnalisés pour représenter leur personnage de fiction.
En quelques clics, ils ont créé le propre avatar de leur personnage en choisissant parmi une grande variété de traits du visage, de coiffures et de vêtements à l'aide de ReadyPlayerMe et Wonda.
L'opération a été réalisée en seulement 10 minutes. À l'aide d'un simple copier-coller, les élèves ont ajouté l'avatar à l'environnement virtuel prédéfini créé par Rev (e) studio. Dans ce cas, l'environnement virtuel était un espace de galerie du musée du Centre Pompidou, dont les murs étaient ornés de multiples adaptations de l'œuvre surréaliste « Querelle des Universaux » de Magritte et de vues de fenêtres de Paris (toutes créées à l'aide d'outils d'IA !).
Pour alimenter chaque avatar avec des histoires sur le personnage, chaque élève a placé ses compositions et ses écrits issus d'activités en classe, notamment ses autoportraits, ses alibis et ses questions concernant le mystère du meurtre, dans une invite destinée à son personnage IA à l'aide d'un simple copier-coller.
Les élèves pouvaient également choisir une voix pour leur personnage à partir de plusieurs options. Après une discussion initiale en classe, les étudiants ont ensuite voté pour désigner les deux suspects les plus coupables.
La deuxième séance en classe était consacrée à l'interrogatoire. Tous les étudiants étaient réunis dans une salle devant un grand écran et le professeur a lancé l'expérience immersive depuis son ordinateur.
Une fois lancé, les étudiants ont pu voir tous leurs personnages dans l'espace virtuel de la galerie, en portant une attention particulière aux deux suspects coupables, aux principaux éléments de preuve et à la victime.
Après avoir orienté les étudiants vers l'espace de la galerie, chaque élève a pu voir son propre personnage prendre vie. Chaque élève a eu l'occasion de poser une question personnalisée à son propre personnage et d'attendre impatiemment de voir comment son personnage pourrait réagir !
Après la présentation des personnages, l'interrogatoire des deux suspects coupables a commencé.
Les étudiants ont été invités à préparer soigneusement leurs questions en utilisant des structures grammaticales ciblées et en pratiquant leur prononciation pour s'assurer que leurs questions soient comprises par leurs caractères. En cliquant simplement sur un personnage et en appuyant sur l'icône du microphone, les questions des étudiants étaient enregistrées.
La réponse a été transcrite automatiquement par un modèle Speech AI et communiquée à ChatGPT, qui a généré une réponse basée sur les instructions écrites précédemment publiées par les étudiants pour leurs personnages.
La réponse de chaque personnage a d'abord été affichée dans une boîte de discussion écrite, puis instantanément générée sous forme de réponse vocale. en utilisant la voix sélectionnée par l'élève pour son personnage. Après de multiples questions-réponses avec les suspects, les étudiants ont ensuite voté pour choisir le coupable avant d'entendre la vérité du point de vue du fantôme de la victime, qui s'anime comme par magie à la fin !
Les résultats ont été remarquables en termes d'engagement. Les élèves ont exprimé des émotions et des réactions fortes au cours de l'interrogatoire, notamment en riant en groupe devant les réponses surprenantes et inattendues des personnages.
« Nous pourrions commencer plus tôt dans le semestre ! »
Étudiant de premier cycle à
Interrogés sur leur expérience en classe à la fin des deux sessions, les étudiants se sont montrés extrêmement positifs, avec 100 % d'entre eux ont déclaré qu'il s'agissait d'une expérience très intéressante, citant des indicateurs solides d'engagement comportemental, cognitif, social et émotionnel.
Surtout, le fait que l'IA ne comprenait parfois pas leurs questions en raison d'une mauvaise prononciation a fortement incité les étudiants à redoubler d'efforts pour travailler leur prononciation.
Dans l'ensemble, le projet a intégré une attention à la précision grammaticale, à la compréhension des textes écrits et audio et aux compétences rédactionnelles dans un contexte simulé mais culturellement ancré.
Pour une présentation approfondie du projet, voici le webinaire de 75 minutes enregistré au Harvard Language Center avec Nicole Mills :
À mesure que les capacités d'intelligence artificielle s'étendent et se développent, la recherche pédagogique préconise une « augmentation de l'intelligence » afin que les professeurs puissent collaborer efficacement avec l'IA pour développer leurs compétences en matière de créativité, de communication, de collaboration et de pensée critique.
« La façon dont Wonda a intégré l'IA générative pour simuler des conversations constitue une étape importante pour l'apprentissage par l'expérience » Chris Dede, chercheur principal à la Harvard Graduate School of Education
Dans cette optique, des applications pédagogiques innovantes de l'IA dans l'enseignement des langues et des cultures peuvent proposer aux professeurs de langues des modèles permettant de différencier l'enseignement et, en fin de compte, de préparer les apprenants de langues au monde de demain.
Suite à ce projet, Wonda a lancé un Programme pilote d'IA à l'été 2023, à laquelle 7 institutions ont participé pour explorer plus avant les applications possibles de ses nouvelles capacités en matière d'apprentissage des langues, mais également dans d'autres domaines tels que :
« Chat GPT est en soi un outil extraordinaire, mais associé à Wonda, il suscite l'imagination quant à ce que l'on peut faire avec l'IA »
Anoop Bal, concepteur de produits chez Rev (e) Studio
