Generative AI Availability, Grades, and Student Satisfaction at a Large University
En utilisant une analyse de différences-en-différences à grande échelle portant sur plus de 138 000 étudiants, cette étude ne trouve aucune preuve que la disponibilité de l'IA générative ait disproportionnellement gonflé les notes ou réduit la satisfaction des étudiants dans les cours susceptibles d'être substitués par l'IA, tempérant ainsi les inquiétudes selon lesquelles les étudiants déchargeraient l'effort cognitif sur l'IA sans apprendre.
Article original sous licence CC BY 4.0 (http://creativecommons.org/licenses/by/4.0/). Ceci est une explication générée par l'IA de l'article ci-dessous. Elle n'a pas été rédigée ni approuvée par les auteurs. Pour une précision technique, consultez l'article original. Lire la clause de non-responsabilité complète
Imaginez un monde où un robot assistant magique et super intelligent apparaît du jour au lendemain. Ce robot peut rédiger des essais, résoudre des problèmes mathématiques et rédiger du code plus rapidement que n'importe quel humain. Soudain, une grande question surgit dans les écoles partout : si les élèves utilisent ce robot pour faire leurs devoirs, apprendront-ils réellement la matière ? Ou obtiendront-ils simplement des notes parfaites sans jamais ouvrir un manuel ? C'est le cœur d'un débat dans le monde des sciences de l'éducation. Les chercheurs tentent de déterminer si cette « aide robotique » est un outil utile qui stimule l'apprentissage, ou un « raccourci cognitif » qui permet aux étudiants de sauter l'étape difficile de la réflexion. Cela importe car les notes sont comme un signal envoyé vers le futur ; elles disent aux universités et aux employeurs ce qu'un étudiant sait. Si les notes commencent à perdre de leur valeur parce que tout le monde a utilisé le robot, tout le système de tri des étudiants pour les emplois et les carrières pourrait être déréglé.
Maintenant, zoomons sur une étude massive provenant d'une immense université du Midwest américain qui a tenté de résoudre ce mystère. Les chercheurs étaient comme des détectives cherchant un type spécifique de « tour de magie ». Ils savaient que tous les cours ne sont pas les mêmes. Certains cours sont comme un « examen à la maison » où vous pouvez travailler seul dans votre chambre avec votre ordinateur portable — ce sont les cours les plus susceptibles d'être « sensibles » à l'aide du robot. D'autres cours sont comme une « performance en direct » ou un examen à livre fermé où vous devez montrer vos compétences en temps réel devant un professeur — ceux-là sont beaucoup plus difficiles à simuler pour un robot.
L'équipe a rassemblé une montagne de données : des programmes de cours, des notes et des enquêtes auprès des étudiants pour plus de 138 000 étudiants à travers des milliers de cours, en observant les années avant et après la sortie du célèbre chatbot IA (ChatGPT) fin ète 2022. Ils ont utilisé un tour statistique astucieux appelé approche de « différences de différences ». Imaginez cela comme la comparaison de deux groupes de coureurs : un groupe courant sur une piste où ils peuvent utiliser une trottinette motorisée (les cours sensibles), et un autre groupe courant sur une piste où ils doivent courir à pied (les cours non sensibles). Ils voulaient voir si, après l'introduction des trottinettes, le groupe des trottinettes commençait soudainement à finir bien plus vite que les coureurs à pied.
Voici le rebondissement : l'étude a révélé que le groupe des trottinettes n'a pas soudainement décollé. En fait, les chercheurs ont constaté qu'il n'y avait aucune différence significative dans les notes finales entre les cours qui pouvaient facilement utiliser l'IA et ceux qui ne le pouvaient pas. Que l'étudiant soit un excellent élève ou quelqu'un qui avait habituellement des difficultés, l'IA ne semblait pas lui donner de boost magique de notes. Le « robot » n'a pas provoqué une vague d'inflation des notes.
Les chercheurs ont également vérifié si les étudiants se sentaient différemment par rapport à leurs cours. Sentaient-ils qu'ils comprenaient moins la matière ? Perdaient-ils de l'intérêt ? Le travail semblait-il plus facile ? Là encore, la réponse était majoritairement « non ». Une fois qu'ils ont pris en compte les années confuses et désordonnées de la pandémie (qui avaient déjà changé le fonctionnement des écoles), l'introduction de l'IA ne semblait pas rendre les étudiants moins impliqués ou moins satisfaits.
Alors, quel est le verdict ? L'étude suggère que la crainte que les étudiants utilisent l'IA pour « substituer » leur propre effort et obtenir des notes excellentes facilement est peut-être exagérée, du moins dans ce cadre universitaire de grande envergure. Bien que l'IA soit certainement utilisée, elle n'a pas brisé le système de notation et n'a pas fait cesser l'apprentissage des étudiants. Le « signal » d'une note semble toujours signifier ce qu'il a toujours signifié. Les chercheurs précisent prudemment que cela ne signifie pas que l'IA n'a aucun effet, mais cela signifie que l'idée effrayante selon laquelle les notes n'ont plus de sens à cause des robots n'est pas soutenue par les données qu'ils ont collectées. Les notes n'ont pas augmenté, les étudiants ne se sont pas désengagés, et le signal de l'apprentissage reste intact.
Noyé(e) sous les articles dans votre domaine ?
Recevez des digests quotidiens des articles les plus récents correspondant à vos mots-clés de recherche — avec des résumés techniques, dans votre langue.