ChatGPT a obtenu des résultats similaires ou supérieurs à ceux des étudiants universitaires dans 9 cours sur 32 en répondant aux questions d’évaluation, selon une étude impliquant NYUAD. Bien que 74 % des étudiants interrogés dans cinq pays utiliseraient ChatGPT, 70 % des enseignants considèrent son utilisation comme du plagiat.
Une étude récente publiée dans Rapports scientifiques suggère que les performances de ChatGPT en répondant aux questions d’examen dans diverses disciplines telles que l’informatique, la politique, l’ingénierie et la psychologie, peuvent être comparables, voire dépasser, les performances d’un étudiant universitaire moyen. De plus, l’étude a révélé que près de 75 % des étudiants interrogés ont exprimé leur volonté d’utiliser ChatGPT pour les aider dans leurs devoirs, malgré la perception de nombreux éducateurs selon laquelle l’utilisation de ChatGPT équivaut à du plagiat.
Pour étudier les performances de ChatGPT lors de la rédaction des évaluations universitaires par rapport aux étudiants, Talal Rahwan et Yasir Zaki ont invité des membres du corps professoral qui enseignaient différents cours à L’Université de New York Abu Dhabi (NYUAD) pour fournir trois soumissions d’étudiants chacune pour dix questions d’évaluation qu’ils avaient définies.
ChatGPT a ensuite été invité à produire trois ensembles de réponses aux dix questions, qui ont ensuite été évaluées parallèlement aux réponses écrites des étudiants par trois évaluateurs (qui ne connaissaient pas la source des réponses). Les réponses générées par ChatGPT ont obtenu une note moyenne similaire ou supérieure à celle des étudiants dans 9 des 32 cours. Seuls les cours de mathématiques et d’économie ont vu les étudiants surpasser systématiquement ChatGPT. ChatGPT a surpassé les étudiants le plus nettement dans le cours « Introduction aux politiques publiques », où sa note moyenne était de 9,56 contre 4,39 pour les étudiants.
Les auteurs ont également interrogé 1 601 personnes du Brésil, d’Inde, du Japon, des États-Unis et du Royaume-Uni (dont au moins 200 étudiants et 100 enseignants de chaque pays) sur la possibilité d’utiliser ChatGPT pour faciliter leurs travaux universitaires. 74 % des étudiants ont indiqué qu’ils utiliseraient ChatGPT dans leur travail. En revanche, dans tous les pays, les enseignants ont sous-estimé la proportion d’élèves qui envisagent d’utiliser ChatGPT et 70 % des enseignants ont déclaré qu’ils considéreraient son utilisation comme du plagiat.
Enfin, les auteurs rapportent que deux outils d’identification du texte généré par l’IA – GPTZero et AI text classifier – ont mal classé les réponses ChatGPT générées dans cette recherche comme écrites par un humain respectivement 32 % et 49 % du temps.
Ensemble, ces résultats offrent des informations qui pourraient éclairer les politiques relatives à l’utilisation des outils d’IA dans les milieux éducatifs.
