L'intelligence artificielle surpasse les étudiants : une étude révèle la performance de ChatGPT en cours
ParisDes chercheurs ont évalué des modèles d'IA dans un cours universitaire en informatique biomédicale et santé. William Hersh, M.D., et Kate Fultz Hollis de l'Oregon Health & Science University (OHSU) voulaient mesurer la performance de ces modèles, dont ChatGPT, dans leur classe. À la surprise générale, les modèles d'IA ont obtenu des résultats supérieurs à ceux de 75% des étudiants humains.
Des chercheurs ont évalué six modèles d'IA pour analyser leurs performances. Ils ont soumis ces modèles aux mêmes examens suivis par 139 étudiants en informatique biomédicale et sanitaire en 2023. Les IA ont obtenu des scores situés entre les 50% et 75% supérieurs lors de quiz à choix multiples et d'examens finaux comportant des réponses écrites courtes. Cette découverte pourrait transformer notre perception et notre utilisation des méthodes d'évaluation traditionnelles à l'avenir.
Points clés :
- Six modèles d'IA générative ont été testés.
- 139 étudiants ont été évalués pour comparaison.
- Les modèles IA se sont classés entre le 50e et le 75e percentile.
- Ils ont utilisé des examens à choix multiples et des réponses écrites courtes.
Les IA excellent dans les tests de connaissances. De ce fait, dans certains cours, cette technologie pourrait représenter une alternative prometteuse à l'apprentissage traditionnel, surtout pour les informations factuelles. Toutefois, l'utilisation de l'IA pour ces tâches soulève de nouvelles questions. Est-ce que ces modèles d'IA encouragent moins les étudiants à s'impliquer profondément dans le sujet, créant ainsi un environnement d'apprentissage passif?
Les enjeux éthiques de l'utilisation de l'IA dans l'éducation sont importants. Si l'IA peut mieux mémoriser et traiter l'information, cela soulève des préoccupations sur la tricherie. Comment les enseignants peuvent-ils garantir que les élèves apprennent réellement et ne se contentent pas d'utiliser l'IA pour obtenir de bonnes notes ?
L'enseignement supérieur vise à former des professionnels capables de faire bien plus que de simplement mémoriser des informations—ils doivent être en mesure d'appliquer leurs connaissances dans des situations réelles. Des compétences telles que la prise de décision, la compréhension des détails et la vision globale sont des éléments que les modèles d'IA ne maîtrisent pas encore. Cela démontre l'importance de développer de nouvelles méthodes d'évaluation qui prennent en compte non seulement les connaissances, mais aussi l'esprit critique et les compétences en résolution de problèmes.
Les modèles d'IA peuvent faciliter l'apprentissage, mais ils ne devraient pas remplacer la compréhension approfondie et la pensée critique nécessaires dans le travail professionnel. La science et la technologie évoluent rapidement, souvent plus vite que ne le peut l'IA. Ainsi, les enseignants devraient concevoir des tests qui mettent l'accent sur des compétences où l'IA est moins performante.
L'expérience menée à l'OHSU démontre comment intégrer l'IA dans l'éducation tout en garantissant que les étudiants comprennent pleinement leurs sujets.
L'étude est publiée ici:
http://dx.doi.org/10.1038/s41746-024-01251-0et sa citation officielle - y compris les auteurs et la revue - est
Hersh, W., Fultz Hollis, K. Results and implications for generative AI in a large introductory biomedical and health informatics course. npj Digit. Med., 2024 DOI: 10.1038/s41746-024-01251-0Partager cet article