AI verslaat studenten: ChatGPT scoort beter in universiteitscursus biomedische en gezondheidsinformatica
AmsterdamOnderzoekers testten AI-modellen in een universitaire cursus over biomedische en gezondheidsinformatica. William Hersh M.D. en Kate Fultz Hollis van de Oregon Health & Science University (OHSU) wilden weten hoe goed deze AI-modellen, waaronder ChatGPT, het zouden doen in hun klas. Verrassend genoeg presteerden de AI-modellen beter dan tot wel 75% van de menselijke studenten.
Onderzoekers hebben zes AI-modellen getest door hen dezelfde examens te laten maken als 139 studenten in de biomedische en gezondheidsinformatica in 2023. De AI presteerde in de top 50% tot 75% op meerkeuzevragen en eindtoetsen met korte schriftelijke antwoorden. Deze bevinding zou onze kijk op en het gebruik van traditionele testmethoden in de toekomst kunnen veranderen.
Belangrijke bevindingen:
- Zes generatieve AI-modellen zijn getest.
- 139 studenten werden geëvalueerd ter vergelijking.
- AI-modellen scoorden tussen het 50e en 75e percentiel.
- Gebruik van meerkeuzevragen en korte schrijfopdrachten.
AI kan heel goed overweg met kennistests. In sommige vakken kan technologie dus een sterk alternatief zijn voor traditioneel leren, vooral voor feitelijke kennis. Het gebruik van AI voor deze taken roept echter nieuwe vragen op. Maken deze AI-modellen studenten minder geneigd om diepgaand in de stof te duiken en creëren zij een passieve leeromgeving?
De ethische kwesties rond het gebruik van AI in het onderwijs zijn aanzienlijk. Als AI informatie beter kan onthouden en verwerken, roept dat bezorgdheid op over valsspelen. Hoe kunnen leraren er zeker van zijn dat studenten echt leren en niet slechts AI gebruiken om goede cijfers te halen?
Het hoger onderwijs heeft als doel professionals te vormen die meer kunnen dan alleen feitjes kennen; ze moeten hun kennis in praktische situaties kunnen toepassen. Vaardigheden zoals het nemen van goede beslissingen, details begrijpen en het grotere geheel overzien zijn zaken die AI-modellen nog niet aankunnen. Dit benadrukt het belang van het ontwikkelen van nieuwe toetsmethoden die niet alleen kennis, maar ook kritisch denken en probleemoplossend vermogen evalueren.
AI-modellen kunnen bij het leren helpen, maar ze mogen niet de diepe kennis en het kritisch denken vervangen die nodig zijn voor professioneel werk. Wetenschap en technologie veranderen snel, vaak sneller dan AI kan bijhouden. Daarom zouden leraren testen moeten creëren die zich richten op vaardigheden waar AI minder sterk in is.
Het experiment aan de OHSU toont hoe AI effectief in het onderwijs kan worden geïntegreerd, terwijl studenten toch een diepgaand begrip van hun vak behouden.
De studie is hier gepubliceerd:
http://dx.doi.org/10.1038/s41746-024-01251-0en de officiële citatie - inclusief auteurs en tijdschrift - is
Hersh, W., Fultz Hollis, K. Results and implications for generative AI in a large introductory biomedical and health informatics course. npj Digit. Med., 2024 DOI: 10.1038/s41746-024-01251-020 november 2024 · 01:02
AI onderweg: compacte taalmodellen voor betere prestaties op mobiele apparaten
18 november 2024 · 14:36
Precieze gedragsstudies bij muizen dankzij AI: minder dieren en snellere resultaten
Deel dit artikel