AI-genererade provsvar missar upptäckt av lärare i 94% av fallen

Lästid: 2 minuter
Av Jamie Olivos
- i
Automatiserat betygssättningssystem saknar AI-skapade testsvar.

StockholmForskare vid University of Reading i Storbritannien upptäckte att examinatorer ofta misslyckas med att upptäcka AI-genererade svar. Studien leddes av universitetslektor Peter Scarfe och professor Etienne Roesch från institutionen för psykologi och kliniska språkvetenskaper. De fann att av ChatGPT genererade svar förblev oupptäckta 94% av gångerna.

Undersökningen granskade psykologikurser på grundnivå. AI-genererade svar passerade obemärkt och fick faktiskt högre betyg än de som skrevs av riktiga studenter. Forskarna menar att detta visar att lärare snabbt måste förstå hur AI kan påverka sättet vi bedömer skolarbete på.

Studien upptäckte flera betydelsefulla insikter:

  • 94% av AI-genererade svar upptäcktes inte.
  • AI-svar fick i genomsnitt högre betyg.
  • Studien från Reading är den största och mest robusta i sitt slag med blindtest.

Universitetsledare överväger att ompröva sina riktlinjer på grund av studien. Universitetet i Reading har utfärdat ny vägledning till personal och studenter om användningen av AI i utbildning. Professor Roesch påpekade att lärare behöver bestämma hur studenter bör använda och hänvisa till AI. Denna fråga är viktig för utbildningen och för att upprätthålla förtroendet i samhället.

Professor Roesch säger att studiens resultat visar att vi behöver agera. Mindre än 10 % av skolorna har riktlinjer för generativ AI, vilket tyder på att mycket arbete återstår. En UNESCO-undersökning av 450 skolor och universitet belyser denna brist på beredskap. Dr. Scarfe nämnde att många skolor har ersatt traditionella prov med mer inkluderande bedömningsmetoder. Det är dock viktigt att förstå de globala utmaningar som AI medför.

Universitetet i Reading föregår med gott exempel genom att granska och förbättra sina system för att hålla de akademiska standarderna höga. Professor Elizabeth McCrum, prorektor för utbildning och studentupplevelse, framhöll att AI kommer att förändra många aspekter av våra liv, inklusive sättet vi lär oss på.

Universitetet arbetar med ett omfattande projekt för förbättring. De använder mer teknik för att göra studenternas upplevelser bättre och för att hjälpa dem att utveckla färdigheter inför arbetslivet. En del av planen är att ersätta gamla testmetoder med sådana som motsvarar arbetslivets färdigheter, vilket inkluderar användning av AI.

Att dela nya undervisningsmetoder är viktigt för utbildning globalt. Det hjälper studenter att bättre visa vad de kan och förstår. Professor Roesch betonade vikten av att upprätthålla höga akademiska och forskningsstandarder, särskilt med den ökande användningen av AI.

University of Reading uppmanar den globala utbildningssektorn att följa deras exempel. Skolor behöver utarbeta nya regler och riktlinjer för användningen av AI. Detta är avgörande för att säkerställa rättvisa bedömningar och upprätthålla allmänhetens förtroende. Forskare insisterar på omedelbara åtgärder för att hantera denna nya utmaning.

Studien publiceras här:

http://dx.doi.org/10.1371/journal.pone.0305354

och dess officiella citering - inklusive författare och tidskrift - är

Peter Scarfe, Kelly Watcham, Alasdair Clarke, Etienne Roesch. A real-world test of artificial intelligence infiltration of a university examinations system: A “Turing Test” case study. PLOS ONE, 2024; 19 (6): e0305354 DOI: 10.1371/journal.pone.0305354
Artificiell Intelligens: Senaste nytt

Dela den här artikeln

Kommentarer (0)

Posta en kommentar
NewsWorld

NewsWorld.app är en gratis premium nyhetssida. Vi tillhandahåller oberoende och högkvalitativa nyheter utan att ta betalt per artikel och utan en prenumerationsmodell. NewsWorld anser att allmänna, affärs-, ekonomiska, tekniska och underhållningsnyheter bör vara tillgängliga på en hög nivå gratis. Dessutom är NewsWorld otroligt snabb och använder avancerad teknik för att presentera nyhetsartiklar i ett mycket läsbart och attraktivt format för konsumenten.


© 2024 NewsWorld™. Alla rättigheter reserverade.