Den nu tillbakadragna artikeln rekommenderade att Chat GPT används aktivt i undervisningen – men borde enligt kritikerna inte ha publicerats. Bild: Kiichiro Sato

Studie tillbakadragen – hävdade att Chat GPT gav bättre lärande

Förra året publicerades en forskningsartikel där två kinesiska forskare hävdade att Chat GPT har stor positiv effekt på studenters lärande.
Nu har den dragits tillbaka efter kritik, skriver den norska facktidningen Khrono.
– Litteraturen är präglad av en ”hype”, säger forskaren Magnus Ingebrigtsen till tidningen.

ANNONS

Forskningsartikeln handlar om Chat GPT:s effekt på studenters lärande och forskarna rekommenderar att integrera programmet aktivt i undervisningen.

Den har lästs över 470 000 gånger och citerats mer än 250 gånger i annan forskning, enligt tidsskriftets egna statistik. Men enligt två norska forskare borde den inte ens ha publicerats, skriver den norska facktidningen Krono.

Allvarliga brister

Magnus Ingebrigtsen och universitetslektor Marko Lukic vid universitetet i Tromsø kritiserade artikeln redan några veckor efter att den publicerades.

Kritiken grundade sig i att analysen bakom artikeln inte mäter själva lärandet. Den mäter mer kvaliteten på det som har producerats, till exempel akademiska texter, med hjälp från Chat GPT.

ANNONS

Det fanns även flera allvarliga brister i studien, till exempel fel antal deltagare.

Forskarna menade att felen var så stora att artikeln aldrig borde ha publicerats och att den antingen borde revideras eller dras tillbaka.

Har nu dragits tillbaka

Efter att ha identifierat bristerna kontaktade de norska forskarna de kinesiska forskarna, som svarade och erkände vissa av felen men skylde på fel i formateringen.

De norska forskarna skickade också in en kommentar till tidskriften men efter flera månader hade inget hänt.

Då skrev de istället till förlagets forskningsintegritetsgrupp. Efter fem dagar var artikeln tillbakadragen.

Forskaren: Hunnit göra skada

Enligt Magnus Ingebrigtsen har artikeln dock hunnit göra stor skada. Bland annat ska ett EU-finansierat utbildningsprojekt ha använt artikeln som argument för att AI har stor positiv effekt på lärande och flera techbolag använder den i sin marknadsföring.

– Jag tror att AI kan ha positiva effekter på lärande men också negativa effekter. Allt beror på hur vi använder det. Litteraturen är nu präglad av en ”hype” och det publiceras väldigt många artiklar om AI och utbildning. Men många av dem är metodisk svaga och kommer ändå med starkt positiva konklusioner, säger han till Khrono.

Både Khrono och GP har försökt kontakta de kinesiska forskarna för en kommentar men har i nuläget inte fått svar.

ANNONS
Läs mer
ANNONS