Interessante inzichten
Onlangs is de AI-geletterdheidstoets afgenomen onder eerstejaarsstudenten van de faculteit der Natuurwetenschappen, Wiskunde en Informatica (FNWI), als extra module bij de diagnostische taaltoets (RADAr). De resultaten leveren nu al enkele interessante inzichten op, vertelt Bram: “Ten eerste blijkt er een redelijk grote groep te zijn die nog geen of weinig gebruikmaakt van AI. Ook zien we dat er veel verschillen zijn tussen studenten. De scores lopen erg uiteen, zowel bij de zelfinschatting als de kennisvragen. Opvallend is dat over het algemeen de score bij de kennisvragen lager is dan de score die studenten hun eigen kennis en kunde geven. Ze overschatten zichzelf dus nogal eens. En wat ook heel interessant is: studenten die hoog scoren op taalvaardigheid, scoren ook hoog op AI-geletterdheid. We zijn heel benieuwd of deze uitkomsten per faculteit verschillen.”
Hulpmiddel EU AI-act
Naast de FNWI hebben ook andere faculteiten al interesse getoond om de AI-toets af te nemen. Ondertussen werkt In’to aan een variant van de module om de AI-geletterdheid van medewerkers van de RU te toetsen. “Dit helpt de universiteit te voldoen aan de EU AI-act, die organisaties verplicht om te zorgen voor voldoende AI-geletterdheid bij het personeel. Om ook andere organisaties hierbij te ondersteunen, willen we de toetsmodule ook buiten de universiteit gaan aanbieden.”
De toekomst van toetsing
Naast de vraag hoe we studenten verantwoord om laten gaan met AI, roept de toenemende invloed van AI ook de vraag op: zijn traditionele toetsvormen, zoals scripties en andere schrijfopdrachten, nog passend? Bram: “AI dwingt ons om opnieuw te kijken wat we precies willen meten, oftewel: wat vinden we dat studenten moeten kennen en kunnen? Als je schrijfopdrachten zo makkelijk uitbesteedt aan een taalmodel, hoe meten we dan nog de vaardigheden en inzichten van de student zelf? Moeten we dan vooral het proces beoordelen in plaats van het eindresultaat? Is dat haalbaar en zinvol? En wat betekent dit voor schrijf- en taalvaardigheid zelf: worden deze minder belangrijk, of juist extra belangrijk omdat ze essentieel zijn om op een effectieve en kritische manier taalmodellen te gebruiken? Daar hebben wij ook nog geen antwoorden op, maar het zijn zeker vragen die de toetswereld, en het onderwijs in bredere zin, ingrijpend zullen veranderen.”
Eén ding is zeker: AI gaat niet meer weg. Daarom is het essentieel dat zowel studenten als docenten leren bewust en kritisch met deze technologie om te gaan. Met de nieuwe toetsmodule AI-geletterdheid zet In'to Languages alvast een stap in die richting.