Over dit project
De laatste jaren is er opmerkelijke vooruitgang geboekt in de vloeiendheid van chatbots (bijv. Chat-GPT), gestimuleerd door de ontwikkeling van grote taalmodellen. Deze chatbots antwoorden vaak op een mensachtige manier op zelfs de meest bizarre vragen. Dit ogenschijnlijke succes heeft geleid tot heftige discussies over de vraag of chatbots taal echt begrijpen, of dat ze alleen maar de handelingen uitvoeren.
Om deze vraag adequaat te kunnen beantwoorden, zullen we een tool ontwikkelen die taalbegrip meet door bijvoorbeeld te meten in hoeverre bedoelde betekenissen worden begrepen die verder gaan dan de letterlijke betekenis. Vervolgens vergelijken we de prestaties van chatbots met die van mensen om de vraag te beantwoorden in hoeverre chatbots taal echt begrijpen.